Preguntas frecuentes sobre AWS Device Farm

AWS Device Farm permite a los desarrolladores incrementar la calidad de la aplicación, el tiempo de comercialización y la satisfacción de los clientes al probar e interactuar con dispositivos Android e iOS reales en la nube de AWS. Los desarrolladores pueden cargar su aplicación y scripts de pruebas y ejecutar pruebas automatizadas simultáneamente en cientos de dispositivos reales, por lo que se obtienen resultados, capturas de pantalla, video y datos de rendimiento en minutos. También pueden depurar y reproducir los errores de los clientes deslizando los dedos por la pantalla, haciendo gestos e interactuando con un dispositivo a través de su navegador web.

P: ¿Quién debe utilizar AWS Device Farm y por qué?

AWS Device Farm está diseñado para desarrolladores, equipos de control de calidad y representantes del servicio de soporte para clientes que crean, prueban y brindar soporte para aplicaciones móviles para mejorar la calidad de las mismas. La calidad de las aplicaciones es cada vez más importante y compleja, dada la cantidad de modelos de dispositivos, tipos de firmware y versiones de sistemas operativos, elementos personalizados por el operador y el fabricante, y la dependencia de servicios remotos y de otras aplicaciones. AWS Device Farm acelera el proceso de desarrollo al ejecutar pruebas en varios dispositivos, lo que aporta a los desarrolladores y profesionales de control de calidad y soporte la capacidad de ejecutar tareas manuales y pruebas automatizadas, como la reproducción de los problemas de los clientes, pruebas exploratorias de funcionalidades nuevas y la ejecución de planes de pruebas manuales. Además, AWS Device Farm ofrece un ahorro significativo al eliminar la necesidad de contar a nivel interno con laboratorios de dispositivos y directores de laboratorio y de desarrollar una infraestructura de automatización.

P: ¿Qué tipos de aplicaciones admite AWS Device Farm?

AWS Device Farm admite aplicaciones Android, iOS y web nativas e híbridas y aplicaciones multiplataforma, incluidas las creadas con PhoneGap, Titanium, Xamarin, Unity y otros marcos de trabajo.

P: ¿AWS Device Farm utiliza simuladores o emuladores?

Las pruebas de AWS Device Farm se ejecutan en dispositivos reales. Los dispositivos constituyen una combinación de dispositivos de fabricantes de marcas originales y dispositivos de la marca del operador.

P: ¿Cómo puedo comenzar a utilizar AWS Device Farm?

Consulte nuestra guía de introducción.

P: ¿Qué navegadores admite la consola de AWS Device Farm?

AWS Device Farm es compatible con Internet Explorer 9 o superior y las versiones más recientes de Chrome, Firefox y Safari.

P: ¿Qué navegadores se pueden usar para probar las aplicaciones web?

Las aplicaciones web se probarán con Chrome en Android y con Safari en iOS.

P: ¿Cuál es el tamaño máximo de archivo para aplicaciones y pruebas?

AWS Device Farm admite archivos de hasta 4 GB de tamaño.

P: ¿Tengo que instrumentar mi aplicación o proporcionar código fuente?

Para utilizar las pruebas integradas, la aplicación no requiere instrumentación ni código fuente. Las aplicaciones Android se pueden proporcionar tal y como están. Las aplicaciones iOS deberían crearse con un “dispositivo iOS” como destino en lugar de un simulador.

P: ¿Se almacenan la aplicación, las pruebas y otros archivos en sus servidores? ¿Durante cuánto tiempo?

Las aplicaciones y los paquetes de prueba se eliminan automáticamente a los 30 días. Los registros, las grabaciones de video y otros artefactos se almacenan durante 400 días. También puede eliminar los archivos y los resultados en cualquier momento a través de la consola o la API de AWS Device Farm.

P: ¿Cómo limpian los dispositivos una vez finalizada mi prueba?

Una vez que se finaliza la ejecución de la prueba, realizamos una serie de tareas de limpieza en cada dispositivo, entre las que se incluye la desinstalación de su aplicación. Si no podemos comprobar la desinstalación de su aplicación o de cualquiera de los demás pasos de limpieza, el dispositivo se eliminará y ya no estará disponible.

Si bien continuamos añadiendo pasos adicionales de limpieza y mejorando el proceso, es posible que, en algunos casos, haya datos que persistan entre sesiones, especialmente si utiliza el sistema de dispositivos fuera del contexto de su aplicación. Por dicho motivo, y porque AWS Device Farm detecta videos y registros de actividades que ocurren mientras usted utiliza cada dispositivo, se recomienda evitar el suministro e ingreso de información confidencial, como información de cuentas (p. ej., cuenta de Google, ID de Apple), información personal y otros detalles confidenciales durante las sesiones de acceso remoto y las pruebas automatizadas.

P: ¿Se modifica la aplicación?

En iOS, se sustituye el perfil de aprovisionamiento integrado con un perfil comodín y se vuelve a firmar la aplicación. Si los proporciona, agregaremos datos auxiliares al paquete de la aplicación antes de la instalación, de modo que los datos estén presentes en el entorno de pruebas de su aplicación. Al volver a firmar la aplicación iOS, se eliminan ciertos derechos. Se incluyen el grupo de aplicaciones, los dominios asociados, Game Center, HealthKit, HomeKit, la configuración de accesorios inalámbricos, las compras en la aplicación, el sonido en la aplicación, Apple Pay, las notificaciones automatizadas y la configuración y control de VPN.

En Android, se vuelve a firmar la aplicación. Esto podría afectar a la funcionalidad que depende de la firma de la aplicación, como el API de Google Maps para Android. También podrían activarse los sistemas antipiratería y antimanipulación disponibles de productos como DexGuard. En las pruebas integradas, es posible que se modifique el manifiesto para incluir los permisos necesarios para realizar y guardar capturas de pantalla.

P: ¿Qué dispositivos se encuentran disponibles en AWS Device Farm? ¿Cómo se seleccionan los dispositivos de la flota?

AWS Device Farm dispone de una selección cada vez más grande de dispositivos Android, iOS y Fire OS. Agregamos dispositivos nuevos y populares cuando los lanzan los fabricantes. También agregamos dispositivos nuevos a medida que se lanzan versiones más recientes de los sistemas operativos. Consulte la lista de dispositivos disponibles.

P: ¿Dispone AWS Device Farm de dispositivos internacionales procedentes de mercados como Europa, China e India?

En la actualidad, contamos con dispositivos internacionales de India. Utilizamos los datos de estudio de mercado y los comentarios de los clientes para actualizar la flota constantemente. Si desea que incluyamos algún dispositivo que no aparece en la flota, háganoslo saber.

P: ¿Cómo selecciono los dispositivos? ¿Puedo volver a realizar pruebas en el mismo dispositivo?

Para las pruebas automatizadas, los dispositivos se seleccionan de entre un grupo, denominado conjunto de dispositivos. Algunos grupos de dispositivos preparados se proporcionan automáticamente, pero también puede crear sus propios grupos. Durante las pruebas, estas se ejecutan en todos los dispositivos del grupo específico que son compatibles con su aplicación y con las pruebas. Para el acceso remoto, selecciona el dispositivo que desee en función de la marca, el modelo, la versión del operador y la versión del sistema operativo. A continuación, y de forma opcional, puede cargar aplicaciones y otros datos, así como configurar otros ajustes del dispositivo. Entonces, Device Farm busca el dispositivo que se ajuste a sus requisitos y le muestra la pantalla en su navegador. A partir de ese momento, puede interactuar con el dispositivo y realizar capturas de pantalla y de video.

P: ¿Existe alguna aplicación preinstalada en los dispositivos de pruebas de AWS Device Farm?

Sí, los dispositivos de prueba contienen varias aplicaciones ya instaladas por la operadora o por el fabricante del dispositivo.

P: ¿Pueden comunicarse los dispositivos con otros servicios o sistemas disponibles en Internet?

Sí. Todos los dispositivos disponen de conexión wifi con acceso a Internet. Si sus sistemas son internos (es decir, están detrás de un firewall corporativo), puede permitir el intervalo de direcciones IP 54.244.50.32-54.244.50.63. Todo el tráfico de dispositivos procederá de estas IP.

P: ¿Puedo probar diferentes conexiones y condiciones de operadores?

Aunque no es posible probar las conexiones de los operadores reales, puede simular los tipos y las condiciones de la conexión con la funcionalidad de modificación de red. Cuando programe una serie de pruebas, puede seleccionar un perfil de red preconfigurado, como “3G” o “Lossy LTE”, o crear el suyo y controlar parámetros como el desempeño, las vibraciones y la pérdida. Todo el tráfico Wi-Fi del dispositivo se modificará y manipulará durante las pruebas en función del perfil que elija. También puede simular entornos dinámicos cambiando los parámetros de red de sus scripts de prueba.

P: ¿Puedo realizar llamadas o enviar SMS desde los dispositivos?

No, los dispositivos no cuentan con conexión al operador y no pueden realizar llamadas ni enviar SMS.

P: ¿Puedo usar la cámara del dispositivo?

Sí, puede utilizar las cámaras del dispositivo, tanto la frontal como la trasera. Debido al modo en que están montados los dispositivos, es posible que los videos y las imágenes salgan oscuros y borrosos.

P: Todavía no dispongo de scripts de pruebas automatizadas. ¿Para qué sirven las pruebas integradas?

El conjunto de pruebas de compatibilidad integradas le permite instalar, desinstalar, lanzar y ejecutar Fuzz en la aplicación.

P: ¿Para qué sirve Fuzz?

Fuzz realizará pruebas de exploración de vulnerabilidades mediante datos aleatorios en la interfaz de usuario tras el lanzamiento. Transmite datos de usuario aleatorios (como toques, deslizamientos y pulsaciones del teclado) de manera rápida a su aplicación. Puede configurar la cantidad de eventos, el retraso entre los mismos y el valor de inicialización utilizado para aleatorizar los eventos. El uso del mismo valor de inicialización en las distintas series de pruebas resultará en la misma secuencia de eventos.

P: Realizo pruebas con un marco de automatización. ¿Qué marcos se admiten?

AWS Device Farm admite las pruebas en aplicaciones nativas, híbridas y web para las plataformas iOS y Android. De forma predeterminada, se admiten los siguientes marcos: Appium Java JUnit, Appium Java TestNG, Appium Python, Appium Ruby, Appium NodeJS, Instrumentation (que incluye JUnit, Espresso y la mayoría de las pruebas basadas en instrumentación) y XCTest (que incluye XCUI y KIF). Para obtener más información y una lista completa de los marcos compatibles, consulte nuestra documentación.

P: ¿Qué marcos de prueba se admiten para las aplicaciones web?

Puede ejecutar pruebas escritas en Appium Java JUnit, Appium Java TestNG o Appium Python.

P: ¿Es posible admitir un marco modificado o uno que yo haya diseñado?

Evaluamos constantemente los marcos que admitimos. Contáctenos.

P: ¿Cómo decide AWS Device Farm cuándo debe realizar una captura de pantalla durante una prueba?

Si utiliza uno de los marcos de automatización compatibles, poseerá el control absoluto y podrá decidir cuándo realizar una captura de pantalla. Las capturas de pantalla se incluyen en los informes automáticamente.

P: Android: ¿Se encuentra Google Play Services disponible en los dispositivos? ¿Qué versión hay instalada?

Sí, Google Play Services está instalado en los dispositivos que lo admiten. Los servicios se actualizan a medida que se publican nuevas versiones.

P: Android: ¿Existe una cuenta de Google predeterminada en los dispositivos?

No, los dispositivos no poseen una cuenta de Google activa.

P: ¿AWS Device Farm admite la automatización de la grabación y reproducción o tengo que escribir mis propios scripts?

AWS Device Farm admite marcos como Espresso y Robotium, que cuentan con herramientas de scripting de grabación y reproducción.

P: iOS: ¿Tengo que agregar UDID a mi perfil de aprovisionamiento?

No, AWS Device Farm sustituirá el perfil de aprovisionamiento y volverá a firmar la aplicación automáticamente para que se pueda implementar en nuestros dispositivos.

P: iOS: mi aplicación no contiene símbolos de depuración. ¿Puedo proporcionar un archivo dSYM a AWS Device Farm?

No, pero puede descargar los registros y simbolizar el seguimiento de las pilas a nivel local.

P: Android: mi aplicación está ofuscada. ¿Puedo probarla de todas maneras en AWS Device Farm?

Sí, si utiliza ProGuard. Si utiliza DexGuard con las medidas antipiratería, no podremos volver a firmar la aplicación y ejecutar pruebas con ella.

P: Mi aplicación contiene anuncios. ¿Se mostrarán en los dispositivos? ¿Considerará mi proveedor de anuncios que se ha producido un abuso y bloqueará mi cuenta?

Aunque los dispositivos tienen acceso a Internet, no podemos garantizar que se muestren los anuncios. Le aconsejamos que elimine los anuncios de las versiones que vaya a probar en AWS Device Farm.

P: ¿Puedo obtener acceso al equipo que hospeda el dispositivo u obtener acceso a su shell como parte de las pruebas? ¿Puedo acceder a Internet a través de él?

Sí. Si está utilizando un marco cliente-servidor como Calabash, Appium o UI Automation, puede acceder a Internet y ejecutar comandos shell limitados desde el host.

P: Me gustaría proporcionar recursos multimedia u otros datos para que los utilice mi aplicación. ¿Qué debo hacer?

Puede proporcionar un archivo .zip de hasta 4 GB de tamaño. En Android, se extraerá a la raíz de la memoria externa y, en iOS, al entorno de pruebas de la aplicación. En el caso de los archivos de expansión (OBB) de Android, el archivo se colocará automáticamente en la ubicación apropiada para la versión del sistema operativo. Para obtener más información, consulte la Guía para desarrolladores.

P: Mi aplicación necesita dependencias para poder probar todas las funcionalidades. ¿Puedo instalar otras aplicaciones?

Sí, puede seleccionar varias aplicaciones y el orden en que estas se instalan. Las aplicaciones dependientes se instalarán antes de que comiencen las pruebas.

P: ¿Puedo probar los flujos de actualización de mi aplicación? ¿Cómo instalo una versión antigua de la aplicación?

Sí. Si desea probar el flujo de actualización, puede subir e instalar una versión antigua de la aplicación antes de instalar y probar la versión nueva.

P: Mi aplicación utiliza servicios de ubicación. ¿Puedo especificar la ubicación física del dispositivo?

Sí, puede proporcionar las coordenadas de latitud y longitud que sustituirán a la configuración del GPS del dispositivo.

P: ¿Puedo ejecutar pruebas de localización? ¿Cómo se cambia el idioma del dispositivo?

Sí, puede proporcionar una configuración regional (por ejemplo, "en_US"), que sustituya a la configuración regional predeterminada del dispositivo.

P: ¿Cuánto tiempo se tarda en comenzar la prueba?

Las pruebas se agregan a la cola de ejecución inmediatamente y suelen comenzar en cuestión de minutos. Si uno o más dispositivos no se encuentran disponibles, la ejecución de las pruebas en esos dispositivos permanecerá en cola hasta que su estado sea disponible. La serie de pruebas continuará en los demás dispositivos.

P: ¿Cuál es el tiempo máximo que puede durar una prueba?

El tiempo máximo permitido es de 150 minutos. 

P: ¿Existe algún modo en AWS Device Farm de ejecutar pruebas y obtener resultados a través de una API?

Sí. Tenemos un complemento para el entorno de integración continua Jenkins y uno Gradle compatible con Android Studio. AWS Device Farm también brinda compatibilidad mediante programación para todas las características de la consola, incluida la configuración de una prueba y la descarga de los resultados de la misma a través de una API. Para obtener más información, consulte la referencia de las API de AWS Device Farm. Además de la API, puede acceder a AWS Device Farm desde los AWS SDK.

P: ¿Qué es Selenium?

Selenium es un marco de código abierto que automatiza la interacción de los navegadores web. Puede obtener más información sobre Selenium aquí.

P: ¿En qué consisten las pruebas del navegador de escritorio en AWS Device Farm?

Device Farm permite ejecutar sus pruebas de Selenium en diferentes navegadores de escritorio y en diferentes versiones de navegadores que se alojan en la nube de AWS. Device Farm sigue un modelo de ejecución del lado del cliente para las pruebas de Selenium, es decir, sus pruebas se ejecutan en su propia máquina local pero interactúan con navegadores alojados en AWS Device Farm a través de la API de Selenium.

P: ¿Cómo comienzo a utilizar las pruebas del navegador de escritorio en AWS Device Farm?

Para comenzar, consulte nuestra guía de introducción aquí.

P: ¿En qué sistema operativo se alojan los navegadores?

Todos los navegadores se alojan en las instancias EC2 de Windows, las cuales se ejecutan en el servidor de Microsoft Windows.

P: ¿Qué tipo de navegadores de escritorio admite AWS Device Farm?

Puede ver la lista de navegadores de escritorio y de versiones de navegadores compatibles aquí.

P: ¿Qué capacidades deseadas admite AWS Device Farm?

Puede ver la lista de capacidades deseadas de Selenium que admite Device Farm aquí.

P: ¿Qué artefactos están disponibles para solucionar fallas de prueba?

Device Farm genera registros de consola, registro de controladores web, registros de acciones y grabaciones de videos de toda la prueba para ayudarlo a resolver las fallas de prueba.

P: ¿Puedo usar AWS Device Farm para probar mi aplicación web en dispositivos móviles reales?

Sí. Device Farm admite la prueba de aplicaciones web en dispositivos móviles reales mediante el uso de Appium. Consulte nuestra guía para desarrolladores sobre las pruebas web con Appium para obtener más información. Tenga en cuenta que para realizar la prueba en dispositivos móviles reales, Device Farm sigue un modelo de ejecución del lado del servidor y, por lo tanto, deberá cargar sus pruebas al servicio.

P: ¿Cuáles son los límites de las pruebas del navegador de escritorio en AWS Device Farm?

Puede encontrar todos los límites de esta característica aquí.

P: ¿Cuánto cuesta la prueba del navegador de escritorio en AWS Device Farm?

Los precios dependen de los minutos de instancia, que se determinan a partir de la duración de las pruebas en cada instancia de navegador seleccionada. Se le cobrarán 0,005 USD por minuto de instancia de navegador.

P: ¿Qué es el minuto de instancia?

Un minuto de instancia es la unidad de facturación para la prueba del navegador de escritorio en Device Farm. Los minutos de instancia son una medida del tiempo que se tarda (en minutos) en ejecutar las pruebas en cada instancia de navegador que seleccionó para la ejecución de su prueba. El precio unitario de 0,005 USD es constante independientemente del navegador o de la versión del navegador que haya seleccionado. No cobramos por el tiempo que tarda lanzar, iniciar o desconectar la instancia EC2 que aloja el navegador.