El acceso por voz de Google detecta íconos en la aplicacion en dispositivos Android

Google imagen relacionada

Google acaba de actualizar Voice Access y eso significa que con la nueva versión, los usuarios de Android ahora podrán controlar mejor sus dispositivos de la manera que deseen con la ayuda de comandos de voz.

La nueva configuración aprovechará un modelo de aprendizaje automático de nivel más avanzado que ahora tiene el potencial de detectar automáticamente los íconos que están presentes en la pantalla con la ayuda de capturas de pantalla de la interfaz de usuario. Esto luego llama la atención de Voice Access si elementos como imágenes e íconos tienen etiquetas de accesibilidad o no.

Para aquellos de ustedes que desconocen las etiquetas de Accesibilidad, permiten que los servicios de accesibilidad del dispositivo apunten a un elemento en pantalla a la vez y al mismo tiempo les hacen saber a los usuarios que un ciclo completo de la IU también se ha completado al mismo tiempo. Anteriormente, había algunos elementos que no tenían etiquetas, y esto es exactamente lo que la nueva versión de Voice Access planea resolver para los usuarios.

Existe un nuevo modelo de detección de objetos basado en visión llamado IconNet que se ha incorporado en la versión 5.0 de Voice Access. Ahora detectará 31 tipos de íconos diferentes y también se puede esperar que el número suba a 70 en los próximos tiempos. Al explicar el funcionamiento de IconNet, Google ha dicho a través de una publicación de blog que se ha estructurado sobre la base de la nueva arquitectura CenterNet., lo que significa que primero saca los íconos de aplicaciones relevantes de las imágenes de entrada y luego busca las ubicaciones y tamaños exactos.

Los usuarios, por otro lado, solo deben referirse a los íconos a través de Voice Access y serán dirigidos a ellos por IconNet a través de nombres, por ejemplo, "Toque 'menú'".

Los ingenieros de Google han trabajado duro con IconNet desde que comenzaron a recopilar y etiquetar más de 700.000 capturas de pantalla de aplicaciones. Luego, el equipo agilizó el proceso con heurística, modelos auxiliares y técnicas de aumento de datos, que resultaron ser bastante efectivas para seleccionar íconos más raros y enriquecer las capturas de pantalla existentes con íconos poco frecuentes también.

Como resultado, IconNet está optimizado de tal manera que funcionará sin problemas en dispositivos con entornos móviles, tamaño compacto y tiempo de inferencia rápido, mientras que en conjunto ofrecen una experiencia de usuario perfecta.

Google también tiene planes de aumentar la gama de elementos que serán compatibles con IconNet desde imágenes genéricas y texto hasta botones. En un futuro próximo, IconNet también podrá diferenciar entre dos o más íconos de apariencia similar en función de su funcionalidad.

En la vanguardia del desarrollo, Google también aumentará la cantidad de aplicaciones que tienen descripciones de contenido válidas, ya que también ofrecerá herramientas mucho mejoradas para sugerir correctamente las descripciones de contenido para diferentes elementos cuando los desarrolladores estén trabajando para crear sus propias aplicaciones.

Google lanzó por primera vez la versión beta de Voice Access en 2016 junto con otros esfuerzos de accesibilidad móvil. Actualmente, la compañía también está trabajando en Lookout, que es una aplicación centrada en la accesibilidad y puede identificar alimentos envasados ​​usando visión por computadora, escanear documentos para que sea fácil revisar cartas y correos electrónicos de una sola vez, y mucho más.

También hemos escuchado sobre el Proyecto Euphonia, que estará dedicado a personas con discapacidades del habla, Live Relay, basado en el reconocimiento de voz en el dispositivo y la conversión de texto a voz para que los teléfonos puedan escuchar y hablar en nombre de su propietario en un futuro próximo. , y también Project Diva, a través del cual puedes dar comandos al Asistente de Google sin decir nada.

Gracias por visitar este sitio, espero que te haya gustado y vuelvas proximamente, compartela en las redes sociales, gracias

Compartir en Facebook Compartir en twitter

Semrush sigue a tu competencia

Fecha actualización el 2021-02-03. Fecha publicación el 2021-02-03. Categoría: google Autor: Oscar olg Mapa del sitio Fuente: piunikaweb