Observación experimental del movimiento de cabeceo en la comunicación remota utilizando ARM-COMS

Observación experimental del movimiento de cabeceo en la comunicación remota utilizando ARM-COMS

Teniendo en cuenta los problemas críticos de la comunicación remota, este estudio propone una idea de la conexión virtual de las personas remotas a través de sistemas de telepresencia aumentados llamados ARM-COMS (eMbodied con soporte de Arm Sistema de monitor de comunicación). Se han propuesto varias ideas de sistemas de comunicación remota basados en robots para desafiar el problema de la telepresencia de los participantes remotos. Sin embargo, no cubre el tema de la relación. Una idea del sistema robótico de tipo brazo y / o una idea de antropomorfización atrae la atención de los investigadores para desafiar la falta de relación con los participantes remotos. Sin embargo, el uso del movimiento del cuerpo humano de una persona remota como un mensaje no verbal o medios ciberfísicos en la comunicación remota sigue siendo un problema abierto. Bajo estas circunstancias, este documento describe la configuración del sistema de ARM-COMS basado en la idea propuesta y discute la viabilidad de la idea utilizando las observaciones experimentales.

Palabras clave:

• Medios de comunicación ciberfísicos.
• Comunicación incorporada telepresencia aumentada manipulación de brazo robótico.
• Detección facial.

1. Introducción

El teléfono de TV era considerado como un sueño para las herramientas de comunicación en las películas de SF en los viejos tiempos. Sin embargo, una herramienta de comunicación de video basada en un teléfono inteligente es ahora una de las herramientas populares y convenientes disponibles gratuitamente para casi todos. Con el apoyo de las tecnologías de las TIC (tecnología de la información y la comunicación), se espera una mayor mejora de una mejor comunicación. Mientras tanto, esta herramienta aborda los dos tipos de problemas críticos, que son la falta de sensación de telepresencia y la falta de sentimiento de relación en la comunicación remota por video en lugar de una comunicación cara a cara.

Se han propuesto varias ideas de sistemas de comunicación remota basados ​​en robots como una de las soluciones al problema anterior; Estos robots incluyen robots de telepresencia física. La antropomorfización es otra idea nueva para mostrar la telepresencia de una persona remota en el sistema de comunicación. La comunicación remota puede ser apoyada básicamente por las funciones primitivas de los robots físicos de telepresencia, como la visualización de imágenes faciales del operador, así como la función de teleoperación, como la capacidad de conducción remota para moverse o la tele-manipulación. Sin embargo, todavía hay un tema abierto que debe estudiarse para reducir la brecha entre la comunicación por video basada en robot y la comunicación cara a cara.

El segundo problema en la falta de sentimiento de tipo de relación en la comunicación remota por video es otro gran desafío. Recientemente, una idea de sistemas robóticos tipo brazo llama la atención de los investigadores. Por ejemplo, Kubi, que es un robot de tipo brazo no móvil, permite que el usuario remoto "mire a su alrededor" durante la comunicación de video al ordenarle a Kubi dónde apunte la tableta con un control remoto intuitivo a través de la red. Además, también se ha informado que una idea de pantalla de movimiento mejorada muestra su viabilidad sobre la pantalla convencional. Sin embargo, el uso del movimiento del cuerpo humano de una persona remota como mensaje no verbal sigue siendo un tema abierto.

Este estudio propone una idea de la interacción humano-computadora a través de la conexión de individuos remotos con sistemas de telepresencia aumentados llamados ARM-COMS (Sistema de Monitoreo de Comunicaciones eMbodied apoyado por ARm). El desafío de esta idea es utilizar el movimiento del cuerpo humano de una persona remota como un mensaje no verbal para compartir la comunicación conectada, e implementar un medio ciberfísico utilizando ACM-COMS para la comunicación remota conectada.

1.  Descripción general de ARM – COMS (Sistema de monitor de comunicación eMbodied compatible con Arm)

1. Descripción general del sistema de ARM – COMS

Considerando el movimiento de arrastre físico en la comunicación humana, esta investigación desafía estos dos problemas mencionados en la Secta. 1 por la idea de ARM-COMS (Sistema de Monitoreo de Comunicaciones eMbodied compatible con ARm). Este artículo se centra en el movimiento de asentimiento como contenido de un mensaje no verbal en comunicación remota utilizando ARM-COMS. La Figura 1 muestra la descripción general del sistema de ARM-COM para el experimento en este estudio. El procedimiento de detección de rostros de un prototipo de ARM-COMS se basa en el algoritmo de FaceNet, que incluye la biblioteca de procesamiento de imágenes OpenCV 3.1.0, la biblioteca de aprendizaje automático dlib 18.18 y la herramienta de detección de rostros OpenFace que se instalaron en una PC de control con Ubuntu 14.04 como se muestra en la Fig. 2. Usando los datos de imagen de entrada de la cámara USB, se procesa la detección de puntos de referencia.

ARM-COMS se compone de una tableta y un brazo robótico de escritorio. La PC de mesa en ARM-COMS es un dispositivo típico de TIC (tecnología de la información y la comunicación) y el brazo robótico de escritorio funciona como un manipulador de la tableta, de la cual la posición y los movimientos se manipulan de forma autónoma en función del comportamiento de un usuario humano que se comunica con persona remota a través de ACM-COMS. Esta manipulación autónoma de ARM-COMS está controlada por el movimiento de la cabeza, que puede ser reconocido por uno de los sensores portátiles típicos, como un sensor magnético, giroscopio, sensor de captura de movimiento o cámaras típicas, como el sensor Kinect, o una cámara USB general.

1. Configuración del sistema de ARM-COMS para uso de red

ARM-COMS está configurado para implementar la comunicación de red como se muestra en la Fig. 2. El movimiento de la cabeza del Sujeto A se utiliza como una comunicación no verbal para ARM-COMS que interactúa con el Sujeto B. La comunicación de video en sí fue realizada por un software típico (Skype ) Sin embargo, los datos de la imagen de movimiento de la cabeza son procesados por los algoritmos de detección de rostros mencionados en la Secta. 2.1, que se utilizó para activar el movimiento de ARM-COMS instalado en el sitio del sujeto B.

...