Open-Source Kinesis realiza ingeniería inversa de la Neural Band de Meta para el control de Mac mediante los músculos

Meta diseñó originalmente la «Neural Band» como dispositivo de entrada para sus gafas de realidad aumentada Ray-Ban Display. En lugar de recurrir a cámaras para seguir el movimiento de las manos en el aire, la pulsera utiliza electromiografía de superficie (sEMG) para leer las minúsculas señales eléctricas que el sistema nervioso del usuario envía a lo largo del brazo. Cada vez que detecta un movimiento espasmódico del dedo o un pellizco con el pulgar, los sensores en contacto con la piel detectan los impulsos motores incluso antes de que el dedo complete el movimiento físico, creando así un controlador invisible y de baja fatiga que funciona cuando las manos se encuentran en una posición natural. Sin embargo, hasta hace poco esta tecnología se limitaba al propio hardware de Meta.

Kinesis, un proyecto de código abierto publicado en GitHub por el desarrollador callbacked, ha realizado ingeniería inversa del flujo de paquetes sin cifrar de Bluetooth Low Energy (BLE) de la pulsera. La utilidad de la barra de menús de Kinesis se empareja directamente con el hardware a través de Bluetooth, eludiendo por completo los demonios propietarios y los servidores en la nube de Meta. Al traducir los impulsos sin procesar del sensor neuromuscular en eventos del sistema macOS, un pellizco entre el pulgar y el índice se registra como un clic del ratón, el movimiento giratorio de los dedos ajusta el volumen del sistema y un pequeño movimiento de muñeca permite cambiar entre los espacios de escritorio virtuales en Mission Control.

En estos momentos, la implementación de Kinesis se limita a macOS. Sin embargo, parece prácticamente seguro que contará con una amplia compatibilidad multiplataforma. Dado que el desarrollador ha mapeado el protocolo BLE sin procesar de la banda en lugar de basarse en los marcos propietarios de Apple, portar el decodificador a Linux o Windows resulta sencillo y podría abrir la puerta a una navegación neuronal de escritorio de código abierto en cualquier sistema operativo. Puede encontrar más información sobre Kinesis en el enlace que figura a continuación.