Uma equipe de pesquisa da Universidade da Califórnia, San Diego e MIT, lançou recentemente um projeto de sistema operacional remoto de código aberto chamado Open-Television, uma tecnologia que pode ser considerada como um avanço revolucionário no campo do controle remoto. O sistema pode realizar o controle preciso do robô a 3.000 milhas de distância, fazendo o operador sentir como se estivesse em cena no filme de ficção científica "Avatar", e percebe o controle remoto do mundo físico através da tecnologia de realidade virtual.
O sistema de televisão aberta demonstra excelente compatibilidade de dispositivos e suporta uma variedade de dispositivos de terminal, incluindo Vision Pro, Quest Series, Mac, iPad e iPhone. Sua vantagem principal está na tecnologia de streaming de vídeo tridimensional em tempo real, que fornece aos usuários percepção espacial precisa e informações detalhadas, tornando a experiência de controle remoto tão suave e natural quanto as nuvens fluidas. Esse recurso de conexão de plataforma cruzada sem costura reduz bastante o limite para o uso do usuário e abre caminho para a popularização e aplicação da tecnologia de controle remoto.
O conceito central desse sistema é obter uma profunda imersão da interação humano-computador através da tecnologia de realidade virtual. Os usuários só precisam usar fones de ouvido VR para obter controle remoto do robô sem outros dispositivos vestíveis complexos. O sistema simula de maneira inteligente o mecanismo de movimento estereoscópico binocular humano, permitindo que o operador tenha uma experiência de controle "imersiva" e eleva a interação humano-computador a um nível totalmente novo.
Em termos de implementação tecnológica, o sistema de televisão aberta mostrou muitos destaques inovadores. Primeiro, ele rompe as limitações do vídeo 2D tradicional e apresenta um vídeo estereoscópico em 3D através de fones de ouvido VR, fornecendo aos operadores percepção de distância espacial precisa. Em segundo lugar, o sistema está equipado com um mecanismo de simulação de pescoço em movimento, e os usuários podem observar em vários ângulos, simplesmente virando as cabeças, melhorando bastante a conveniência do controle. Além disso, o sistema adota a tecnologia inteligente de processamento de imagens e se concentra no processamento no centro da imagem, o que melhora significativamente a eficiência da computação e a taxa de quadros do sistema.
Em termos de métodos específicos de implementação, o sistema adota algoritmos de cinemática inversa avançada para mapear com precisão a API fornecida pelo fone de ouvido VR para o robô para obter uma transmissão precisa de ações. O design da arquitetura baseado na plataforma da Web permite que o sistema seja acessado no navegador de qualquer dispositivo a qualquer momento, em qualquer lugar, alcançando uma experiência de operação remota de baixa latência e alta eficiência.
Em resposta aos desafios técnicos no campo da operação remota, o sistema de televisão aberta fornece soluções inovadoras. Através do processo de mapeamento, o sistema resolve efetivamente o problema da incompatibilidade entre os robôs humanóides e os graus de liberdade do corpo humano e alcança a ampla adaptação a vários tipos de robôs. Ao mesmo tempo, o sistema usa operação remota para coletar dados de treinamento, o que melhora significativamente a capacidade de conclusão de tarefas autônoma do robô e permite que o sistema mostre excelente capacidade de confiabilidade e generalização.
O projeto foi de origem aberta na plataforma Github, com o endereço do projeto em https://github.com/improbable-ai/visionproteleop, fornecendo referência valiosa para a pesquisa e aplicação da tecnologia de controle remoto. O lançamento do sistema de televisão aberta não apenas demonstra a integração perfeita da tecnologia de realidade virtual e tecnologia de robótica, mas também abre novas direções para o desenvolvimento de controle remoto e espera-se que desempenhe um papel importante em muitos campos, como a fabricação industrial , cirurgia médica e operações ambientais perigosas.