À medida que a aprendizagem de robôs se expande de ambientes de laboratório controlados para ambientes do mundo real, um gargalo continua a surgir: a coleta de dados.
A teleoperação é precisa, mas lenta. As câmeras em terceira pessoa não oferecem a perspectiva do operador. As câmeras de ação para o consumidor não possuem a sincronização de sensores necessária para o aprendizado por imitação moderno e os fluxos de trabalho de interação visual (VIO).
Uma nova opção de hardware está chegando ao mercado. Nossa Ego Camera é uma câmera estéreo binocular para uso na cabeça, projetada especificamente para a captura de dados egocêntricos em pesquisas de IA incorporada e manipulação robótica.
Um ponto de vista que combina com o robô
O módulo é usado na cabeça humana — como uma faixa leve — e registra exatamente o que o operador vê durante uma tarefa. Essa perspectiva em primeira pessoa (egocêntrica) tornou-se um foco fundamental em pesquisas recentes na área de robótica.
Estudos em larga escala realizados entre 2025 e 2026 — incluindo HumanEgo, EgoMimic e EgoScale — demonstraram que políticas de robôs treinadas com vídeos egocêntricos humanos podem igualar ou superar aquelas treinadas com dados de teleoperação, a um custo de coleta muito menor. A perspectiva é crucial: o robô, quando implantado, vê o mundo a partir de seus próprios sensores integrados, e não de um suporte no teto ou em um tripé.
Nossa Ego Camera foi projetada para preencher essa lacuna, fornecendo dados de treinamento que correspondem ao ponto de vista real de inferência do robô, eliminando a incompatibilidade de perspectiva no treinamento do modelo.
Projeto de sensores para linhas de pesquisa
Sensores estéreo com obturador global
O módulo da câmera utiliza dois sensores de 2MP com obturador global e um campo de visão horizontal de 60–65°, consistente com o campo de visão padrão dos módulos de visão da cabeça de robôs humanoides. O obturador global é uma escolha de projeto central deliberada: cada pixel é exposto simultaneamente, eliminando completamente a distorção de rolamento que prejudica os movimentos rápidos das mãos e do corpo durante a gravação dinâmica.
Preservação de dados brutos (sem EIS)
Removemos intencionalmente a estabilização eletrônica de imagem (EIS) integrada. A EIS recorta o campo de visão original e modifica os parâmetros intrínsecos e extrínsecos calibrados de fábrica, o que comprometeria a correspondência estéreo e a consistência da calibração entre a câmera e a IMU. Os dados brutos originais de quadro completo são reservados para o processamento pelo algoritmo do robô.
Sincronização de hardware em microssegundos
A IMU (Unidade de Medição Inercial) de 6 eixos ICM-2688 integrada (acelerômetro + giroscópio, amostragem de 200 a 500 Hz) é sincronizada por meio de um sinal de disparo GPIO dedicado. Um sinal de pulso unificado enviado pelos pinos GPIO dispara simultaneamente as câmeras estéreo e a amostragem da IMU. O erro de sincronização é inferior a 10 microssegundos, e cada quadro de vídeo e amostra da IMU possui um registro de data e hora de hardware unificado.
Esse nível de sincronização é um padrão obrigatório para os principais fluxos de trabalho de vídeo, áudio e vídeo (VIO), como o VINS-Fusion e o OpenVINS, onde o alinhamento de timestamps feito exclusivamente por software acumula desvios de trajetória óbvios ao longo de longas sequências de gravação.
Armazenamento de calibração integrado
A calibração completa de fábrica abrange os parâmetros intrínsecos e extrínsecos do estéreo, bem como as transformações da câmera para a IMU. Todos os parâmetros de calibração são armazenados na memória Flash integrada e totalmente legíveis através do SDK multiplataforma — não sendo necessária nenhuma recalibração no local após a inicialização do equipamento.
Flexibilidade de implantação
Dois modos operacionais são suportados para abranger todos os cenários de pesquisa.
Saída de dados padrão em vários formatos
1. Gravação local no cartão TF integrado (captura offline)
- Arquivos de vídeo MP4 binoculares sincronizados (esquerdo e direito) para pré-visualização visual rápida.
- Registros CSV independentes armazenando dados brutos da IMU combinados com registros de data e hora em microssegundos.
2. Gravação no PC host via SDK (conexão USB em ambiente ROS/ROS2)
Suporta a exportação de conjuntos de dados completos e sincronizados de sensores ROSbag e MCAP, totalmente compatíveis com os principais ecossistemas de desenvolvimento de robótica.
Todos os registros de data e hora do hardware estão incorporados em cada quadro e amostra da IMU. Os arquivos completos de parâmetros de calibração de fábrica estão acessíveis através do SDK oficial.
Notavelmente, o módulo não possui processamento de IA integrado nem funções de anotação automática. Seu principal objetivo é fornecer dados brutos de sensores limpos e alinhados temporalmente, deixando o treinamento do modelo, a detecção de alvos e a inferência do algoritmo para os fluxos de trabalho de desenvolvimento independentes dos pesquisadores.
Personalização e disponibilidade comercial
A Ego Camera já está disponível para laboratórios de pesquisa, startups de robótica e fabricantes de robôs humanoides em todo o mundo. Configurações personalizáveis de distância de linha de base estéreo e campo de visão da lente são suportadas para projetos ODM de grande volume.
Para reduzir os custos de integração de hardware, são fornecidos SDKs técnicos completos, documentação de operação e exemplos de códigos de teste para cada pedido.
Entre em contato
Se precisar de amostras de produtos, documentação do SDK, consultoria sobre parâmetros técnicos ou soluções de hardware personalizadas para o seu projeto de aprendizado de robôs, envie uma solicitação por e-mail. Nossa equipe de engenharia oferece suporte técnico individualizado para projetos de coleta de dados SLAM, VIO e IA incorporada.
Data da publicação: 29/07/2026
