A verdadeira questão é quão eficazmente os algoritmos do AgiBot podem ensinar novos truques aos seus robôs. Usar o aprendizado por reforço para ensinar a um robô tarefas que exigem improvisação geralmente requer muitos dados de treinamento, e estudos mostram que ele não pode ser totalmente aperfeiçoado dentro de uma simulação.
O AgiBot acelera o processo de aprendizagem ao ter um trabalhador humano guiando o robô através de uma tarefa, o que fornece uma base para que ele aprenda por si mesmo. Antes de cofundar a AgiBot, o cientista-chefe Jianlan Luo fez pesquisas de ponta na UC Berkeley, incluindo um projeto que envolveu robôs adquirindo habilidades por meio de aprendizagem por reforço com um humano no circuito. Esse sistema foi mostrado realizando tarefas, incluindo colocar componentes em uma placa-mãe.
Feng diz que o software de aprendizagem do AgiBot, chamado Real-World Reinforcement Learning, só precisa de cerca de dez minutos para treinar um robô para realizar uma nova tarefa. A aprendizagem rápida é importante porque as linhas de produção mudam frequentemente de uma semana para outra, ou mesmo durante o mesmo ciclo de produção, e os robôs que conseguem dominar rapidamente uma nova etapa podem adaptar-se ao lado dos trabalhadores humanos.
Treinar robôs dessa forma requer muito esforço humano. O AgiBot tem um centro de aprendizagem robótica onde paga às pessoas para teleoperar robôs para ajudar os modelos de IA a aprender novas habilidades. A demanda por esse tipo de dados de treinamento de robôs está crescendo, com algumas empresas dos EUA pagando trabalhadores em lugares como a Índia para fazer trabalho manual que serve como dados de treinamento.
Jeff Schneider, roboticista da Universidade Carnegie Mellon que trabalha com aprendizagem por reforço, diz que o AgiBot está usando técnicas de ponta e deve ser capaz de automatizar tarefas com alta confiabilidade. Schneider acrescenta que outras empresas de robótica provavelmente estão se aventurando no uso de aprendizagem por reforço para tarefas de fabricação.
O AgiBot é uma espécie de estrela em ascensão na China, onde o interesse em combinar IA e robótica está aumentando. A empresa está desenvolvendo modelos de IA para vários tipos de robôs, incluindo humanóides que andam e braços robóticos que permanecem enraizados em um só lugar.
