Black Forest Labs lança o FLUX 3 Action, modelo aberto para robôs
A alemã Black Forest Labs lançou o FLUX 3 Action, modelo aberto para robótica construído sobre o FLUX 3, que foi treinado principalmente com vídeo, além de imagem e áudio. É um "modelo de mundo e ação": recebe vídeo de várias câmeras do espaço de trabalho do robô e prevê qual ação tomar e como o ambiente vai mudar em seguida.
Segundo a empresa, o modelo tem 7 bilhões de parâmetros e alcança a maior taxa de sucesso já registrada no ranking RoboLab-120, com menos da metade do tamanho do melhor modelo aberto anterior e até 3,95 vezes mais velocidade. A Black Forest Labs argumenta que grandes modelos de raciocínio planejam bem, mas são lentos e pesados demais para rodar no próprio robô.
Produto disponível
Modelo aberto publicado e disponível; números de desempenho são da própria empresa.
Critério: Qualquer pessoa pode usar hoje (pago ou grátis).
Fontes originais
Resumo escrito com palavras próprias a partir destas fontes. Nenhum trecho é reproduzido.
O que muda pra você
- Dev
- Um modelo de ação aberto e pequeno permite testar controle de robôs rodando localmente.
- PM
- Modelos abertos de robótica reduzem a barreira para produtos com braços e robôs de serviço.
- Executivo
- A Europa ganha peso em IA física com um laboratório conhecido por modelos de imagem.
- Investidor
- Robótica aberta atrai laboratórios de modelos de mídia; a disputa por "cérebros" de robôs se amplia.
- Educador
- Exemplo de modelo que aprende com vídeo para agir no mundo físico.