OpenAI disponibiliza o Plant Talk em código aberto: ligue o ChatGPT e faça as suas plantas em vaso falarem.

A OpenAI lançou recentemente um projeto de código aberto chamado Plant Talk, que permite que as plantas domésticas "falem" através do ChatGPT. A configuração mínima requer apenas um computador com câmara e microfone; a versão avançada pode ligar sensores de humidade do solo Arduino e sensores de luz, tornando os dados de saúde das plantas mais precisos.
(Contexto anterior: a OpenAI anunciou o plano 'Reparar a Terra', corrigindo 19 projetos populares de código aberto como cURL, Python, PyPI, etc.)
(Contexto adicional: o primeiro produto de hardware de IA da OpenAI foi vazado; uma coluna inteligente que reconhece rostos, observa e compra coisas para ti.)

Esta semana, a OpenAI abriu oficialmente o código do projeto Plant Talk no GitHub, licenciado sob Apache 2.0, e qualquer pessoa pode usá-lo. A sua posição oficial é 'um vaso de planta interior com o qual podes conversar usando o ChatGPT'. Os utilizadores podem perguntar à planta 'Como estás ultimamente?' ou 'Precisas de água?', e a planta responderá por voz.

Configuração mínima vs Configuração avançada: A diferença é maior do que se imagina

A barreira de hardware do Plant Talk é projetada de forma inteligente, mas esconde uma lacuna importante.

A configuração mínima, ou seja, a versão que o oficial diz que 'qualquer pessoa pode fazer', requer apenas um computador com câmara web e microfone, mais a chave da API OpenAI. A câmara tira fotos do estado da planta, o sistema faz 'observações' estruturadas periodicamente para avaliar a saúde da planta e, em seguida, a planta fala através da Realtime API.

A configuração avançada é para construtores avançados: adicionando um microcontrolador compatível com Arduino, um sensor capacitivo de humidade do solo, um sensor de luz LM393, cabos jumper e uma placa de ensaio, é possível ler dados reais de humidade, luz, CO₂, etc. O Arduino recolhe os dados da planta, envia-os ao ChatGPT, que gera recomendações de cuidados e depois são lidas por text-to-speech.

O ponto crucial está nesta frase no README oficial: sem o Arduino, o sistema depende apenas da câmara para fazer julgamentos, e a precisão é 'muito menor' (much less accurate).

Simplificando, adivinhar se a planta precisa de água com a câmara e medir diretamente os valores com um sensor de solo são coisas de precisões completamente diferentes. O primeiro é mais como uma demonstração demonstrativa, enquanto o segundo é a configuração verdadeiramente útil.

O Codex Desktop é o verdadeiro protagonista desta demonstração

A interface de operação do Plant Talk foi projetada como uma 'pequena sala de controlo para plantas': um painel mostra o estado da planta, Start camera inicia a câmara, Observe now aciona uma observação, Connect Arduino liga os sensores, Talk to plant inicia a conversa por voz, Open ambient mode entra no ecrã de conversa em ecrã inteiro. A maioria dos utilizadores recomenda ativar o Modo Ambiente, onde a imagem e a própria planta formam uma situação.

O utilizador só precisa de abrir a aplicação Codex Desktop, introduzir uma linha de texto: 'Ajuda-me a fazer Plant Talk https://github.com/openai/planttalk', depois deixar o Codex ler todo o repositório, guiá-lo através de cada passo de configuração, e todo o projeto pode ser construído.

A planta é a fachada, o Codex é o produto. Isto é o que a OpenAI pretende demonstrar com este projeto de código aberto.