OpenAI DevDay: ChatGPT ganha recurso para criar software e API realtime

Na última OpenAI DevDay, o ChatGPT ganhou novos recursos empolgantes para desenvolvedores. A ferramenta Canvas permite criar software completo diretamente no chat, enquanto a API realtime possibilita interações instantâneas. Além disso, técnicas como Model Distillation e Prompt Caching foram apresentadas para otimizar o desempenho e a eficiência dos modelos. O evento destacou o compromisso da OpenAI em fornecer ferramentas inovadoras para a comunidade de desenvolvedores, impulsionando a criação de aplicativos inteligentes. Confira abaixo as principais novidades anunciadas.

Destaques do OpenAI DevDay 2024: Realtime API, Vision Fine-Tuning e muito mais

O OpenAI DevDay 2024 trouxe uma série de novidades empolgantes para desenvolvedores de aplicativos de inteligência artificial. O evento, realizado em São Francisco, Londres e Cingapura, reuniu a comunidade global de desenvolvedores para explorar novas ferramentas e trocar ideias.

Realtime API: conversas por voz em tempo real

Uma das principais atrações foi o lançamento da Realtime API, agora em beta público. Essa API permite criar experiências de fala para fala (speech-to-speech) de baixa latência, ideal para aplicativos com interações por voz em tempo real.

A Realtime API oferece seis vozes únicas, distintas das usadas pelo ChatGPT, evitando problemas de direitos autorais. Isso abre um leque de possibilidades para integrar respostas de voz geradas por IA em diversos aplicativos, como assistentes virtuais, chatbots e ferramentas educacionais.

Saiba mais sobre a Realtime API.

Prompt Caching: diminuindo o custo para chamadas repetidas

Outro recurso interessante anunciado foi o cache de prompt, que oferecerá 50% de desconto para chamadas repetidas de prompt na API. Segundo a OpenAI, esse recurso é muito útil para desenvolvedores que utilizam o mesmo input de texto multiplas vezes na API, como em conversas de texto longas e auxílio na geração de código.

O recurso já está disponível para os mais novos modelos da OpenAI, como GPT-4o, GPT-4o mini, o1 preview e o1 mini, além da versão fine-tunada desses modelos.

Saiba mais sobre o Prompt Caching clicando aqui.

Vision Fine-Tuning: aprimorando a compreensão visual

Outra novidade apresentada foi a capacidade de fine-tuning com imagens e texto na API da OpenAI. Isso permite que desenvolvedores melhorem o desempenho do modelo GPT-4o, incorporando dados visuais para aprimorar a compreensão de imagens.

O Vision Fine-Tuning abre caminho para uma série de aplicações, como:

• Análise de imagens médicas

• Reconhecimento de objetos em tempo real

• Geração de descrições de imagens mais precisas

Explore mais sobre o Vision Fine-Tuning.

Model Distillation: modelos eficientes e econômicos

A OpenAI também apresentou o Model Distillation, um recurso que permite o fine-tuning de modelos menores usando a saída de modelos mais avançados. Essa técnica ajuda a criar soluções de IA mais eficientes e econômicas, sem comprometer significativamente a qualidade.

Isso é especialmente útil para empresas e desenvolvedores com recursos computacionais limitados, permitindo acesso a capacidades semelhantes às de modelos avançados a um custo menor.

Canvas: criando software completo no ChatGPT

Embora não tenha sido anunciado no DevDay, vale a pena mencionar o Canvas, uma nova ferramenta do ChatGPT para criar software completo diretamente no chat. Com o Canvas, desenvolvedores podem gerar código, testar e iterar rapidamente, utilizando a IA como um copiloto inteligente.

Confira nosso post dedicado ao OpenAI Canvas para saber mais sobre essa poderosa ferramenta.