GPT-5: O que esperar do novo modelo OpenAI

9 min read

O GPT-5 está chegando, mas não sabemos exatamente quando. Espera-se que o tão aguardado transformador generativo pré-treinado da OpenAI supere os modelos atuais com os quais você pode trabalhar – e isso quer dizer muito, considerando o quão avançados são o GPT-4 e o GPT-3.5.

“Vamos tornar o modelo mais inteligente; será melhor em tudo”, disse Sam Altman, CEO da OpenAI, discutindo as futuras iterações do GPT no Cúpula Mundial do Governo em janeiro. “Isso é mais importante do que parece, porque o que torna esses modelos tão mágicos é que eles são gerais.”

O desempenho normalmente é dimensionado linearmente com os dados e o tamanho do modelo, a menos que haja um grande avanço arquitetônico, explica Joe Holmes, desenvolvedor de currículo da Codecademy especializado em IA e aprendizado de máquina. “No entanto, ainda acho que mesmo melhorias incrementais gerarão novos comportamentos surpreendentes”, diz ele.

Então, do que um GPT melhor e mais inteligente poderia realmente ser capaz? A seguir, detalharemos o que sabemos sobre o GPT-5, como ele pode ser comparado aos modelos GPT anteriores e o que esperamos que saia deste novo lançamento.

Aprenda algo novo gratuitamente

Introdução ao ChatGPT

Introdução aos transformadores de IA

Uma breve linha do tempo dos modelos GPT

Tela @media e (largura máxima: 767px){.stk-9db6b76 .stk-inner-blocks:after{top:16px !important}}junho de 2018
.stk-77203ee-container{margem-topo:0px !importante;margem direita:0px !importante;margem inferior:0px !importante;margem esquerda:0px !importante}

GPT-1

OpenAI colocado modelos de linguagem generativos pré-treinados no mapa em 2018, com o lançamento do GPT-1. Este modelo inovador foi baseado em transformadores, um tipo específico de arquitetura de rede neural (o “T” em GPT) e treinado em um conjunto de dados de mais de 7.000 livros exclusivos não publicados. Você pode aprender sobre transformadores e como trabalhar com eles em nosso curso gratuito Introdução aos transformadores de IA.

@media screen e (max-width:767px){.stk-6dd8040 .stk-inner-blocks:after{top:16px !important}}fevereiro de 2019
.stk-2eeba5d-container{margem superior: 0px !importante;margem direita:0px !importante;margem inferior:0px !importante;margem esquerda:0px !importante}

GPT-2

No final de 2019, OpenAI desenvolveu GPT-2, o sucessor do GPT-1. Este grande modelo de linguagem baseado em transformador tinha 1,5 bilhão parâmetros — variáveis ​​que o modelo aprende dos dados durante o treinamento — e foi treinado em um conjunto de dados de 8 milhões de páginas da web. Para contextualizar: são 10 vezes os parâmetros e dados usados ​​pelo GPT-1.

Tela @media e (largura máxima: 767px){.stk-e58bc59 .stk-inner-blocks:after{top:16px !important}}junho de 2020
.stk-532cb8e-container{margem-topo:0px !importante;margem direita:0px !importante;margem inferior:0px !importante;margem esquerda:0px !importante}

GPT-3

Com o GPT-3, a OpenAI aumentou o número de parâmetros para 175 bilhões.

Tela @media e (largura máxima: 767px){.stk-625253f .stk-inner-blocks:after{top:16px !important}}novembro de 2022
.stk-6978c5a-container{margem-topo:0px !importante;margem direita:0px !importante;margem inferior:0px !importante;margem esquerda:0px !importante}

GPT-3.5

Em novembro de 2022, ChatGPT entrou no chat, adicionando funcionalidade de chat e a capacidade de conduzir um diálogo humano ao modelo fundamental. A primeira iteração do ChatGPT foi ajustada a partir do GPT-3.5, um modelo entre 3 e 4. Se você quiser saber mais sobre o ChatGPT e solicitar as melhores práticas de engenharia, nosso curso gratuito Introdução ao ChatGPT é uma ótima maneira de entender como trabalhar com essa ferramenta poderosa.

Tela @media e (largura máxima: 767px){.stk-4dbf79e .stk-inner-blocks:after{top:16px !important}}março de 2023
.stk-613810b-container{margem-topo:0px !importante;margem direita:0px !importante;margem inferior:0px !importante;margem esquerda:0px !importante}

GPT-4

O modelo GPT mais recente foi lançado em março de 2023 e é “mais confiável, criativo e capaz de lidar com instruções com muito mais nuances do que o GPT-3.5”, de acordo com o OpenAI blog sobre o lançamento. No vídeo abaixo, Greg Brockman, presidente e cofundador da OpenAI, mostra como o modelo mais novo lida com prompts em comparação ao GPT-3.5.

Tela @media e (largura máxima: 767px){.stk-11cf9a7 .stk-inner-blocks:after{top:16px !important;bottom:calc(0px + (100% – 0px) – 16px) !important}} A definir
.stk-64c78d6-container{margem-topo:0px !importante;margem direita:0px !importante;margem inferior:0px !importante;margem esquerda:0px !importante}

GPT-5

A data oficial de lançamento do GPT-5 ainda não foi anunciada.

O que esperar do GPT-5

Ainda mais multimodalidade

Quando Bill Gates teve Sam Altman em seu podcast em janeiro, Sam disse que a “multimodalidade” será um marco importante para a GPT nos próximos cinco anos. Num contexto de IA, a multimodalidade descreve um modelo de IA que pode receber e gerar mais do que apenas texto, mas outros tipos de entrada como imagens, fala e vídeo.

Em setembro de 2023, OpenAI anunciou Capacidades multimodais aprimoradas do ChatGPT, permitindo que você tenha uma conversa verbal com o chatbot, enquanto GPT-4 com Visão pode interpretar imagens e responder a perguntas sobre elas. E em fevereiro, a OpenAI introduziu um modelo de texto para vídeo chamado Sora, que atualmente não está disponível ao público.

As futuras atualizações do GPT irão expandir as modalidades com as quais o ChatGPT pode trabalhar: “Claramente, as pessoas realmente querem isso”, disse Sam no podcast Unconfuse Me. “Lançamos imagens e áudio e tiveram uma resposta muito mais forte do que esperávamos.”

Melhor “raciocínio” e precisão

Os sistemas de IA não conseguem raciocinar, entender ou pensar – mas eles podem computar, processar e calcular probabilidades em um nível alto que é convincente o suficiente para parecer humano. E estas capacidades tornar-se-ão ainda mais sofisticadas com os próximos modelos GPT.

“Talvez as áreas de progresso mais importantes sejam em torno da capacidade de raciocínio”, disse Sam no Unconfuse Me. “No momento, o GPT-4 só pode raciocinar de maneiras extremamente limitadas.” O GPT-5 provavelmente será capaz de resolver problemas com maior precisão porque será treinado em ainda mais dados com a ajuda de uma computação mais poderosa.

“Pré-treinamento” é o processo em que o modelo aprende com os dados de treinamento para gerar distribuições de probabilidade. Quanto mais diversificados e robustos forem os dados de treinamento, melhor será a IA na geração de novos conteúdos.

Uma coisa para ficar de olho é a janela de contexto, diz Joe. Um token é um pedaço de texto, geralmente um pouco menor que uma palavra, que é representado numericamente quando passado para o modelo. “É basicamente como o modelo entende a linguagem”, diz Joe. Cada modelo possui uma janela de contexto que representa quantos tokens ele pode processar de uma vez. GPT-4 Turbo tem uma janela de contexto de 128.000 tokens, enquanto O Gemini 1.5 do Google tem uma janela de contexto de até 1 milhão de tokens.

“Se o GPT-5 disponibilizar um contexto igualmente enorme ao público, acho que isso terá implicações profundas para a pesquisa, o aprendizado e a análise em vários domínios”, diz Joe. “Você será capaz de agregar grandes quantidades de conhecimento em uma única pergunta ao modelo, economizando inúmeras horas e aumentando drasticamente a produtividade do trabalho de conhecimento.”

Mas é importante lembrar que esses modelos podem herdar limitações de versões anteriores. GPT-4, o sistema mais avançado da OpenAI, pode produzir imprecisões e lapsos de raciocínio com segurança, e perpetuar preconceitos sociais. “Se você fizer a maioria das perguntas ao GPT-4 10.000 vezes, uma dessas 10.000 provavelmente é muito boa, mas nem sempre sabe qual”, disse Sam no podcast. “Você gostaria de obter a melhor resposta de 10.000 de cada vez e, portanto, esse aumento na confiabilidade será importante.”

Capacidades de personalização

A capacidade de customizar e personalizar GPTs para tarefas ou estilos específicos é uma das áreas de melhoria mais importantes, disse Sam no Unconfuse Me. Atualmente, o OpenAI permite que qualquer pessoa com ChatGPT Plus ou Enterprise crie e explore “GPTs” personalizados que incorporam instruções, habilidades ou conhecimento adicional. Codecademy na verdade tem um GPT personalizado (anteriormente conhecido como “plugin”) que você pode usar para encontrar cursos específicos e pesquisar Documentos. Dê uma olhada no Loja GPT para ver os GPTs criativos que as pessoas estão construindo.

Sam deu a entender que futuras iterações do GPT poderiam permitir que os desenvolvedores incorporassem os próprios dados dos usuários. “A capacidade de saber sobre você, seu e-mail, sua agenda, como você gosta de compromissos marcados, conectados a outras fontes de dados externas, tudo isso”, disse ele no podcast.

Como usar o GPT-5

A data de lançamento do GPT-5 ainda não foi anunciada, mas é seguro dizer que está em andamento. (A OpenAI vem trabalhando no GPT-4 há pelo menos dois anos antes de seu lançamento oficial.) Também é possível que a OpenAI possa lançar um GPT-4.5 intermediário antes do GPT-5, como fizeram com o 3.5. Até o momento, não houve nenhuma declaração oficial da OpenAI sobre o momento dos lançamentos.

O preço da OpenAI é estruturado para que Assinantes do ChatGPT Plus tenha acesso ao modelo mais recente por US$ 20 por mês, enquanto assinantes gratuitos podem usar a versão mais antiga. Você pode selecionar o modelo com o qual deseja trabalhar em um menu suspenso no ChatGPT. Esta é a aparência atual do GPT-4:

Você pode alterar o modelo com o qual trabalha no ChatGPT clicando no menu suspenso.

DR

Então, o que tudo isso significa para você, um programador que está aprendendo sobre IA e curioso sobre o futuro desta tecnologia incrível? O próximo modelo GPT-5 pode oferecer melhorias significativas em velocidade e eficiência, por isso há motivos para estarmos otimistas e entusiasmados com suas capacidades de resolução de problemas. Mas isso não vai mudar o mundo instantaneamente.

“As pessoas têm essas expectativas irrealistas de que o GPT-5 fará cambalhotas em segundo plano no meu quarto, enquanto também escreve todo o meu código para mim e fala ao telefone com minha mãe ou algo parecido”, Logan Kilpatrick, chefe do DevRel na OpenAI, disse em um episódio do Podcast de Lenny. “Eu fico tipo, ‘Esse não é o caso’. Será apenas uma ferramenta muito eficaz, muito semelhante ao GPT-4, e também se tornará muito normal muito rapidamente.”

É crucial ver qualquer lançamento chamativo de IA através de lentes pragmáticas e gerenciar suas expectativas. Como profissionais de IA, cabe a nós sermos cuidadosos, atenciosos e conscientes das deficiências sempre que implantamos resultados de modelos de linguagem, especialmente em contextos de alto risco.

A melhor maneira de se preparar para o GPT-5 é continuar se familiarizando com os modelos GPT disponíveis. Você pode começar fazendo nossos cursos de IA que cobrem os tópicos mais recentes de IA, desde Introdução ao ChatGPT para Construa um modelo de aprendizado de máquina e Introdução aos grandes modelos de linguagem. Nos tambem temos Cursos e estudos de caso de IA em nosso catálogo que incorporam um chatbot com tecnologia GPT-3.5, para que você possa obter experiência prática escrevendo, testando e refinando prompts para tarefas específicas usando o sistema de IA. Por exemplo, em Combine Programação com Estudo de Caso de IA Generativa, você pode aprender técnicas de engenharia imediata para emparelhar programas em Python com um chatbot do tipo ChatGPT. Veja todos os nossos novos recursos de IA para se tornar um desenvolvedor mais eficiente e experiente que estará pronto quando o GPT-5 for lançado.

Cursos relacionados

6 cursos

Construa um modelo de aprendizado de máquina

Principiante
Aprenda a construir modelos de aprendizado de máquina com Python.

Aprenda Python 3

Principiante
Aprenda o básico do Python 3, uma das linguagens de programação mais poderosas, versáteis e procuradas atualmente.

Introdução à IA generativa

Principiante
Mergulhe nas muitas formas de IA generativa e aprenda como podemos usar melhor essas novas tecnologias!

Introdução aos grandes modelos de linguagem

Principiante
Aprenda o básico de grandes modelos de linguagem (LLMs) e Inteligência Artificial Generativa (IA) baseada em texto. Mostraremos como os LLMs funcionam e como são usados.

Bases de dados e programação para IA

Principiante
Aprenda codificação, ciência de dados e matemática necessárias para começar como engenheiro de aprendizado de máquina ou IA.

Otimizando código com estudo de caso de IA generativa

Principiante
Aproveite ferramentas generativas de IA para otimizar a legibilidade, manutenção, testabilidade e eficiência de recursos do código, promovendo um desenvolvimento simplificado.

document.addEventListener(‘DOMContentLoaded’, function() {
const isFeatured = !![…document.querySelectorAll(‘.category-tag’)].find(t => t.innerText == ‘Em destaque’);
const swiper = new Swiper(‘#block_6c7d3c86549c3ce045401fbfcaf3feba .swiper’, {
direção: ‘horizontal’,
laço: falso,
slidesPerView: 1,
slidesPorGrupo: 1,
espaçoEntre: 20,
//loopAdditionalSlides: 4,

navegação: {
nextEl: ‘.swiper-button-next-block_6c7d3c86549c3ce045401fbfcaf3feba’,
prevEl: ‘.swiper-button-prev-block_6c7d3c86549c3ce045401fbfcaf3feba’,
},
pontos de interrupção: {
768: {
paginação: falso,
slidesPerView: 2,
slidesPorGrupo: 2,
espaçoEntre: 40,
},
[está em destaque? 1440: 1128]: {
paginação: falso,
slidesPerView: 3,
slidesPorGrupo: 3,
espaçoEntre: 40,
}
}
});
});

Inscreva-se para receber novidades, dicas e muito mais

Se inscrever

A postagem Aqui está o que sabemos sobre o GPT-5 até agora (e o que esperamos ver) apareceu primeiro em Blog da Codecademia.

https://www.codecademy.com/resources/blog/gpt5/
Autor: Cory Stieg

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *