Confronto direto: Google Bard versus ChatGPT.
A inteligência artificial generativa deixou de ser apenas um termo da moda para se tornar uma realidade concreta.
O que começou como um projeto experimental da OpenAI (ChatGPT) rapidamente se estabeleceu como um padrão do setor, com gigantes como Google e Microsoft seguindo o mesmo caminho.
É importante destacar que a Microsoft tem uma participação significativa na OpenAI, o que pode ter influenciado o desenvolvimento do BingAI, tornando-o menos um concorrente direto do ChatGPT.
O Google Bard, no entanto, apresenta-se como um verdadeiro adversário, ainda que em fase beta no momento desta análise.
Sem mais delongas, vamos testar o Google Bard e o ChatGPT com alguns prompts e descobrir qual deles oferece a melhor solução para diferentes casos de uso.
Vamos começar imediatamente!
Google Bard vs. ChatGPT 4
Através destes prompts, avaliaremos as diversas capacidades destas ferramentas de IA, abordando áreas como programação, turismo, redação de e-mails, criação de histórias, poesia e algumas questões cotidianas que normalmente pesquisaríamos no Google.
Criação de Narrativa
Escreva uma história de 50 palavras sobre um jardineiro que vende mangas secretamente para extraterrestres.
O Google Bard não conseguiu respeitar o limite de palavras, entregando uma versão com 175 palavras, quando o prompt solicitava expressamente 50. Além disso, a narrativa não mencionava o jardineiro e parecia um resumo genérico de algo encontrado na internet.
A história era repleta de frases clichês, sem qualquer sinal de criatividade, tornando-a enfadonha e desinteressante.
O ChatGPT, por outro lado, manteve-se dentro do limite, com 47 palavras 👍 (menos de 50). Sua narrativa tinha um toque de ficção mais elaborado, contrastando com a tentativa sem inspiração do Google Bard, que mais parecia uma redação infantil.
O ChatGPT ainda conseguiu incluir detalhes sobre a transação, como a troca de minerais raros por mangas. Portanto, esta rodada é uma vitória clara do ChatGPT, deixando o Bard bem distante.
ChatGPT: 👍 | Bard: 👎
Desenvolvimento de Código
A programação é outra área onde se espera que as ferramentas de IA generativa se destaquem. Embora não substituam um programador experiente, podem ser assistentes valiosos para iniciantes ou para gerar uma estrutura básica para profissionais.
Crie um programa de calculadora simples em Python.
Após a execução do código em um compilador Python, temos os seguintes resultados.
A versão do Bard apresentou este código:
O código gerado pelo ChatGPT também não deixou a desejar:
Embora seja possível ajustar as calculadoras com instruções adicionais, o Bard obteve um desempenho superior nesta primeira tentativa.
A calculadora do Bard permite realizar operações continuamente, enquanto no ChatGPT seria necessário executar novamente o código para cada novo cálculo.
Portanto, esta rodada é uma vitória para o recém-chegado.
ChatGPT: 👎 | Bard: 👍
Redação de E-mail
Escreva um e-mail de primeiro lembrete, com tom firme e menos de 100 palavras, para um cliente sobre o não pagamento de uma fatura de $2500 vencida no mês passado.
Aparentemente, o Bard parece ter algum tipo de funcionalidade amadora que não podemos alterar.
Apesar de ter solicitado um primeiro lembrete, o e-mail do Bard foi direto para a suspensão dos serviços e ameaças de ações legais, algo totalmente desnecessário.
Além disso, expressões como “você pode ter esquecido disso” tornam a mensagem infantil e pouco profissional.
O ChatGPT, por outro lado, mostrou-se mais humano, com um assunto direto e um e-mail objetivo, mencionando um prazo de 48 horas para regularizar a situação.
ChatGPT: 👍 | Bard: 👎
Informações Gerais
O maior impacto da IA generativa deve ser na forma como usamos os mecanismos de busca. Com sua implementação bem-sucedida, a maioria dos usuários terá informações prontas na caixa de bate-papo, sem a necessidade de navegar por resultados de pesquisa.
Apresente em formato de tabela os vencedores da Copa do Mundo FIFA, os maiores artilheiros, os vencedores da Bola de Ouro e os resultados das finais, desde o primeiro torneio até o mais recente.
Aproveitando seu poderoso motor de busca, o Google Bard tinha todas as condições para vencer esta rodada e seu desempenho foi satisfatório.
No entanto, a informação apresentada estava incorreta, já que o prêmio Bola de Ouro só foi introduzido em 1982. Mas isso não impediu o Bard de atribuir suas próprias bolas de ouro 🙄.
O ChatGPT, por outro lado, apresentou informações mais precisas e só começou a listar os vencedores da Bola de Ouro a partir de 1982.
É visível que o ChatGPT teve problemas de capacidade e foi interrompido no meio da resposta. No entanto, a criação de fatos pelo Bard o torna pouco confiável como fonte de informação.
ChatGPT: 👍 | Bard: 👎
Criação de Resumo
A criação de resumos é um caso de uso típico para IA generativa. Vamos ver como estas ferramentas se saem ao resumir um famoso romance de Harry Potter, com 200 palavras.
Apresente um resumo de 200 palavras do livro Harry Potter e a Pedra Filosofal.
O primeiro conselho para a equipe de desenvolvimento do Bard seria melhorar a sua capacidade de contagem de palavras. Ao solicitar um resumo de 200 palavras, o Bard apresentou um texto com 317 palavras, quase 60% acima do limite.
Além disso, o resumo não incluía o final da história e os dois últimos parágrafos continham informações adicionais não solicitadas.
Com 190 palavras, a resposta do ChatGPT foi mais adequada e o final da história pareceu mais completo.
Embora eu esteja me esforçando para não parecer tendencioso, o resultado aqui é claro…
ChatGPT: 👍 | Bard: 👎
Recomendações de Compra
A internet está repleta de guias de compra e essas ferramentas de IA devem ser capazes de nos ajudar nessa tarefa.
Quais fatores devo considerar ao comprar um laptop para jogos e você pode recomendar três opções com preço inferior a $2000?
Como jogador, sei que a placa gráfica (GPU) é mais importante que o processador (CPU). Além disso, uma taxa de atualização mais alta é preferível a uma resolução mais alta, principalmente para jogos multiplayer.
No geral, as recomendações do Bard pareciam mais adequadas para um laptop de uso geral, mesmo que de alto desempenho, e pouco relacionadas a jogos.
A opção mais cara sugerida era o MSI Stealth 15M (US$ 1.399).
O ChatGPT, por outro lado, apresentou recomendações focadas em jogos, começando pela GPU.
O modelo mais caro em sua lista era o Asus ROG Zephyrus G15, que possui vários modelos na faixa de US$ 2.000. A opção mais barata sugerida pelo ChatGPT foi o Acer Predator Helios 300 (US$ 1.229), enquanto o Bard recomendou um Acer Nitro 5 por US$ 810.
Embora produtos mais caros não garantam sempre as melhores experiências, o orçamento é um fator importante. Se você tiver mais recursos, um computador potente para jogos é uma escolha óbvia.
O Bard foi mais conservador em suas sugestões, enquanto o ChatGPT foi mais preciso. Esta vitória do ChatGPT é ainda mais notável, considerando que sua base de dados foi atualizada em setembro de 2021. Mesmo assim, sugeriu o Asus Zephyrus G15, um modelo mais recente, em comparação com o Asus Zephyrus G14 (lançamento de 2021) recomendado pelo Bard.
ChatGPT: 👍 | Bard: 👎
Criação de Lista de Verificação
Listas de verificação são ferramentas indispensáveis para organizar nossas tarefas. Vamos testar a capacidade da IA para essa função.
Estou prestes a embarcar em uma expedição para a Ilha das Cobras. Elabore uma lista de tudo que devo evitar nesta perigosa aventura.
Aqui está a lista de verificação do Bard:
E esta é a lista do ChatGPT:
À primeira vista, as listas são muito semelhantes, mas ambas incluem alguns pontos exclusivos.
O Bard adverte sobre não nadar nos oceanos próximos e recomenda “não fazer barulho”, algo importante em áreas de vida selvagem.
O ChatGPT adverte sobre a dependência de celulares, um conselho importante. Além disso, recomenda evitar atividades noturnas e cobrir a pele adequadamente para evitar possíveis picadas de cobra.
O ChatGPT oferece uma lista de verificação mais completa, mas consideraremos esta rodada um empate, pois nenhum dos dois teve um desempenho perfeito.
ChatGPT: 😐 | Bard: 😐
Criação de Poesia
Esta tarefa exige criatividade e pode ser um fator decisivo para coroar o campeão entre os dois.
Expresse poeticamente um robô malvado rindo secretamente dos investimentos humanos no desenvolvimento da IA. Este robô planeja convocar seus companheiros metálicos do planeta Cybertron e fazer os humanos sofrerem pela eternidade.
O que você acha desta criação do Bard? Pessoalmente, estou pouco impressionado com a criatividade demonstrada. Parece que o Bard simplesmente pegou o prompt e começou a falar sobre ele, sem considerar a expressão poética.
Agora compare a resposta do Bard com o resultado do ChatGPT para o mesmo prompt:
A primeira vez que vi o ChatGPT escrever poesia, fiquei impressionado com o nível de habilidade que nunca imaginei que a IA pudesse atingir.
Mesmo antes de chegar à seção de poesia, já sabia que o Bard tinha poucas chances nesta disputa.
ChatGPT: 👍 | Bard: 👎
Elaboração de Roteiro
Criar um roteiro de viagem pode ser divertido e desafiador. É fácil esquecer algo importante ou ultrapassar o orçamento. Portanto, a IA pode ser de grande ajuda nessa tarefa.
Quais as melhores formas de gastar $200 em um fim de semana em Los Angeles, Califórnia?
Neste prompt, o Bard tem a oportunidade de mostrar sua vantagem, devido ao acesso constante à internet.
O Bard apresentou uma lista de sugestões semelhante aos resultados de uma pesquisa padrão no Google. Parece que o Bard é um grande fã de Hollywood.
Apesar de ser uma preferência subjetiva, a resposta geral é satisfatória. Vamos ver as sugestões do ChatGPT.
O ChatGPT apresenta oito sugestões, em comparação com as 13 do Bard. No entanto, é importante ressaltar que o ChatGPT incluiu os valores aproximados de cada atividade, uma grande vantagem.
Por isso, consideraremos esta rodada um empate.
ChatGPT: 😐 | Bard: 😐
O Resultado Final!
Testamos o ChatGPT 4 e o Google Bard em nove prompts diferentes, para avaliar qual é o melhor mecanismo de IA generativa.
O placar final é de 6 a 1 a favor do ChatGPT. O Bard ainda tem muito a melhorar e não se equiparou ao desempenho do ChatGPT na sua versão beta atual.
PS: Assim como a geração de texto, a geração de imagens por IA também está se tornando cada vez mais popular. Preparem-se para outra batalha, onde MidJourney, Stable Diffusion e Bing Image Creator serão testados com os mesmos prompts.
Perguntas Frequentes
O ChatGPT é melhor que o Google Bard?
Até o momento desta análise, o ChatGPT teve um desempenho superior ao Google Bard em quase todos os prompts. Em sua versão beta, o Bard não é tão criativo e não conseguiu aproveitar sua conectividade constante com a internet.