Bard, Bing e o problema dos 90%

Não sei se você ouviu fala, mas a ‘Busca como a Conhecemos’ está prestes a ser transformada para sempre.

Para sempre, mesmo! Você já pensou nisso?! AS COISAS NUNCA MAIS SERÃO AS MESMAS!!

Mas sério, se você leu muitas notícias de tecnologia nas últimas semanas, provavelmente foi inundado com inúmeras declarações sobre como a Microsoft está se movendo em direção a uma configuração de pesquisa com IA e a tropeçada esquisita do Google na mesma direção estão prestes a inaugurar uma nova era de pesquisa on-line – uma onde o padrão testado e comprovado de busca de informações é completamente substituído por uma interface de bate-papo simples. Aqui, você apenas faz uma única pergunta a um bot e obtém instantaneamente a resposta de que precisa.

De explodir a mente.

Para ter certeza, isso é algo verdadeiramente futurista. E tudo é baseado em uma tecnologia de IA extremamente impressionante que abriu caminho e penetrou na consciência pública no início de 2023.

Mas se você me permite ter uma perspectiva contrária ligeiramente impopular, não estou convencido. Não que todo esse novo barulho de chatbot de IA não seja de fato transformador em algum nível – ele está pronto para inaugurar uma nova era de pesquisa e fazer com que nossos bons e velhos instintos de pesquisa no Google pareçam antiquados.

Permita-me explicar.

A história de pesquisa do ChatGPT

Primeiro, um pouco do contexto para definir o cenário para tudo isso: esta última rodada de filosofia do futuro começou com a popularidade repentina de uma ferramenta chamada ChatGPT.

ChatGPT, caso você tenha vivido sob uma pedra de 77 libras ultimamente, é um chatbot orientado por IA que está conquistando a web. Em poucas palavras, o ChatGPT permite que você faça perguntas e obtenha respostas aparentemente singulares, como se estivesse conversando diretamente com outro ser humano – apenas esse organismo de imitação tem acesso instantâneo a montanhas de informações on-line e é capaz de reunir respostas aparentemente originais com base em todos esses dados.

Ah, e também pode escrever coisas para você e executar uma variedade de tarefas baseadas em dados, com vários graus de eficácia. Mas deixaremos essa parte de lado por um momento – porque é o elemento de pesquisa do ChatGPT e seus contemporâneos que é o nosso foco agora.

Depois que a Microsoft cooptou a tecnologia subjacente do ChatGPT e a trouxe para o Bing (que, sim, ainda existe!), O Google se apressou em anunciar uma versão que logo se tornaria pública de seu próprio “serviço de IA conversacional” chamado Bard, que da mesma forma permitirá que você pesquise na web digitando em um bot.

E as promessas em torno de ambos os empreendimentos são ousadas, para dizer o mínimo. A Microsoft diz que seu Bing-bot com inteligência artificial “reinventa” a pesquisa e atua como um novo “copiloto para a web”. O Google diz que seu concorrente “combina a amplitude do conhecimento mundial com o poder, a inteligência e a criatividade dos grandes modelos de linguagem [da empresa]”. Ambos estão sendo posicionados como reviravoltas fundamentais em como pensaremos sobre a pesquisa e que tipos de experiências encontraremos.

Mas aqui está o que essas avaliações grandiosas estão negligenciando: em termos de suas proezas de pesquisa, especificamente, as experiências que esses novos sistemas oferecem não são realmente um tipo totalmente novo de alternativa de pesquisa em busca de informações. Em vez disso, são versões mais avançadas dos mesmos conceitos básicos que o Google vem nos dando há anos, com potência adicional sob o capô e uma interface ainda mais específica.

E como qualquer pessoa que já usou o Google Assistant pode dizer, esse tipo de configuração é espetacular para a busca de informações – quando funciona. O problema é que muitas vezes isso não acontece. Não de forma confiável, de qualquer maneira.

Com o Assistant, o problema geralmente se resume ao serviço não entender totalmente o que você está perguntando ou não ser capaz de fornecer o tipo certo de resposta. Com esses serviços de chatbot de IA de última geração – tanto o sistema de pesquisa do Bing baseado em ChatGPT quanto o equivalente do Google baseado em Bard – o problema é ainda mais desconcertante: a tecnologia frequentemente fornece informações totalmente incorretas. E o faz com um nível alarmante de confiança.

Com certeza você já deve ter visto os stories sobre isso, certo? O novo chatbot de IA do Bing erra todo tipo de coisa, variando do mundano – como horários de voo ou fatos básicos – ao muito mais problemático e às vezes simplesmente bizarro. O chatbot Bard, do Google, teve muito menos visibilidade em primeira mão fora do Google até agora, mas até mesmo o material de marketing inicial da própria empresa incluía uma embaraçosa confusão factual – não exatamente um começo reconfortante.

Isso nos leva à questão central de toda essa tecnologia, quer estejamos falando do Google Assistant ou de qualquer um desses equivalentes mais avançados.

O problema de porcentagem do chatbot de IA

Não vou dourar a pílula: quando se trata de interações on-line, fazer algo certo mesmo 90% das vezes não é bom o suficiente.

Com a pesquisa em particular, a precisão e o rigor são importantes. Uma resposta simples é boa – quando está certa. E quando você pode confiar que está certo.

Mas certamente parece que agora, isso é tudo, menos o caso de qualquer uma dessas tecnologias. Inferno, o Bing-bot da Microsoft inclui isenções de responsabilidade proeminentes que provavelmente fornecerão informações imprecisas ou incompletas! E deixando de lado toda a novidade e o fator interessante, simplesmente não vejo como isso será um utilitário especialmente útil em um contexto de pesquisa, enquanto esse for o caso.

Você só precisa olhar para o Google Assistant e seus contemporâneos de assistente de voz virtual para a prova. É realmente muito simples: mesmo que uma em cada 10 tentativas de usar algo produza um resultado falho ou insatisfatório por qualquer motivo, as pessoas tendem a perder a fé nessa coisa rapidamente. E eles acabam recorrendo a outra ferramenta para o mesmo propósito com mais frequência do que nunca.

É por isso que muitos de nós confiamos no Assistent para comandos funcionais, que funcionam de maneira bastante consistente – mas quando se trata de pesquisas mais complexas, quer tenhamos o Assistente à nossa disposição e ligue para um telefone ou integrado à interface principal do sistema em um Chromebook, é mais provável que acessemos o Google para obter uma resposta. Puro e simples, aprendemos ao longo do tempo que o Assistent simplesmente não nos fornecerá as informações de que precisamos uma boa parte do tempo.

É uma regra bem conhecida da tecnologia: algo tem que ser quase perfeito para ser realmente útil e valer a pena ser usado. Mais do que alguns erros raros aqui e ali, e simplesmente não vale a pena o esforço para a maioria das pessoas.

Até agora, pelo menos, tanto o ChatGPT Bing-bot com inteligência artificial quanto o sistema Google Bard parecem se encaixar bem nesse terreno de “muitas falhas” – e com maior probabilidade do que uma em 10 chances de falha, nesse caso. Isso torna difícil não ficar nem um pouco cético sobre o quão amplamente esses tipos de ferramentas serão realmente usados além do período inicial de novidade, pois as pessoas começam a ficar frustradas com a falta de confiabilidade quando se trata da busca real de informações.

(A outra possibilidade, talvez mais preocupante, é que as pessoas nem sempre percebem que as informações são imprecisas ou defeituosas de alguma forma. Mas esse é outro problema.)

E tudo isso sem falar nas muitas instâncias de pesquisa em que uma única resposta de conversação simplesmente não é suficiente – quando você está procurando imagens, críticas, informações específicas de diferentes fontes ou outras necessidades frequentes.

Em última análise, tudo se resume a um par de perguntas quase chocantemente simples.

As questões de pesquisa urgentes do chatbot

Deixando tudo de lado, as perguntas que temos que nos fazer com todo esse material novo e brilhante são: (a) se é realmente mais rápido e mais prático do que a pesquisa tradicional – não apenas de vez em quando e em cenários limitados específicos, mas consistentemente – e (b) se as pessoas comuns realmente quiserem usá-lo em vez daquelas ferramentas testadas e comprovadas assim que a novidade inicial passar. São perguntas muito mais difíceis de responder com um sonoro “sim!” do que toda a empolgação em torno desse assunto levaria você a acreditar, e as respostas podem ser muito mais sutis do que sugere nossa atual vertigem.

Para contextualizar, lembre-se: o mundo da tecnologia está sempre ansioso para declarar as coisas como “mortas”. Empresas e especialistas adoram falar com certeza sobre como cada novo desenvolvimento é um grande divisor de águas e o início de uma nova era. Vimos isso acontecer com a realidade virtual e depois com a realidade aumentada. Vimos isso com telas 3D e telefones dobráveis. Vimos isso com “o metaverso”, seja lá o que for (ou era, mais provavelmente).

E sabe de uma coisa? Com todos esses supostos divisores de águas, a realidade raramente acaba sendo tão dramática ou em preto e branco quanto sugere a empolgação inicial.

Como está agora, uma coisa parece difícil de negar: apesar de todo o entusiasmo em torno desses sistemas de pesquisa de IA, no geral, você ainda obtém resultados melhores, mais precisos e mais completos em uma pesquisa regular no estilo do Google.

E enquanto isso permanecer verdadeiro pelo menos 10% do tempo, é difícil imaginar Bing, Bard ou qualquer outro sistema substituindo a pesquisa como a conhecemos e, tipo, mudando totalmente tudo para sempre em breve.