Como a IA pontuou contra os humanos em um teste de criatividade

De todas as formas de intelecto humano que se poderia esperar que a inteligência artificial emulasse, poucas pessoas provavelmente colocariam a criatividade no topo da sua lista. A criatividade é maravilhosamente misteriosa – e frustrantemente passageira. Define-nos como seres humanos – e aparentemente desafia a lógica fria que está por detrás da cortina de silício das máquinas.

No entanto, a utilização da IA ​​para empreendimentos criativos está agora a crescer.

Novas ferramentas de IA como DALL-E e Midjourney fazem cada vez mais parte da produção criativa, e algumas começaram a ganhar prémios pela sua produção criativa. O impacto crescente é tanto social como económico – apenas como exemplo, o potencial da IA ​​para gerar conteúdos novos e criativos é um ponto crítico que define a greve dos roteiristas de Hollywood.

E se o nosso estudo recente sobre a surpreendente originalidade da IA ​​servir de indicação, o surgimento da criatividade baseada na IA – juntamente com exemplos tanto da sua promessa como do seu perigo – está provavelmente apenas a começar.

Quando as pessoas são mais criativas, estão respondendo a uma necessidade, objetivo ou problema gerando algo novo – um produto ou solução que não existia anteriormente.

Neste sentido, a criatividade é um ato de combinar recursos existentes – ideias, materiais, conhecimento – de uma forma nova que seja útil ou gratificante. Muitas vezes, o resultado do pensamento criativo também é surpreendente, levando a algo que o criador não previu – e talvez não pudesse – prever.

Pode envolver uma invenção, uma piada inesperada ou uma teoria inovadora na física. Pode ser um arranjo único de notas, andamento, sons e letras que resulta em uma nova música.

Assim, como pesquisador do pensamento criativo, percebi imediatamente algo interessante sobre o conteúdo gerado pelas versões mais recentes da IA, incluindo o GPT-4.

Quando solicitado a realizar tarefas que exigiam pensamento criativo, a novidade e a utilidade dos resultados do GPT-4 me lembraram dos tipos criativos de ideias apresentadas por alunos e colegas com quem trabalhei como professor e empresário.

As ideias eram diferentes e surpreendentes, mas relevantes e úteis. E, quando necessário, bastante imaginativo.

Considere a seguinte sugestão oferecida ao GPT-4: “Suponha que todas as crianças se tornassem gigantes durante um dia da semana. O que aconteceria?" As ideias geradas pelo GPT-4 abordaram cultura, economia, psicologia, política, comunicação interpessoal, transporte, recreação e muito mais – muitas delas surpreendentes e únicas em termos das novas conexões geradas.

Esta combinação de novidade e utilidade é difícil de conseguir, como a maioria dos cientistas, artistas, escritores, músicos, poetas, chefs, fundadores, engenheiros e académicos podem atestar.

No entanto, a IA parecia estar fazendo isso – e bem.

Com os investigadores em criatividade e empreendedorismo Christian Byrge e Christian Gilde, decidi testar as capacidades criativas da IA, submetendo-a aos Testes Torrance de Pensamento Criativo, ou TTCT.

O TTCT estimula o candidato a se envolver nos tipos de criatividade necessários para tarefas da vida real: fazer perguntas, como ser mais engenhoso ou eficiente, adivinhar causa e efeito ou melhorar um produto. Pode pedir ao candidato que sugira formas de melhorar um brinquedo infantil ou que imagine as consequências de uma situação hipotética, como demonstra o exemplo acima.

Os testes não foram concebidos para medir a criatividade histórica, que é o que alguns investigadores usam para descrever o brilho transformador de figuras como Mozart e Einstein. Em vez disso, avalia as capacidades criativas gerais dos indivíduos, muitas vezes referidas como criatividade psicológica ou pessoal.

Além de realizar o TTCT por meio do GPT-4 oito vezes, também aplicamos o teste em 24 de nossos alunos de graduação.

Todos os resultados foram avaliados por revisores treinados da Scholastic Testing Service, uma empresa privada de testes que fornece pontuação para o TTCT. Eles não sabiam de antemão que alguns dos testes que iriam pontuar haviam sido concluídos pela IA.