Adotando o chatGPT na sala de aula de tecnologia financeira

O ChatGPT tem sido um tema de grande discussão no meio acadêmico, principalmente sobre como prevenir seu uso não autorizado nas aulas. No entanto, os alunos podem se beneficiar ao entender como usar a inteligência artificial (IA) generativa como uma ferramenta para economizar tempo e melhorar o desempenho nas tarefas de redação.

Craig Hurwitz, um executivo residente na Pratt School of Engineering, pediu aos alunos de pós-graduação em seu curso “Tendências Emergentes em Tecnologia Financeira (Fintech)” para gerar um primeiro rascunho de um ensaio com a ajuda do ChatGPT. Sua suposição de trabalho era que, quando os alunos entrassem na força de trabalho, eles teriam acesso e a capacidade de usar IA generativa para fins de produtividade. Ele queria experimentar o ChatGPT em seu curso para dar aos alunos uma visão em primeira mão de como usar a IA generativa.

Para a tarefa, a turma foi instruída a ler um estudo de caso e cada aluno escolheu uma abordagem de Fintech para ajudar a resolver um determinado desafio mencionado no caso. Sua tarefa escrita era um resumo executivo de 750 palavras que convenceu o instrutor (desempenhando o papel de capitalista de risco) por que ele deveria considerar uma reunião para discutir um investimento potencial.

As instruções pediam que cada aluno criasse um primeiro rascunho usando o ChatGPT. Depois de gerar o rascunho, eles importaram o rascunho para o Microsoft Word e ativaram o “rastrear alterações”. Eles editaram o rascunho inicial e enviaram o rascunho final com “controlar alterações” ainda ativado.

Isso deu ao professor a capacidade de ver o rascunho gerado pelo ChatGPT, as alterações feitas nesse rascunho e o produto final enviado por cada aluno. A faixa de saída final não editada variou de cerca de 20% a mais de 90%. Após a tarefa, os alunos responderam a uma pesquisa sobre suas experiências na tarefa. Esta postagem resume as reações dos alunos ao usar o ChatGPT.

IA como uma habilidade de trabalho

Os alunos consideraram esta tarefa um treinamento importante, pois esperam usar a IA no local de trabalho. Houve muitos comentários sobre como esta tarefa foi uma oportunidade de aprendizado sobre como usar um chatbot de IA de forma eficaz e como isso será uma habilidade valiosa quando eles se formarem e assumirem funções de tempo integral na força de trabalho.

Como explicou um aluno, “Gostei muito de trabalhar nesta tarefa. Acredito que o que você nos deixou fazer é o que acontecerá na vida real. Concluir esta tarefa é uma boa prática para usarmos a IA para melhorar nosso trabalho”.

Uma habilidade específica que os alunos adquiriram é como escrever prompts eficazes no ChatGPT. Muitos alunos perceberam que desenvolver um prompt apropriado é um processo iterativo e é a chave para uma experiência bem-sucedida. Quase todos os alunos embarcaram neste exercício com a tentativa de usar um único prompt para criar todo o ensaio.

No entanto, a maioria dos alunos achou que a saída era muito geral e, na maioria dos casos, muito repetitiva. A reação mais comum a isso era enviar para o ChatGPT perguntas específicas de acompanhamento usando texto descritivo e sucinto, projetado para criar uma saída para um parágrafo específico ou, mais especificamente, um marcador.

Vários alunos comentaram sobre a importância de treinar o ChatGPT para assumir uma função específica antes do processo de induzi-lo a gerar qualquer saída escrita. “Eu colocaria mais ênfase no treinamento da IA ​​para adotar uma determinada persona, em vez de gastar muito tempo tentando descobrir o prompt certo”, comentou um aluno na pesquisa pós-tarefa.

Eficiência de escrita

Todos os alunos afirmaram que usar um chatbot de IA para ajudar a gerar um primeiro rascunho foi útil. Noventa por cento dos alunos disseram que usar um chatbot de IA economizava tempo. Um aluno comentou: “Para cada minuto que você gasta no ChatGPT, você economiza dez minutos, mas certifique-se de fornecer à IA as informações precisas com as quais deseja trabalhar e o risco de erros é mínimo.”

Vinte e um dos 36 alunos da classe que falam inglês como segunda língua sentiram outro benefício. Cada um deles indicou que já tinha experiência no uso do ChatGPT antes desta atribuição. Um refrão comum era que o uso de um chatbot de IA os ajudava a escrever como se o inglês fosse sua língua nativa. No entanto, como um aluno alertou: “A gramática usada pela IA era perfeita, mas achei a linguagem vaga e pouco sofisticada”. Este comentário aponta para a compreensão geral dos alunos sobre as limitações do ChatGPT.

Limitações

Embora os alunos tenham achado o ChatGPT útil, houve comentários significativos sobre as limitações dessa geração da tecnologia. As limitações geralmente se enquadram em uma das três categorias: 1) fontes incorretas, 2) fontes desatualizadas e 3) a saída sendo tão boa quanto o prompt. “Descobri que o ChatGPT gerou informações corretas, mas com citações incorretas”, observou um aluno.

Mais da metade da turma descobriu que o ChatGPT gerou informações incorretas e apenas dois dos 36 manifestaram confiança nas fontes citadas pelo ChatGPT. Os alunos entenderam que a verificação de fatos é uma parte essencial do uso do ChatGPT para escrever, já que a integridade da fonte é um grande problema. Além disso, como a tarefa dos alunos era destacar tendências emergentes em Fintech, eles não podiam confiar nos dados mais antigos do ChatGPT (setembro de 2021).

Observe que os alunos usaram o modelo GPT-3.5 para esta tarefa de IA; isso foi antes do lançamento do GPT-4.0, quando a capacidade de citar fontes melhorou um pouco, mas confiar nas fontes fornecidas pelo GPT continua problemático.

Muitos alunos comentaram que gostaram de trabalhar na tarefa, mas estão cientes das considerações éticas, como propriedade intelectual, e apreciaram a necessidade de proteções. Os alunos entendidos usando o ChatGPT podem ser apenas uma etapa no processo de escrita. “O bot não deve ser usado como uma resposta final, mas apenas como uma maneira de entender um tópico ou debater ideias. A capacidade do ChatGPT de sintetizar fontes e condensar informações é ótima, mas não deve substituir nossos próprios filtros e capacidade de fazer isso mesmo trabalho nós mesmos.”

Conclusão

Os recursos de IA generativa estão avançando rapidamente. É uma ferramenta de produtividade que provavelmente ganhará grande aceitação e uso na força de trabalho. Treinar os alunos sobre como usar a tecnologia de forma adequada e eficaz é uma habilidade importante para a vida. Para aqueles que estão preocupados se o output gerado pelo ChatGPT é obra da ferramenta ou do aluno, nada substitui fazer a pesquisa básica, ter uma compreensão clara do que se quer comunicar e saber, de antemão, a estrutura escrita que você espera receber do ChatGPT.

Do ponto de vista de um professor que passou a maior parte de sua carreira na indústria, foi gratificante ver a rapidez com que os alunos se adaptaram à tecnologia e a otimizaram, e como isso resultou em redações produzidas com mais eficiência e, em muitos casos, com qualidade superior às eles poderiam ter alcançado de outra forma.