ENDA2023

Micaela Aguiar (Universidade do Minho) — maguiar60@gmail.comSílvia Araújo (Universidade do Minho) — saraujo@elach.uminho.pt

Como escrever um projeto de dissertação com Inteligência Artificial?

— aplicação pedagógica de ferramentas digitais em prol de géneros académicos ocultos

Contexto

O acesso limitado ao ensino explícito de competências de literacia académica nos estudantes de pós-graduação...

• é sentido pelos próprios estudantes quando se deparam com géneros académicos menos conhecidos
• é testemunhado pelos professores que presenciam as dificuldades dos alunos
• é consequência do "não reconhecimento da necessidade de desenvolvimento de uma literacia académica" em ciclos de ensino anteriores (Gouveia, 2019)
• é um fator de desiguladade (Preto-Bay, 2004), uma vez que estas competências regulam a participação enquanto membro da comunidade académica e científica

Como criar ferramentas/metodologias para ajudar os estudantes a adquirir competências de literacia académica em autonomia?

Um objetivo que é também uma linha de investigação

Trabalhos anteriores

No âmbito do projeto de investigação PortLinguE (PTDC/LLT-LIG/31113/2017), usámos dados científicos abertos para a criação de recursos e metodologias de apoio às línguas de especialidade e à literacia académica, tais como...

aLBERTUM (academic language BERT from University of Minho)

Um motor de pesquisa que ajuda a encontrar terminologia em PT & EN e a escrever textos académicos

Banco de frases e expressões académicas

semelhante ao Academic Phrasebank da Universidade de Manchester

Metodiza

Um método de realização de trabalhos académicos em 7 passos com um formato web e um formato de volume editado

Como aproveitar a popularização de ferramentas de IA em prol da literacia académica?

Porquê aproveitar a popularização de ferramentas de IA em prol da literacia académica?

• São populares: os estudantes já usam estas ferramentas mesmo que não o admitam...
• apesar de serem populares, estudantes e professores partilham a ideia pré-concebida de que estas ferramentas servem apenas para "copiar" e plagiar trabalhos académicos
• Têm potencial pedagógico: desde o lançamento do ChatGPT, foi nas áreas da educação e da escrita académica que mais artigos foram escritos (Aydin e Karaarslan, 2023)

É necessária uma literacia básica da inteligência artificial generativa para usar estas ferramentas enquanto estudantes professores e investigadores de forma responsável e consciente.

Intro à Inteligência Artificial Generativa

Como funciona?

Katzir descreve os grandes modelos de linguagem (LLMs) como ferramentas estatísticas utilizadas para prever palavras numa sequência. Wolfram afirma que o objetivo fundamental do ChatGPT é gerar consistentemente uma "continuação razoável" do texto fornecido. Ferramentas como o ChatGPT colocam repetidamente a questão "dado o texto providenciado até agora, qual deve ser a próxima palavra?" e continuam a adicionar palavras em resposta.Contudo, estas ferramentas não se basearem apenas no raciocínio probabilístico, têm mecanismos que permitem aos modelos fazer as escolhas mais adequadas com base no contexto fornecido.

Quais são as limitações?

Limitações da utilização:

• os LLMs têm tendência para "alucinar", i.e., apresentam respostas que parecem razoáveis, mas são completamente fabricadas e não têm qualquer fundamento na realidade

Limitações no design:

• Os LLMs replicam preconceitos ao codificarem associações estereotipadas e depreciativas relacionadas com o género, a raça, a etnia e o estatuto de incapacidade
• Os LLMs são treinados em vastos conjuntos de dados que podem ter direitos de autor, os utilizadores correm o risco de plagiar involuntariamente conteúdos se utilizarem os resultados sem verificarem a informação

Intro à Inteligência Artificial Generativa

Como usar?

Começa-se por fornecer um instrução (no inglês "prompt") sob a forma de texto e o modelo de AI gera conteúdo novo com base na instrução. As ferramentas mais populares como o ChatGPT são chatbots conversacionais e as interações com os utilizadores assemelham-se a uma conversa.Quando se utilizam ferramentas baseadas em prompts, é importante reconhecer que as prompts frutos de pouco esforço produzem geralmente resultados de fraca qualidade.

Engenharia de 'prompts'

O conceito de IA de "engenharia de prompts" tornou-se rapidamente popular entre os não especialistas.Engenharia de prompts implica a prática de refinar os prompts para elicitar as melhores respostas possíveis.Um bom prompt contem:

• uma instrução que indica a tarefa desejada,
• um contexto externo para melhorar as respostas do modelo
• dados de entrada ou a pergunta em questão
• um indicador que especifica o formato ou tipo de resposta desejado

O nosso objetivo é usar as potencialidades pedagógicas de IA para ajudar os estudantes a produzirem géneros académicos pouco conhecidos, muitas vezes pouco estudados e sobre os quais existe pouca informação disponível.

Como escrever um projeto de dissertação com IA?

Porque escolhemos o género discursivo "projeto de dissertação"?

• o projeto de dissertação pode ser considerado como um “occluded genre”(Swales, 2004) ou, usando a proposta de Nunes Silva (2020), um "género tapado", "obstruído" ou mesmo "oculto"
• são géneros estão escondidos da vista de aprendizes e de pessoas fora de uma determinada comunidade discursiva, como a comunidade académica

Adaptação da pedagogia de género de Hyland (2017)

Passo 1

definição do contexto

para revelar os objetivos do género e os espaços em que é habitualmente utilizado

Passo 2

exemplificação

análise de amostras representativas do género para identificar as suas fases e características principais e as variações possíveis

Passo 3

construção indepente orientada

escrita e feedback através de tarefas que se centram em partes específicas do género

Passo 4

comparação

relacionar o que foi aprendido com outros géneros e contextos para compreender como os géneros são concebidos para atingir determinados objectivos sociais.

Passo 1 - definir o contexto

Prompt: Descreve as seguintes informações sobre género discursivo académico "projeto de dissertação de Mestrado", sendo o mais detalhado possível, num formato de tabela: Qual é a finalidade de um projeto de dissertação? Quem são os participantes e quais são as principais características dos participantes (estatuto, função, etc)? Qual é a extensão típica de um projeto de dissertação de Mestrado? Em que contexto costuma ser escrito um projeto de dissertação?

Passo 1 - definição do contexto

E se usarmos o mesmo 'prompt' desta vez para um projeto de relatório de estágio?

Passo 2 - exemplificação

estrutura

funções comunicativas

características discursivas e linguísticas

análise de exemplos

Passo 2 - estrutura

prompt: Descreve, num formato de lista, a estrutura típica de um "projeto de dissertação".

Passo 2 - funções comunicativas

prompt: Delimita, em formato de tabela, a estrutura de um "projeto de dissertação" associando a cada parte as funções comunicativas mais comuns.

Passo 2 - características discursivas e linguísticas

prompt: Imagina que és um professor. Indica, apresentando exemplos, as características discursivas e linguísticas típicas do "projeto de dissertação", em termos de pessoa e tempos verbais, atos de fala mais comuns, tipo de léxico mais usado, registo, estratégias argumentativas, etc. Dispõe a informação numa tabela.

Passo 2 - análise de um exemplo

prompt 1: Escreve um exemplo de uma introdução de um projeto de dissertação.prompt 2: Numa tabela, coloca o exemplo de introdução anterior na primeira coluna. Na segunda coluna, indica as funções comunicativas . Na terceira coluna, destaca expressões académica commumente usadas para formular essas funções comunicativas.

Passo 3 - construção independente orientada: feedback

Prompt : Imagina que és um orientador. Analisa a seguinte introdução de um projeto de dissertação e avalia-a, justificando, segundo os seguintes parâmetros: (a) presença das funções comunicativas típicas de uma introdução de projeto de dissertação, (b) qualidade e riqueza da escrita académica.

Passo 3 - construção independente orientada: estratégias de melhoria

Prompt : Indica estratégias para melhorar o texto que avaliaste com exemplos.

Passo 4 - comparação

Prompt: Quais são os géneros académicos que um estudante que vai escrever uma dissertação de mestrado pode encontrar até à entrega e defesa?

Passo 4 - comparação

Prompt: Considera o seguinte texto "..."e propõem uma estrutura de dissertação.Prompt: Transforma o seguinte texto "..." num resumo para apresentação em conferência.Prompt: A partir do seguinte texto, apresenta a estrutura de um póster científico, incluindo sugestões de ilustrações/gráficos, disposição dos elementos e paleta de cores. Coloca a informação numa tabela.

Trabalho futuro: aplicação com estudantes

• Neste ano letivo 2023/2024, iremos aplicar esta metodologia com alunos do segundo ano de mestrado (um grupo de estudo e um grupo de controlo)

• O objetivo é comparar os projetos de dissertação do grupo de estudo e do grupo de controlo

• Queremos também saber:
• qual o grau de literacia digital e de IA dos alunos? usam ferramentas de IA e se sim de que forma?
• que informação é que os alunos têm sobre estes géneros ocultos e como é que a adquirirem? será que a metodologia aumenta a consciência de género dos alunos?
• como é que a metodologia afeta a motivação e a confiança dos alunos na realização de outros géneros académicos?
• Se obtivermos resultados positivos, a intenção é expandir a metodologia a outros géneros académicos

Referências

Gouveia, C. M.: Como se faz uma disciplina: Mapas de conhecimento e distinções operacionais sobre o que é o discurso académico enquanto objeto de estudo. In: Caels, F., Barbeiro, L. F. & Santos, J. V. (eds.) Discurso Académico: Uma Área Disciplinar em Construção, pp. 19–43. CELGA-ILTEC, Universidade de Coimbra/ Escola Superior de Educação e Ciências Sociais, Politécnico de Coimbra (2019). Preto-Bay, A. M.: The Social-Cultural Dimension of Academic Literacy Development and the Explicit Teaching of Genres as Community Heuristics. The Reading Matrix 4 (3) 86–117 (2004).ChatGPT isn’t even close to being intelligent”. Viki Auslender, April 16, 2023. https://www.calcalistech.com/ctechnews/article/nt9qoqmzz,.‘What Is ChatGPT Doing ... and Why Does It Work?, February 14’, 2023. https://writings.stephenwolfram.com/2023/02/what-is-chatgpt-doing-and-why-does-it-workHyland, K. (2007). Genre pedagogy: Language, literacy and L2 writing instruction. Journal of Second Language Writing, 16(3), 148–164. https://doi.org/10.1016/j.jslw.2007.07.005Hyland, K. (2008). Genre and academic writing in the disciplines. Language Teaching, 41(4), 543–562. https://doi.org/10.1017/S0261444808005235Aydın, Ö., & Karaarslan, E. (2023). Is ChatGPT Leading Generative AI? What is Beyond Expectations? SSRN Electronic Journal. https://doi.org/10.2139/ssrn.4341500Nunes da Silva, P. (2020). Redes, cadeias, sistemas e reportórios: Sobre as relações entre géneros. Linguística (Revista de Estudos Linguísticos da Universidade do Porto), 15, 95-134.Swales, J. (2004). Research genres: Explorations and applications. Cambridge University Press.

obrigada!