Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa

i Universidade do Minho Instituto de Letras e Ciências Humanas Catarina Maria Cortez Azevedo Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa Relatório de Estágio Mestrado em Português Língua Não Materna – Língua Estrangeira e Língua Segunda Trabalho efetuado sob a orientação do Professor Doutor Álvaro Iriarte Sanromán e do Professor Doutor Alberto Manuel Brandão Simões Outubro de 2019 ii DIREITOS DE AUTOR E CONDIÇÕES DE UTILIZAÇÃO DO TRABALHO POR TERCEIROS Este é um trabalho académico que pode ser utilizado por terceiros desde que respeitadas as regras e boas práticas internacionalmente aceites, no que concerne aos direitos de autor e direitos conexos. Assim, o presente trabalho pode ser utilizado nos termos previstos na licença abaixo indicada. Caso o utilizador necessite de permissão para poder fazer um uso do trabalho em condições não previstas no licenciamento indicado, deverá contactar o autor, através do RepositóriUM da Universidade do Minho. Licença concedida aos utilizadores deste trabalho Atribuição CC BY https://creativecommons.org/licenses/by/4.0/ iii Agradecimentos Foram diversas as pessoas que me acompanharam e apoiaram tanto no meu estágio como na realização deste respetivo relatório. Quero por isso expressar o meu agradecimento a todos os que contribuíram para o desenvolvimento deste trabalho. Agradeço aos meus orientadores, Professor Álvaro Iriarte Sanromán e Professor Doutor Alberto Manuel Brandão Simões, pelo apoio, pela paciência, pelos conselhos e, sobretudo, pela disponibilidade e boa disposição com que sempre me receberam. Agradeço a todos os docentes com os quais trabalhei ao longo do meu estágio. Especialmente ao Professor Xosé Ramón Freixeiro Mato pelo apoio incondicional e orientação na Universidade da Corunha e à Professora Cilha Lourenço Módia, pelos conhecimentos que me transmitiu. Agradeço aos meus alunos de Idioma Moderno: Português, que colaboraram abertamente, tanto nas aulas como no preenchimento dos inquéritos que neste trabalho são analisados. Finalmente, agradeço à minha família, em especial ao meu irmão, pela supervisão da realização deste trabalho. Muito obrigado a todos. iv DECLARAÇÃO DE INTEGRIDADE Declaro ter atuado com integridade na elaboração do presente trabalho académico e confirmo que não recorri à prática de plágio nem a qualquer forma de utilização indevida ou falsificação de informações ou resultados em nenhuma das etapas conducente à sua elaboração. Mais declaro que conheço e que respeitei o Código de Conduta Ética da Universidade do Minho. Resumo v Resumo Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa O presente trabalho tem como objetivo verificar se a consulta dos dicionários é capaz de incutir polaridade no utilizador e analisar a capacidade de atribuição de sentimento do léxico SentiLex. Para isso, foi feita uma seleção de 60 adjetivos cuja polaridade (atribuída pelo SentiLex) é duvidosa, para serem reavaliadas por uma turma de 21 aprendentes de PLE da Universidade da Corunha, inscritos na unidade curricular Idioma Moderno: Português (nível A2) da licenciatura em Galego e Português, com a ajuda de dois dicionários disponibilizados para este fim. Concluindo a análise, comprovou-se que 56 dos 60 adjetivos selecionados estão incorretamente classificados pelo SentiLex, com base nos inquéritos recolhidos. Comprovou-se também que os dicionários nem sempre conseguem esclarecer o aprendente de PLE e que, por vezes, transmitem ideias equivocadas aos utilizadores. Palavras-chave: Análise de sentimento; Léxico de sentimento; Linguística computacional; Polaridade. Abstract vi Abstract Words with positive polarity and negative polarity in two portuguese language dictionaries The present work aims to verify whether the consultation of dictionaries is capable of instilling polarity in the user and analyze the ability to assign feeling by Sentilex lexicon. For this, was made a selection of 60 adjectives whose polarity (assigned by SentiLex) is dubious, to be reevaluated by a class of 21 portuguese learners from the University of A Coruña, enrolled in the Curricular Unit “Modern Language: Portuguese” (Level A2) of the degree in Galician and Portuguese, with the help of two dictionaries available for this purpose. In conclusion, it was proven that 56 of the 60 selected adjectives are incorrectly classified by SentiLex, based on the surveys collected. It has also been proven that dictionaries cannot always clarify the learner and sometimes transmit misconceptions to users. Keywords: Computational linguistics; Polarity; Sentiment Analysis; Sentiment Lexicon; Índice vii Índice Agradecimentos ......................................................................................................................... ii Resumo ....................................................................................................................................... v Abstract ..................................................................................................................................... vi Índice .........................................................................................................................................vii Índice de figuras .........................................................................................................................ix Índice de tabelas ........................................................................................................................ix Índice de gráficos ....................................................................................................................... x Introdução .................................................................................................................................. 1 1 Capítulo 1: Enquadramento teórico ...................................................................................... 3 1.1 Processamento de linguagem Natural (PLN).................................................................. 3 1.2 Análise de Sentimento.................................................................................................... 5 2 Capítulo 2: Léxicos de Sentimento: SentiLex.pt .................................................................... 8 2.1 Léxicos de Sentimento .................................................................................................... 8 2.2 SentiLex-PT: Principais características e potencialidades .............................................. 8 2.3 Atribuição de Polaridade .............................................................................................. 10 2.4 Polaridade em léxicos de sentimento e em dicionários............................................... 13 2.5 A importância da polaridade no processamento de uma LE. ...................................... 14 3 Capítulo 3: Dicionários de Língua Portuguesa ..................................................................... 16 3.1 Dicionário Aberto ......................................................................................................... 16 3.2 Dicionário Priberam ...................................................................................................... 17 4 Capítulo 4: O estágio ........................................................................................................... 18 4.1 O local de estágio ......................................................................................................... 18 4.2 O público alvo ............................................................................................................... 18 4.3 Programa e Cronograma .............................................................................................. 19 5 Capítulo 5: Análise dos resultados obtidos ......................................................................... 23 5.1 Método ......................................................................................................................... 23 5.2 Resultados esperados ................................................................................................... 25 5.3 Atribuição de polaridade: SentiLex e alunos ................................................................ 25 5.3.1 Exceções .............................................................................................................. 27 5.4 Consulta aos dicionários: Antes e depois ..................................................................... 34 Índice viii 5.4.1 Uniformização das opiniões ................................................................................ 34 5.4.2 Discrepâncias ...................................................................................................... 38 5.5 Últimas considerações .................................................................................................. 41 Conclusão ................................................................................................................................ 42 Referências Bibliográficas ...................................................................................................... 44 Anexos ...................................................................................................................................... 46 Anexo I: Listagem dos adjetivos selecionados ......................................................................... 47 Anexo II: Adjetivos considerados positivos pelo SentiLex ....................................................... 51 Anexo III: Adjetivos considerados neutros pelo SentiLex ........................................................ 59 Anexo III: Adjetivos considerados negativos pelo SentiLex ..................................................... 67 Índice de figuras e tabelas ix Índice de figuras Figura 1 Definição de antiquado pelo Dicionário Aberto........................................................... 5 Figura 2 Definição de antiquado pelo Dicionário Priberam ....................................................... 5 Figura 3 Formato do SentiLex-lem-PT-txt .................................................................................. 9 Figura 4 Formato do SentiLex-flex-PT01 .................................................................................. 10 Figura 5 Definição de bestial pelo Dicionário Aberto .............................................................. 14 Figura 6 Definição de bestial pelo Dicionário Priberam ........................................................... 14 Figura 7 assassinado pelo SentiLex .......................................................................................... 24 Figura 8 Definição de assassinado pelo Dicionário Aberto ...................................................... 24 Figura 9 Definição de assassinado pelo Dicionário Priberam .................................................. 24 Figura 10 Atribuição de polaridade pelo SentiLex ................................................................... 26 Figura 11 Atribuição de polaridade pelo Alunos ...................................................................... 26 Figura 12 Definição de gozar pelo Dicionário Aberto .............................................................. 28 Figura 13 Definição de gozar pelo Dicionário Priberam .......................................................... 28 Figura 14 Definição de lisonjeador pelo Dicionário Aberto ..................................................... 29 Figura 15 Definição de lisonjeiro pelo Dicionário Priberam ..................................................... 30 Figura 16 Definição de indispensável pelo Dicionário Aberto ................................................. 31 Figura 17 Definição de indispensável pelo Dicionário Priberam .............................................. 31 Figura 18 obediente pelo Dicionário Aberto ............................................................................ 33 Figura 19 obediente pelo Dicionário Priberam ........................................................................ 33 Índice de tabelas Tabela 1 Programa de estudos ................................................................................................. 19 Tabela 2 Cronograma do mês de setembro ............................................................................. 21 Tabela 3 Cronograma do mês de outubro ............................................................................... 21 Tabela 4 Cronograma do mês de novembro ........................................................................... 21 Tabela 5 Cronograma do mês de dezembro ............................................................................ 22 Tabela 6 Ficha técnica .............................................................................................................. 23 Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 6 ou positivo conforme a língua e o contexto onde me encontro? Sem saber a polaridade da palavra, como me asseguro de que a utilizo devidamente numa conversação? Também a tradição lexicográfica não costuma incluir informação chamada “conotativa” nos dicionários, dada, principalmente, sua alta dependência contextual (Freitas, 2013). Por conotação, entenda-se a parte do sentido de uma palavra que não corresponde ao seu valor representativo, mas à capacidade da palavra de funcionar para uma manifestação psíquica ou apelo. Por exemplo, na frase “Casa é casa”, a primeira ocorrência do vocábulo dá-se em sentido denotativo, enquanto a segunda tem uma nota de “apreciação, aconchego”. (Baroni, Santos, & Souza, 2008, p. 64) Para um aprendente, a consulta de um dicionário que explorasse a expressividade das palavras nos termos referidos seria valiosa, essencialmente em situações informais, pelo que facilitaria a utilização da língua em questão. É para esclarecer este tipo de informações que surgiu a análise de sentimento, “que lida com a identificação de opiniões, avaliações e atitudes com relação a entidades como pessoas, produtos e organizações, expressas textualmente”, como refere Freitas (2013) e acrescenta infra: “É sabido que o vocabulário de expressividade é de grande relevância para aqueles que desejam aprender uma língua. Por outro lado, ao menos com relação ao ensino de português, são escassos os recursos didáticos que atentam para esse aspeto tão humano da interação. A elaboração de dicionários para aprendizes, que incorporem esse tipo de informação é, portanto, uma atividade de grande relevância no contexto do ensino de línguas.” A análise de sentimento encarrega-se, então, de descobrir expressividade em palavras e/ou expressões retiradas de textos e publicações em blogs, jornais, redes sociais, bem como de comentários públicos. Essa expressividade, à qual chamamos de polaridade, pode ser positiva, negativa ou neutra, conforme a opinião geral presente nos documentos reunidos para pesquisa (Freitas, 2013). Assim, entende-se facilmente que quanto mais ricos Capítulo 1 - Enquadramento Teórico 7 e diversificados forem os recursos utilizados para análise, mais precisa será a análise de sentimento. Considero importante referir que a análise de sentimento, acaba por estar condicionada pelo género de texto em que se baseia, já que características como humor, atitude, emotividade, etc., implícitas textualmente, influenciam esta análise da mesma forma que influenciam a perceção humana. Também o domínio e o contexto se revelam importantes: “quente” referente a sopa pode ser entendido como algo positivo, mas referente a champagne será interpretado como negativo (Carvalho & J. Silva, 2015). Tal como o ser humano se guia pelo seu conhecimento do mundo, também a análise de sentimento o faz. Posteriormente serão abordadas as metas, os meios e o progresso desta análise, juntamente com todos os prós e contras que esta acarreta. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 8 Capítulo 2 2 LÉXICOS DE SENTIMENTO: SENTILEX.PT 2.1 Léxicos de Sentimento De uma forma simples, pode-se dizer que os léxicos de sentimento são léxicos cujas entradas podem ser utilizadas para veicular um determinado sentimento ou emoção que, em geral, corresponde à orientação semântica ou polaridade das palavras ou expressões (Carvalho & J. Simões, 2015). Entre outros recursos, estes léxicos dispõem a informação de que se serve a Análise de Sentimento, servindo praticamente de base de dados. Existem variados léxicos de sentimento para a língua portuguesa na atualidade como o SentiWordNet (Esuli and Sebastiani, 2006), o WordnetAffectBR (Pasqualotti e Vieira, 2008), o OpinionLexicon (Souza et al, 2011), etc. Para este trabalho, o escolhido foi o SentiLex, devido às características e potencialidades que destacarei em seguida. 2.2 SentiLex-PT: Principais características e potencialidades De uma forma objetiva, o SentiLex-PT é um léxico de sentimento especificamente concebido para a análise de sentimento e opinião sobre entidades humanas em textos redigidos em português europeu, sendo um recurso pioneiro nesta língua (Carvalho J. Silva, 2015). Este léxico contém entradas correspondentes a nomes, adjetivos, verbos e expressões idiomáticas que têm como base dois corpora distintos: o SentiCorpus-PT e a Obra “Os Pobres” como explica Carvalho & J. Silva (2015) de seguida: Capítulo 2 – Léxicos de Sentimento: SentiLex.PT 9 Figura 3 Formato do SentiLex-lem-PT-txt “Com o objetivo de ilustrar a utilidade das informações representadas no SentiLex, comparamos dois corpora distintos, tanto no que se refere ao género textual como à intenção comunicativa: o SentiCorpus-PT, um corpus proveniente dos media sociais, constituído por comentários de utilizadores a artigos noticiosos no âmbito da política, e Os Pobres, uma obra literária da autoria de Raul Brandão, datada do início do século XX. Para criar o SentiCorpus, compilámos uma coleção de comentários, escritos por leitores da edição online do jornal Público, aos dez artigos que cobriram os debates políticos que antecederam as eleições legislativas portuguesas de 2009. A coleção é composta por 2.795 comentários (cerca de 8.000 frases), os quais se encontram associados aos respetivos artigos de notícia.” Neste trabalho, serão exploradas exclusivamente as entradas adjetivais do SentiLex. Relativamente às mesmas, este léxico está disponível em dois ficheiros diferentes: no SentiLex-lem-PT.txt e no SentiLex-flex-PT01.txt. No primeiro, cada entrada é representada pelo lema do adjetivo (normalmente a forma masculina singular), como no exemplo seguinte: No segundo, o mesmo adjetivo é flexionado em género (masculino e feminino) e número (singular ou plural), distribuindo-se assim por quatro entradas: Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 10 Figura 4 Formato do SentiLex-flex-PT01 Além disso, segue-se o sentimento que lhes é atribuído, descrito respetivamente: ● (TG) refere-se a quem é atribuída a polaridade (target of polarity), que corresponde a um sujeito humano (HUM); ● (POL) refere-se à polaridade, que pode ser positiva (1), negativa (-1) ou neutra (0); ● (ANOT) refere-se a anotação da polaridade, que pode ser anotada manualmente (MAN) ou automaticamente, pela ferramenta Judgment Analysis Lexicon Classifier (JALC), desenvolvida para esse fim. Considero importante referir que este léxico se destaca de outros semelhantes por não pretender definir palavras como qualquer dicionário geral, mas pela sua capacidade de classificar cada uma das suas entradas (nomes, adjetivos, verbos, expressões idiomáticas) como se fossem exclusivamente destinadas a entidades humanas. Quer isto dizer que, utilizando um exemplo já conhecido, a polaridade atribuída à palavra “gordo”, uma vez que se dirige a uma pessoa (por exemplo: “homem gordo”), será negativa conforme este léxico, o que não significa que a mesma palavra não possa ser positiva dirigida a outro predicador, como aconteceria em “salário gordo”. 2.3 Atribuição de Polaridade É possível, contudo, verificar entradas aparentemente mal classificadas pelo SentiLex, o que pode acontecer por diversas razões. Para começar, “embora a forma de elaboração manual seja normalmente evitada, devido exclusivamente ao seu alto custo, é aquela que oferece resultados mais confiáveis” Capítulo 2 – Léxicos de Sentimento: SentiLex.PT 11 (Freitas, 2013). Ainda assim, segundo Carvalho & J. Silva (2015, p. 427), foi a elaboração manual a mais utilizada. Mas a elaboração manual coleciona algumas falhas também. Por exemplo, o adjetivo injustiçado está classificado como neutro, quando através do nosso conhecimento do mundo, sabemos que ser injustiçado é algo negativo. O mesmo se passa com o adjetivo livre, que está avaliado como neutro e é claramente positivo, especialmente quando se refere a uma entidade humana. Quanto à ferramenta JALC, as deficiências registadas são mais frequentes e mais chamativas. Atentando somente nas entradas que foram dadas como positivas, constam os adjetivos assassinado, escravo, gozado, falsificado, repreendido, entre outros. É de senso comum que não há como atribuir qualquer positividade a nenhum destes adjetivos, em contexto algum. São diversas as razões que podem provocar estas discrepâncias. Palavras objetivas como bom ou mau, bonito ou feio, não deixam margem para dúvidas no que toca à sua classificação porque têm polaridade muito carregada, implícita na palavra por si só. Mas nem sempre o sentimento está totalmente explícito na palavra/frase. Listo, então, algumas das dificuldades que poderão surgir na atribuição de polaridade: 1. Ironia/sarcasmo: Na frase “Que telemóvel fantástico! Com quatro dias foi para a garantia.”, sabe-se que o adjetivo assume polaridade negativa porque estamos perante uma crítica. 2. Negações: Em “Este livro não é mau!” é negado um termo negativo (mau) para dar origem a um positivo; 3. Contexto: A palavra grande é positiva em “Ele é um grande atleta”, embora seja negativa em “Tens um grande problema”, porque está condicionada pelos nomes que a sucedem; 4. Palavras que não têm necessariamente polaridade implícita: Na frase: “Ele é um jovem curioso.” A palavra curioso não é necessariamente positiva ou negativa. Este tipo de palavras acabam por ser classificadas como neutras na maioria dos casos. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 12 No entanto, devo salientar que, segundo a minha análise, apenas cerca de 250 em 6321 entradas adjetivais se revelam peculiares, portanto cerca de 1000 nas 25406 formas flexionadas, o que corresponde a uma percentagem bastante reduzida. Curiosamente, conforme a minha área, a linguística, a tendência é realmente centrar-me nas exceções, tanto que a primeira coisa que fiz foi descobrir e listar todos os possíveis “erros” do programa. Assim, se fossemos todos linguistas, o SentiLex não estaria ainda disponível, porque seríamos minuciosos o suficiente para não lançar um programa que não fosse capaz de lidar com todas as possibilidades da língua. Aconselho, então, aos linguistas, que sejam um pouco mais “informáticos” desta vez e sejam capazes de “desviar o olhar” a ocorrências duvidosas. “O que realmente é interessante para o linguista não é encontrar aquelas formas ou aqueles sentidos que vêm registados nas gramáticas ou dicionários. O seu interesse é encontrar as situações fora do comum. Ora, no mundo real, essas situações correspondem a cerca de 2% das ocorrências analisadas. (…) Por outro lado, os informáticos gostam de automatizar. Na definição de informática referem-se “processos racionais e automáticos para o processamento de dados”. Para que um processo seja automatizável é necessário generalizá-lo. (…) Ou seja, os informáticos não se importam se conseguirem sistematizar 98% das situações e ignorar os 2% de situações que não são capazes de generalizar.” (Simões A. , Informáticos, Linguistas e Linguagem, 2014) Capítulo 2 – Léxicos de Sentimento: SentiLex.PT 13 2.4 Polaridade em léxicos de sentimento e em dicionários “Palavras são aglomerados de vários tipos de informação. A informação afetiva, simplificadamente traduzida aqui como polaridade, é mais uma. Considera-se que uma dada palavra tem polaridade quando é sistematicamente utilizada para expressar um sentimento sobre algo. Perfeito, admirável e amei são exemplos de palavras com polaridade positiva.” (Freitas, 2013, p. 65) Já esclarecemos o que é e em que consiste a polaridade. Falaremos então na atenção que lhe é dada nos léxicos de sentimento e nos dicionários. Na descrição do léxico, a polaridade tem passado despercebida, ao longo de todos estes anos, inclusive nos dicionários mais completos e com mais funções disponibilizadas. Mas estamos agora em tempos em que, mais do que nunca, é importante e necessário conhecer a opinião das pessoas, acerca dos mais variados assuntos. Criaram-se, então, léxicos de sentimento, com o objetivo de facilitar esta tarefa, principalmente quando estas opiniões surgem em redes sociais ou em qualquer artigo público. Estes léxicos focam-se especificamente em classificar as palavras com base na sua polaridade. Podemos então concluir que os dicionários se centram na definição das palavras deixando de lado a sua polaridade, enquanto os léxicos de sentimento se centram na polaridade das palavras, deixando de lado a sua definição. O ideal seria incorporar informação sobre a polaridade das palavras nos dicionários de língua, para que o público acedesse a uma qualquer palavra e conseguisse compreender a sua definição, juntamente com a sua polaridade em variados contextos. Um recurso com estas características, seria extremamente útil para a aprendizagem de uma língua estrangeira (LE), neste caso o português. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 14 Figura 5 Definição de bestial pelo Dicionário Aberto Figura 6 Definição de bestial pelo Dicionário Priberam 2.5 A importância da polaridade no processamento de uma LE. Uma das maiores dificuldades no ensino de Português como Língua Não Materna (PLNM) é a falta de recursos didáticos, além de ser frequente o método de ensino de uma língua estrangeira permanecer ainda hoje bastante tradicional, bem como as ferramentas de estudo disponíveis para os alunos. Podemos dizer que o melhor amigo de um aprendente de uma LE é certamente o dicionário, porque ajuda a entender, compor e produzir textos ou conversações, que é tudo o que se pretende ao aprender uma segunda língua. Mas será um dicionário suficiente se não for capaz de satisfazer a curiosidade do aprendente e/ou esclarecê-lo relativamente a uma ou mais palavras? Se por exemplo o aluno pesquisa a palavra bestial em qualquer dicionário, irá encontrar definições como as seguintes: Capítulo 2 – Léxicos de Sentimento: SentiLex.PT 15 Ora, um nativo português saberá que essa palavra é utilizada frequentemente de uma forma bastante positiva, que habitualmente se usa para descrever algo de que gostamos bastante e ainda que tem como sinónimos os termos sensacional, incrível ou inacreditável. Saberá também que esta nova aceção da palavra poderá não estar recolhida em alguns dos dicionários mais utilizados e que, com o passar dos tempos, alguns dos seus significados caíram em desuso. Por outro lado, um aprendente de português vai compreender exatamente o oposto do que acima foi referido. Caso o dicionário o consiga influenciar na perceção da polaridade de uma palavra, essa polaridade vai ser bastante negativa e, portanto, errada conforme o uso atual da língua, já que ambos os dicionários se regem pelo significado primórdio da palavra. Posteriormente, tentarei esclarecer se realmente os dicionários são ou não capazes de incutir polaridade nos seus utilizadores. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 22 Tabela 5 Cronograma do mês de dezembro Segunda-feira Terça-feira Quarta-feira Quinta-feira Sexta-feira Seminário 6 3 Unidade 6 4 5 6 Unidade 6 7 Prova Oral 10 Unidade 7 11 12 13 Unidade 7 14 Prova Oral 17 Unidade 7 18 19 20 Unidade 7 21 24 25 26 27 28 31 Feriados e interrupções letivas. Capítulo 5 – Análise dos resultados obtidos 23 Capítulo 5 5 ANÁLISE DOS RESULTADOS OBTIDOS 5.1 Método Com o objetivo de, por um lado, analisar a capacidade de atribuição de sentimento do léxico SentiLex e, por outro, verificar se a consulta dos dicionários é capaz de incutir polaridade no utilizador, a turma com quem trabalhei foi inquirida. Podemos consultar na tabela número 6, abaixo, uma pequena ficha técnica deste inquérito: Tabela 6 Ficha técnica Período de aplicação: Janeiro de 2019 - Fevereiro de 2019 Cobertura: Alunos de Português (18-38 anos de idade) Distribuição: Nas aulas de Idioma Moderno: Português da faculdade de Filologia da Universidade da Corunha. Técnica: 12 itens de resposta múltipla e 4 itens de resposta curta; por meio de formulários online (Google) Foi selecionado um conjunto de 60 adjetivos 2 , de entre os quais 20 são classificados com polaridade negativa; 20 com polaridade neutra e 20 com polaridade positiva conforme o SentiLex. Saliento que as palavras que elegi são, do meu ponto de vista, aquelas cuja 2 Acessível em anexo, neste documento. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 24 Figura 8 Definição de assassinado pelo Dicionário Aberto Figura 7 assassinado pelo SentiLex Figura 9 Definição de assassinado pelo Dicionário Priberam classificação se revela mais desajustada da realidade e, portanto, aquelas com mais margem para erro. Consideremos, por exemplo, a palavra “assassinado”, que foi uma das selecionadas para o inquérito e que é dada como positiva pelo SentiLex 3 : Embora nos dicionários se possam consultar definições que podemos considerar bastante negativas, como as seguintes: 3 Como foi referido anteriormente, o SentiLex não foi feito de forma manual na sua totalidade, o que justifica o aparecimento de alguns erros. Este estudo não pretende denegrir o recurso, mas antes tirar partido das palavras que este classificou erroneamente. Capítulo 5 – Análise dos resultados obtidos 25 Posto isto, foi pedido aos alunos que atribuíssem a polaridade que considerassem mais adequada a cada um desses adjetivos, numa primeira fase, sem consulta a dicionários e, só depois, com consulta obrigatória. O objetivo seria verificar se surge alguma alteração nas classificações, derivada das consultas. Como referi anteriormente, os dicionários selecionados para consulta foram o Dicionário Aberto e o Dicionário Priberam da Língua Portuguesa, tendo sido este último o mais utilizado pela grande maioria dos alunos. 5.2 Resultados esperados Como foi referido, o conjunto de palavras selecionadas foi escolhido porque, do meu ponto de vista, a sua classificação no SentiLex se revelou duvidosa. Por este motivo, é esperado que os alunos atribuam a todas as palavras uma polaridade diferente do que aquela que está atribuída pelo SentiLex. Outro resultado esperado é que a consulta das definições uniformize as opiniões dos alunos quando à polaridade das palavras em questão, apesar de nem sempre estar explicita nos dicionários. 5.3 Atribuição de polaridade: SentiLex e alunos Como esperado, os alunos revelam classificações significativamente diferentes daquelas que o SentiLex registou. Em exatamente 34 casos (no total de sessenta) os alunos tiveram uma opinião unânime ou com exceções que variam de 1 a 3 elementos. A polaridade atribuída a estes 34 adjetivos, está abaixo registada, para evidenciar essa divergência entre o parecer dos alunos e a informação disponibilizada pelo SentiLex. Poderemos consultar inicialmente as polaridades atribuídas pelo SentiLex (figura 10) e, posteriormente, as polaridades atribuídas pelos alunos (figura 11). Atentemos, então, nas imagens seguintes. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 26 Positivo •acarinhado •admirado •agradecido •aliviado •aplaudido •apoiado •deleitado •deliciado •elogiado •entusiasmado •fascinado •hábil •laureado •livre •maravilhado •melhor •ótimista •protegido Neutro •breve •coevo •diferenciado •inevitável •pendente Negativo •assassinado •assaltado •atacado •despedaçado •egocêntrico •engripado •escravo •falecido •falsificado •repreendido •ridicularizado Positivo •assassinado •breve •coevo •diferenciado •escravo •falsificado •inevitável •pendente •repreendido Neutro •aliviado •assaltado •atacado •despedaçado •egocêntrico •engripado •entusiasmado •falecido •hábil •livre •melhor •ridicularizado Negativo •acarinhado •admirado •agradecido •aplaudido •apoiado •deleitado •deliciado •elogiado •fascinado •laureado •maravilhado •ótimista •protegido Figura 11 Atribuição de polaridade pelo Alunos Figura 10 Atribuição de polaridade pelo SentiLex Capítulo 5 – Análise dos resultados obtidos 27 Gráfico 1 gozado [depois da consulta] Também nos restantes casos, a grande maioria dos alunos optou por atribuir uma polaridade diferente daquela que está apresentada no SentiLex, como estava previsto. Existem apenas quatro casos excecionais (apresentados infra) num total de sessenta, em que a polaridade atribuída pelos alunos está de acordo com a do SentiLex. Abaixo tentarei justificar esta concordância, recorrendo às definições dos dicionários para consulta. 5.3.1 Exceções A palavra “gozado” apresentada no gráfico 1, foi classificada pelo SentiLex e pela grande maioria dos alunos como positiva. Ora, uma vez que estamos a caraterizar adjetivos que se dirigem a humanos, esta palavra é claramente negativa. Se empregássemos a mesma palavra em “férias gozadas”, por exemplo, esta significaria “bem aproveitadas; desfrutadas” o que explica a classificação positiva. Mas se a utilizarmos em “criança gozada” o sentido é reverso, já que gozar significa desta vez “fazer pouco de” ou “troçar”. Também a utilização da palavra em português do Brasil pode levar a equívocos, já que esta é muito utilizada no quotidiano e acarreta uma polaridade bastante positiva. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 28 Figura 13 Definição de gozar pelo Dicionário Priberam Figura 12 Definição de gozar pelo Dicionário Aberto Saliento que o dicionário aberto não reconhece o adjetivo “gozado” nem qualquer negatividade no verbo “gozar” como podemos conferir infra: Já o dicionário Priberam, apenas reconhece “gozado” como particípio passado do verbo gozar e também fornece maioritariamente definições bastante positivas, que podem levar a entender a palavra como sendo positiva na maioria dos contextos e, portanto, também entre humanos, já que a polaridade não se revela explicita para quem não conhece a língua. Capítulo 5 – Análise dos resultados obtidos 29 Gráfico 2 lisonjeiro [depois da consulta] Figura 14 Definição de lisonjeador pelo Dicionário Aberto Também a palavra “lisonjeiro” foi dada como positiva pelo SentiLex e pela maioria dos alunos, desta vez com alguma discordância entre os mesmos. Ambos os dicionários fornecem uma definição negativa não totalmente explicita deste termo. No caso do Dicionário Aberto, “lisonjeiro” 4 não tem qualquer polaridade explicita já que, para um aprendente, “satisfazer o amor-próprio” pode não representar necessariamente algo negativo. 4 O Dicionário Aberto reencaminha “lisonjeiro” para “lisonjeador” apenas atribuindo definição ao segundo vocábulo. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 30 Figura 15 Definição de lisonjeiro pelo Dicionário Priberam Gráfico 3 indispensável [depois da consulta] Já no caso do dicionário Priberam, a polaridade negativa está notavelmente presente, não só por mencionar “com fins interesseiros”, mas por referir “adulador”, por exemplo. Caso o aluno não esteja esclarecido, pode consultar o termo “adulador” que o levará a “bajulador” e assim sucessivamente, conseguindo assim informação mais clara, por meio de sinonímia. Se o aprendente se reger pela definição de “agradável, prometedor” vai entender que “lisonjear” será “elogiar” (um ato honesto que nada tem de errado) e não “bajular”, (um ato interesseiro e mesquinho). Assim sendo, o adjetivo acaba classificado como positivo. Capítulo 5 – Análise dos resultados obtidos 31 Figura 16 Definição de indispensável pelo Dicionário Aberto Figura 17 Definição de indispensável pelo Dicionário Priberam O adjetivo “indispensável” foi também classificado pela maioria dos alunos como neutro, apesar de haver um número considerável de classificações positivas, como se verifica no gráfico 3. Ambos os dicionários têm definições semelhantes, sendo elas as seguintes: Ora, se pensarmos na palavra isolada ou em contextos como “telemóvel indispensável” é possível que a tendência seja classificar a palavra como neutra. Mas se atribuirmos o mesmo adjetivo a um ser humano, como em “amigo indispensável” facilmente alteramos o nosso parecer. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 38 Gráfico 10 atrelado [antes e depois da consulta] 5.4.2 Discrepâncias Algumas das consultas aos dicionários trouxeram determinados “retrocessos” em relação à primeira análise da palavra (sem consulta). Inicialmente, os alunos mostram-se confiantes na polaridade que seria considerada correta, mas verifica-se que, após a consulta ao dicionário, alguns destes são desencaminhados dessa classificação para outra, que nem sempre é a correta (como no caso de humilde, analisado anteriormente). Comecemos pelo vocábulo atrelado, abaixo apresentado. Inicialmente, 14 pessoas consideraram atrelado como um adjetivo neutro, 4 como negativo e 3 como positivo. Depois da consulta, apenas 1 aluno considerou esta palavra positiva e os restantes 20 dividiram as suas opiniões: 10 votos para neutra e 10 votos para negativa. Ora, neste caso, podemos considerar que o dicionário provocou discordância entre os alunos, mas ao mesmo tempo alterou algumas opiniões para o que seria a polaridade mais razoável para a palavra, a negativa. Capítulo 5 – Análise dos resultados obtidos 39 Gráfico 11 inevitável [antes e depois da consulta] Gráfico 12 lisonjeiro [antes e depois da consulta] O mesmo acontece com o vocábulo inevitável, como podemos verificar no gráfico 11. Inicialmente 18 alunos consideravam este adjetivo neutro, mas após a consulta ao dicionário a classificação negativa já contabilizava 10 votos, pelo que os resultados ficaram quase equivalentes. Como no caso anterior, o dicionário dividiu as opiniões, mas conduziu os alunos a classificar o vocábulo com a polaridade que reconheço como correta, a negativa. Inevitável não transmite necessariamente negatividade, mas remete a algo que está fora do controle humano, e isto por sua vez já se manifesta bastante negativo, como seria o vocábulo “incontrolável” por exemplo. Em casos como os dois seguintes, a mudança é pouco relevante, porque apesar de os resultados posteriores à consulta se inclinarem mais para uma dada polaridade, verificam-se excessivas mudanças de opinião entre os alunos. O caso do vocábulo lisonjeiro é aquele onde se revela mais visível a mudança de opiniões. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 40 Gráfico 13 ardido [antes e depois da consulta] A palavra lisonjeiro acaba por ser maioritariamente considerada positiva depois da consulta ao dicionário, com 11 classificações positivas. Mas podemos ver no gráfico 12 que existiram muitas mudanças, até contraditórias. Temos, por exemplo, 3 alunos que modificaram a sua classificação de positiva para negativa e 3 alunos que modificaram a sua classificação de negativa para positiva, que é exatamente o inverso. O resultado final foi o correto e esperado, mas os restantes votos mostram que a definição causou alguma discordância e até mesmo desorientação na pesquisa. Por último, temos o caso do vocábulo ardido que se revela bastante semelhante ao anterior. Atentemos, então, no gráfico 13. Facilmente se verifica que a maioria da turma classifica o vocábulo como negativo, tanto antes como depois da consulta. Mas novamente é notável esta mudança de opiniões nos restantes alunos. Posto isto, fica a incerteza de que a polaridade esteja suficientemente explicita nos dicionários selecionados, para aqueles que menos contacto tem com a língua. Capítulo 5 – Análise dos resultados obtidos 41 Gráfico 15 agradecido [depois da consulta] Gráfico 14 agradecido [antes da consulta] 5.5 Últimas considerações Considero importante referir que na grande maioria dos casos, especialmente naqueles cuja atribuição de polaridade pelos alunos foi unanime, não foram os dicionários os responsáveis pelas respostas certeiras. Mesmo antes da consulta ao dicionário, a opinião já era unânime entre os alunos, como podemos verificar no caso abaixo. Saliento ainda que os dicionários tem a capacidade de incutir polaridade ao utilizador, embora tanto possam dar a entender a polaridade que seria correta, como levar o aprendente a um parecer equivocado da palavra como prova claramente o caso do vocábulo humilde, por exemplo, analisado anteriormente. Finalmente, teremos de ter em consideração que a turma inquirida tem apenas 21 alunos, pelo que os resultados poderão não ser totalmente claros. Também o facto de haver proximidade entre a língua portuguesa e algumas das línguas dos alunos, ou o inverso, influencia claramente a sua análise, até mesmo antes da consulta ao dicionário. Ainda assim, com 21 alunos foi possível tirar algumas considerações importantes, analisadas neste capítulo. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 42 Conclusão Este trabalho teve como principal objetivo analisar a capacidade de atribuição de sentimento do léxico SentiLex e verificar se a consulta dos dicionários é capaz de incutir polaridade no utilizador. Foi pedido a 21 alunos aprendentes de Português como língua estrangeira, que classificassem, com a ajuda dos dicionários selecionados para consulta (Dicionário Aberto e Dicionário Priberam da Língua Portuguesa) um total de 60 adjetivos registados no SentiLex com uma polaridade que eu considerei equivocada. O objetivo seria que os alunos, depois da consulta ao dicionário, classificassem os mesmos vocábulos com polaridades distintas daquelas que estão registadas pelo SentiLex, para comprovar se (1) o SentiLex tem, de facto, erros que merecem uma revisão e um melhoramento e (2) se as definições dos dicionários são realmente capazes de transmitir alguma noção de polaridade ao aluno estrangeiro. Em primeiro lugar, com base nos dados recolhidos, os alunos comprovaram que o SentiLex tem de facto lacunas na atribuição de polaridade e carece ainda de alguma revisão. Recorrendo ao dicionário e/ou ao conhecimento da língua, estes foram capazes de corrigir os lapsos do SentiLex com sucesso, atribuindo a 93% dos casos não só uma polaridade distinta da atribuída por este léxico, como a polaridade considerada “correta” conforme o uso atual da língua. Quanto aos 7% restantes, acredito e explico no decorrer do trabalho que se justificam por pequenos equívocos na análise dos alunos. Em segundo lugar, os alunos comprovaram também que o dicionário é realmente capaz de incutir alguma polaridade no utilizador, mas nem sempre de forma eficaz. Em 40% dos casos, o dicionário leva os alunos à polaridade que se pode considerar correta, mas em 60% dos casos, o dicionário desencaminha os alunos da polaridade correta (32%), leva os alunos a classificações distintas provocando discordância entre os mesmos (12%) e/ou ainda não tem qualquer influência no antes e depois das consultas (16%). Isto acontece porque por vezes as definições estão desatualizadas ou não são suficientemente explicitas, outras vezes referem-se unicamente a coisas materiais e carecem de uma definição referente a humanos e também porque a sinonímia presente na definição nem sempre carrega o mesmo exato significado. Assim sendo, comprova-se que o dicionário poderá até incutir Conclusão 43 alguma polaridade nos aprendentes, mas essa polaridade não se revela significativa nem proveitosa para o aluno, devido à falta de concisão. Por último, gostaria de salientar que em aproximadamente 66% dos casos expostos, os alunos têm resultados muito semelhantes no antes e depois da consulta. O que prova que apesar de o dicionário ser capaz de incutir polaridade, não foi o elemento essencial nem alterou um número significativo de opiniões na grande maioria dos casos. Isto pode justificar-se pelo conhecimento de línguas (inclusive a língua portuguesa em alguns casos) dos alunos inquiridos, que podem já reconhecer algumas palavras sem grande dificuldade. Na minha opinião, um aprendente de qualquer língua estrangeira, deveria conseguir de forma acessível, aceder ao máximo de informações acerca do vocabulário da língua em questão, neste caso a língua portuguesa, o que ainda não acontece atualmente. Obviamente, os dicionários são extremamente acessíveis e as definições que disponibiliza são bastante completas na sua grande maioria. Ainda assim, não deixam de carecer de informação relativa à expressividade das palavras, principalmente em relação a humanos. Esta informação é reunida e disponibilizada pelos léxicos de sentimento, mas estes não são tão acessíveis ou práticos para utilizar como são os dicionários. Por estas razões, a melhor solução seria que os dicionários passassem a incluir esta informação nos dicionários, no mínimo, como um material de estudo para o ensino a estrangeiros. Se se adaptassem as definições dos dicionários em função da expressividade que acarretam, o aluno encontraria a definição habitual da palavra, acompanhada, por exemplo, de “símbolos de polaridade” (imaginemos [1] para palavras com polaridade positiva, [0] para palavras com polaridade neutra e [-1] para palavras com polaridade negativa). Com isto, a sua pesquisa tornar-se-ia bastante mais fácil principalmente para compreender e participar num discurso informal, com amigos e/ou conhecidos, já que as novas palavras seriam imediatamente inseridas num contexto positivo ou negativo, conforme a sua própria polaridade. Pode-se concluir que, ainda que este trabalho não tenha realizado uma pesquisa mais ampla, os resultados obedeceram em grande parte àquilo que era esperado. Acabou por reunir conclusões que considero que se podem aplicar em futuras experiências e/ou projetos linguísticos que abranjam objetivos semelhantes. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 44 Referências Bibliográficas Baroni, G. C., Santos, I. A., & Souza, J. S. (2008). Denotação e Conotação: Abordagens e reflexões acerca dos efeitos de sentido. Em C. d. CNLF. Rio de Janeiro. Bolshakov, I. A., & Gelbukh, A. (2004). Computacional Linguistics: Models, Resources, Applications. IPN-UNAM-FCE, 2004, pp. 15-32. Figueiredo, C. (1913). Novo Diccionário da Língua Portuguesa. Lisboa: Livraria Clássica Editora Freitas, C. (2013). Sobre a construção de um léxico da afetividade para o processamento computacional do português. RBLA, 13 (4), 1031-1059. Othero, Gabriel de Ávila. (2006) Linguística Computacional: Uma breve introdução; In Letras de Hoje, pp. 341-351. Consultado em Junho 10, 2019, em: http://revistaseletronicas.pucrs.br/ojs/index.php/fale/article/view/605 Silva, M., Carvalho, P. & Sarmento, L. (2012). Building a Sentiment Lexicon for Social Judgement Mining. In Caseli H., Villavicencio A., Teixeira A., Processamento Computacional Perdigão F. (eds) da Língua Portuguesa. PROPOR 2012. Notas de Aula em Ciência da Computação, vol 7243 (pp. 218-228). Springer, Berlin, Heidelberg. Simões, A. (2014). Informáticos, linguistas e linguagens. In A. G. Macedo, C. Sousa, & V. Moura (Ed.), XV Colóquio de Outono: As Humanidades e as ciências. Disjunções e Confluências (pp. 359-370). Braga: Centro de Estudos Humanísticos da Universidade do Minho / Humus. Simões, A. I. (2012). Computational Processing of the Portuguese Language. Dicionário aberto. A source of resources for the portuguese language processing, pp. 121-127. Simões, A., Iriarte, A., & Almeida, JJ. (2016). Dicionário-Aberto: Construção semiautomática de uma funcionalidade codificadora. In A. Lemaréchal, P. Koch, & P. Swiggers (Eds.), Carvalho, Paula; J. Silva, Mário (2015) Sentilex-PT: Principais características e potencialidades, in Linguística, Informática e Tradução: Mundos que se Cruzam, Oslo Studies in Language 7 (1). pp. 425–438. (ISSN 1890-9639 / ISBN 978-82-91398-12-9) Di Fellipo, Ariani; Dias-da-Silva, Bento Carlos (2009). O processamento automático de línguas naturais enquanto engenharia do conhecimento linguístico; Calidoscópio - Vol. 7, n. 3, p. 183-191. Referências Bibliográficas 45 Actes du XXVIIe Congrès international de linguistique et de philologie romanes (2013) (pp. 201-300), Nancy, july. ALTIF. Section 16 : Projets en cours; ressources et outils nouveaux. Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 46 Anexos Anexo I 47 Anexo I Listagem dos adjetivos selecionados Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 54 Anexo II. 9 falsificado [antes e depois da consulta] Anexo II. 7 entranhado [antes e depois da consulta] Anexo II. 8 escravo [antes e depois da consulta] Anexo II 55 Anexo II. 12 inevitável [antes e depois da consulta] Anexo II. 10 gozado [antes e depois da consulta] Anexo II. 11 grave [antes e depois da consulta] Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 56 Anexo II. 13 irreal [antes e depois da consulta] Anexo II. 14 julgado [antes e depois da consulta] Anexo II. 15 lisonjeiro [antes e depois da consulta] Anexo II 57 Anexo II. 17 pendente [antes e depois da consulta] Anexo II. 16 paliativo [antes e depois da consulta] Anexo II. 18 putativo [antes e depois da consulta] Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 58 Anexo II. 19 repreendido [antes e depois da consulta] Anexo II. 20 trilhado [antes e depois da consulta] Anexo IV 59 Anexo III Adjetivos considerados neutros pelo SentiLex Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 60 Anexo III. 1 abrigado [antes e depois da consulta] Anexo III. 3 assaltado [antes e depois da consulta] Anexo III. 2 aliviado [antes e depois da consulta] Anexo IV 61 Anexo III. 4 atacado [antes e depois da consulta] Anexo III. 6 disponível [antes e depois da consulta] Anexo III. 5 despedaçado [antes e depois da consulta] Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 62 Anexo III. 8 engripado [antes e depois da consulta] Anexo III. 9 entusiasmado [antes e depois da consulta] Anexo III. 7 egocêntrico [antes e depois da consulta] Anexo IV 63 Anexo III. 10 falecido [antes e depois da consulta] Anexo III. 12 humilde [antes e depois da consulta] Anexo III. 11 hábil [antes e depois da consulta] Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 70 Anexo IV. 7 comovido [antes e depois da consulta] Anexo IV. 8 deleitado [antes e depois da consulta] Anexo IV. 9 deliciado [antes e depois da consulta] Anexo IV 71 Anexo IV. 10 deslumbrado [antes e depois da consulta] Anexo IV. 11 elogiado [antes e depois da consulta] Anexo IV. 12 fascinado [antes e depois da consulta] Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 72 Anexo IV. 13 inefável [antes e depois da consulta] Anexo IV. 14 inteiro [antes e depois da consulta] Anexo IV. 15 invejável [antes e depois da consulta] Anexo IV 73 Anexo IV. 16 laureado [antes e depois da consulta] Anexo IV. 17 maravilhado [antes e depois da consulta] Anexo IV. 18 otimista [antes e depois da consulta] Palavras com polarização positiva e polarização negativa em dois dicionários de língua portuguesa 74 Anexo IV. 19 protegido [antes e depois da consulta] Anexo IV. 20 resguardado [antes e depois da consulta]