<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Archiving and Interchange DTD v1.2 20190208//EN" "JATS-archivearticle1.dtd">
<article xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:ali="http://www.niso.org/schemas/ali/1.0">
  <front>
    <article-meta>
      <article-categories>
        <subj-group>
          <subject content-type="Tipo de Contribuição">Relato de Pesquisa</subject>
        </subj-group>
      </article-categories>
      <title-group>
        <article-title>COMENTCORPUS<bold id="bold-3"/> </article-title>
        <subtitle>DESCRIÇÃO E ANÁLISE DE <bold id="bold-3ed183a4662d16bbaf7ab6482fc0e086">IRONIA</bold> EM UM <bold id="bold-da20f20b9b0777a1d6c0b4db259259e0">CORPUS</bold> DE <bold id="bold-aaf4f89ae021e466f6152f6eab0040bf">OPINIÃO</bold> PARA O PORTUGUÊS DO BRASIL</subtitle>
      </title-group>
      <contrib-group content-type="author">
        <contrib id="person-3c3c60556173f8d573eb113c2d6e07bd" contrib-type="person" equal-contrib="no" corresp="yes" deceased="no">
          <name>
            <surname>Wick-Pedro</surname>
            <given-names>Gabriela</given-names>
          </name>
          <email>gwpedro@estudante.ufscar.br</email>
          <xref ref-type="aff" rid="affiliation-59e5a1663c487e892bc737b74328acd6"/>
        </contrib>
        <contrib id="person-d9ffe6bb1ed18f03e113ed948ebc8fad" contrib-type="person" equal-contrib="no" corresp="no" deceased="no">
          <name>
            <surname>Vale</surname>
            <given-names>Oto Araújo</given-names>
          </name>
          <email>otovale@ufscar.br</email>
          <xref ref-type="aff" rid="affiliation-59e5a1663c487e892bc737b74328acd6"/>
        </contrib>
      </contrib-group>
      <contrib-group content-type="editor">
        <contrib id="person-f6e93de22d5a621eea9c13c16a4230ff" contrib-type="person" equal-contrib="no" corresp="no" deceased="no">
          <name>
            <surname>Oliveira, Jr</surname>
            <given-names>Miguel </given-names>
          </name>
          <email>miguel@fale.ufal.br</email>
          <xref ref-type="aff" rid="affiliation-cacaa336e1c0380ea054bce3cbeed908"/>
        </contrib>
        <contrib id="person-bbf699a10b319dd73c8522b6a904fa4c" contrib-type="person" equal-contrib="no" corresp="no" deceased="no">
          <name>
            <surname>Almeida</surname>
            <given-names>René Alain</given-names>
          </name>
          <email>renealain@hotmail.com</email>
          <xref ref-type="aff" rid="affiliation-cebc39cbb6f1834bd64f5407ca61b830"/>
        </contrib>
      </contrib-group>
      <aff id="affiliation-59e5a1663c487e892bc737b74328acd6">
        <institution content-type="orgname">Universidade Federal de São Carlos (UFSCar)</institution>
      </aff>
      <aff id="affiliation-cacaa336e1c0380ea054bce3cbeed908">
        <institution content-type="orgname">Universiade Federal de Alagoas</institution>
      </aff>
      <aff id="affiliation-cebc39cbb6f1834bd64f5407ca61b830">
        <institution content-type="orgname">Universidade Federal de Sergipe</institution>
      </aff>
      
      <volume>1</volume>
      <issue>2</issue>
      <issue-title>Linguística na Contemporaneidade: Desafios, Debates e Propostas</issue-title>
      <elocation-id>10.25189/2675-4916.2020.V1.N2.ID207</elocation-id>
      <history>
        <date date-type="accepted" iso-8601-date="24/09/2020"/>
        <date date-type="received" iso-8601-date="05/02/2020"/>
      </history>
      <permissions id="permission">
        <license>
          <ali:license_ref>http://creativecommons.org/licenses/by/4.0/</ali:license_ref>
        </license>
      </permissions>
      <abstract>
        <p id="_paragraph-1">O aumento de dados na Web tem despertado grande interesse na Linguística e nas Ciências da Computação e, dentre as principais tarefas, destaca-se a extração de opinião em grandes volumes de material textual encontrados na rede. A Mineração de Opinião, ou Análise de Sentimentos, busca processar automaticamente opiniões, emoções, sentimentos e subjetividades presentes em textos (LIU, 2012). No entanto, observa-se que muitas das opiniões encontradas podem carregar um sentido irônico, transformando o significado da sentença. Esta pesquisa tem como objetivo investigar expressões irônicas em mídias sociais, focando em descrições de dispositivos linguísticos que servem como pistas de ironia em textos opinativos no português do Brasil. Para a compreensão do funcionamento de tal mecanismo figurado, partiremos da busca em um <italic id="italic-1">corpus</italic> composto por comentários de notícias do portal da <italic id="italic-2">Folha de S. Paulo</italic>. Conjuntamente, foi desenvolvido um esquema de anotação de <italic id="italic-3">corpus</italic>, apoiado em teorias pragmáticas e cognitivas, referente à intenção das opiniões: i) irônicas – quando há oposição de sentido; ii) outro tipo de ironia – quando há na sentença mecanismos linguísticos figurados, mas não há uma oposição do sentido na sentença e iii) não irônica – quando não há mecanismos que alteram a literalidade da sentença. Como resultado, obteve-se uma lista de pistas linguísticas que podem ser usadas para caracterizar expressões de ironia, colaborando, assim, para o desenvolvimento da área do PLN e da Mineração de Opinião.</p>
      </abstract>
      <abstract abstract-type="executive-summary">
        <title>Abstract</title>
        <p id="paragraph-834aed79f4892d22d0ae60f1a8f731f4">The increase in data on the Web has aroused great interest in Linguistics and Computer Science and, among the main tasks, the extraction of opinion in large volumes of textual material found on the network stands out. Opinion Mining, or Sentiment Analysis, seeks to automatically process opinions, emotions, feelings and subjectivities present in texts (LIU, 2012). However, it is observed that many of the opinions found can express ironic, transforming the meaning of the sentence. This research aims to investigate ironic expressions in social media focusing on descriptions of linguistic devices that serve as clues of irony in opinionated texts in Brazilian Portuguese. In order to understand how this figurative mechanism works, we will start by searching a corpus composed of news comments from the Folha de S. Paulo portal. Together, a corpus annotation scheme was developed, supported by pragmatic and cognitive theories, referring to the intention of the opinions: i) ironic - when there is opposition of meaning; ii) another type of irony - when there are figurative linguistic mechanisms in the sentence, however there is no opposition from the meaning in the sentence and iii) non-ironic - when there are no mechanisms that alter the literalness of the sentence. As a result, a list of linguistic clues was obtained that can be used to characterize expressions of irony, thus collaborating for the development of the area of ​​NLP and Opinion Mining.</p>
      </abstract>
      <kwd-group>
        <kwd content-type="">Ironia</kwd>
        <kwd content-type="">Mineração de Opinião</kwd>
        <kwd content-type="">
          <italic id="italic-1664a66e3198411a6723979f2ecbb851">Corpus</italic>
        </kwd>
        <kwd content-type="">Anotação de <italic id="italic-71b8fe6a11985f9194ee062a8d46107c">Corpus</italic></kwd>
        <kwd content-type="">Opinião</kwd>
      </kwd-group>
    <pub-date pub-type="epub"><day>23</day><month>11</month><year>2020</year><volume>1</volume></pub-date></article-meta>
  </front>
  
  
<body id="body">
    <sec id="heading-ac5b9ebaf5848a2aebfab7263fa7a046">
      <title>Introdução</title>
      <p id="paragraph-32ebb09ec775dc644059adb8348b958b">Nos últimos anos, devido ao crescimento da <italic id="italic-19df1399e70ca5fc53a2754492d664c4">Web 2.0</italic>, é possível observar um aumento na variedade de material textual disponível <italic id="italic-b899f69a3d95b7eea779475b36d47adf">on-line</italic>. Parte desses textos são opiniões geradas por usuários da Internet em fóruns, mídias sociais e outros. Dada a abundância de dados publicados na rede, a partir de ferramentas linguístico-computacionais, torna-se viável (e necessária) a automatização da extração, síntese e análise de conteúdos gerados por usuários. Em vista disso, a área de Mineração de Opinião, ou Análise de Sentimentos, que busca interpretar e analisar automaticamente opiniões, sentimentos, avaliações e emoções (LIU, 2010; PANG e LEE, 2008), tem ganhado grande importância no âmbito do Processamento de Língua Natural (PLN). A análise dessas opiniões pode ser útil para pesquisas de mercado e avaliação de reações de clientes sobre determinados produtos ou pessoas públicas, por exemplo. </p>
      <p id="paragraph-771c1f5afa90e6babdb4279e87ac70c7">De um modo geral, Liu (2010) classifica os conteúdos textuais disponíveis na rede como “fato” e “opinião”. Para o autor, fatos são sentenças objetivas e desprovidas de sentimento, tendo a função de apenas transmitir informações sobre algo. Em contraposição, opiniões são sentenças subjetivas que carregam uma avaliação, sentimento, opinião ou emoção sobre algo ou alguém. Entretanto, uma das primeiras dificuldades encontradas na área da Análise de Sentimentos é exatamente a diferenciação entre o que é um texto informativo/factual e o que é subjetivo/opinião, uma vez que a linguagem não se apresenta tão exata e binária como propõe a consideração acima. Consequentemente, os conceitos de subjetividade e emoções estão intimamente ligados (LIU, 2010). Enquanto o propósito de uma sentença objetiva é apresentar uma informação factual, a sentença subjetiva pode se configurar de várias formas, tais como: opiniões, desejos, crenças, suspeitas, emoção, pensamentos ou especulações (WIEBE, 2000; RILOFF et al., 2006). </p>
      <p id="paragraph-b547cde228d5ecc0c6eeb98dd4b44a71">Uma das formas de o falante expressar sua opinião é por meio da ironia. No entanto, compreender a ironia não é uma tarefa tão simples, embora os humanos a realizem com uma certa facilidade, dependendo de seus conhecimentos extralinguísticos. Apesar de estar presente cotidianamente na comunicação entre falantes, é comum existir mal-entendidos, caso haja falhas comunicativas daquilo que se quer fazer entender. Pragmaticamente, um enunciado irônico é entendido como uma forma de comunicar o oposto do significado literal das palavras, ou quando ocorre uma aparente violação dos princípios pragmáticos (GRICE, 1975; SEARLE, 1969). Entretanto, de uma perspectiva psicolinguística (KREUZ e GLUCKSBERG, 1989; SPERBER e WILSON, 1981), é possível considerar como a informação é processada cognitivamente e como é representada por inferências. Dessa forma, o atual trabalho apoia-se em dois princípios básicos: o lógico, a partir dos pressupostos lógicos das máximas conversacionais de Grice (1975) e o cognitivo, com base na afirmação de Sperber e Wilson (1981) de que a comunicação humana é resultante de um processo interativo entre falantes e ouvintes e que, no processamento de informações, é possível uma alteração de seus espaços cognitivos. Segundo Grice (1975), o efeito irônico pode estar na violação da Máxima de Qualidade<xref id="xref-447d930242f0db8bc62126d11e2f4336" ref-type="fn" rid="footnote-c45eac43a64cae7a37d5660862476314">1</xref> e está associado à expressão de atitude, sentimento e avaliação dos falantes. Entretanto, do ponto de vista cognitivo, Sperber e Wilson (1981), baseando-se na Teoria da Relevância, acreditam que o principal elemento característico da ironia são os usos particulares de desempenho interpretativo, isto é, quando o falante se utiliza de seu enunciado para atribuir implicitamente o pensamento representativo em seu enunciado para outra pessoa que não seja ele próprio.</p>
      <p id="paragraph-4">Desse modo, estudar a ironia pode transpassar as dificuldades de interpretá-la. É necessário, primeiramente, definir seus limites conceituais. Porém, por ser um fenômeno multifacetado, objeto de estudo de diversas abordagens das mais variadas áreas de conhecimento, essa tarefa pode ser vista como um tanto quanto hermética (GRICE, 1975; SPERBER e Wilson, 1981; KREUZ e GLUCKSBERG, 1989, ATTARDO, 2000; GIBBS e COLSTON, 2007). No entanto, não é o objetivo aqui abordar essas questões teóricas, uma vez que o interesse deste trabalho é fazer uma descrição de sentenças irônicas e não irônicas, e dentre estas, as que geram a ironia por meio de mecanismos que não sejam a oposição. Para tanto, a definição não especializada do dicionário Houaiss (2009), em que ironia é definida como uma “figura por meio da qual se diz o contrário do que se quer dar a entender; uso de palavra ou frase de sentido diverso ou oposto ao que deveria ser empregado para definir ou denominar algo” é suficiente.</p>
      <p id="paragraph-5">No entanto, há enunciados que podem carregar um sentido figurado, mas não se encaixam na definição, aqui utilizada, de ironia. Segundo Attardo (2000), sarcasmo é um tipo de ironia abertamente agressiva, com pistas mais claras. Singh (2012) afirma que a sátira é uma figura de linguagem que enfatiza as fraquezas das pessoas. O autor ainda define humor como a capacidade de expressão de uma sensação de algo divertido e inteligente. Apoia-se, principalmente, no reconhecimento de incongruências ou peculiaridades presentes em uma situação.</p>
      <p id="paragraph-6">Grandes conjuntos de textos opinativos têm sido classificados automaticamente para identificar o sentimento (positivo, negativo ou neutro) de opiniões neles presentes, caso em que a análise pode gerar um falso resultado. Uma opinião como a expressa em (1), a seguir, por exemplo, pode ser interpretada erroneamente, em seu sentido literal. Ou seja, o sentido real da sentença carrega um sentimento negativo; porém, ferramentas de análise automática podem classificá-la como positiva por causa dos itens lexicais positivos que a compõem (“Como é bom...”). Isso ocorre pelo fato de a ironia ter como efeito uma expressão avaliativa cuja polaridade é alterada entre a avaliação literal e a pretendida, resultando em uma incongruência entre a significação literal e seu contexto (CARVALHO et al, 2009). Em outras palavras, quando se tem a intenção de produzir uma sentença irônica, o autor expressa um sentimento positivo, ainda que a opinião implícita seja negativa, ou vice-versa.</p>
      <p id="paragraph-8845dea35c91308ab6c7c60b4ee6378d"/>
      <p id="paragraph-7">(1) Como é bom ver os políticos brasileiros gastarem o dinheiro público com propina.</p>
      <p id="paragraph-62deb8dd30556f98d0ffdb5ad20c1c69"/>
      <p id="paragraph-ae876fc151ab3db1d7748c118c700a82">No exemplo (1), a partir de um conhecimento de mundo e de uma contextualização política dos acontecimentos no país, a compreensão da ironia na sentença é possível, tendo em vista que políticos gastarem dinheiro público com propina não é algo realmente bom. Outro fator observável para inferir o sentido figurado é a presença de elementos lexicais que se opõem na mesma sentença, como “bom” <italic id="italic-f1c71ba31cfd1655245040525f7df7e5">versus</italic> “gastar dinheiro público” e “propina”.</p>
      <p id="paragraph-53c7bb386ffd4a44019401a831aa13b4">Desse modo, o objetivo principal deste trabalho é analisar e descrever mecanismos subjacentes à expressão de ironia em textos avaliativos no português do Brasil. Além disso, busca identificar as principais características linguísticas utilizadas para expressar ironia em textos de opinião no domínio político. A hipótese é de que a presença de elementos lexicais contrastantes em um dado contexto pode ser um indicador da presença de ironia.</p>
    </sec>
    <sec id="heading-547ae229a0749953cf8265dd0c12b1bb">
      <title>1. Os desafios do PLN na descrição e detecção automática da ironia</title>
      <p id="paragraph-ccf12b51968082e2eaa15313a07bbd87">A máquina atinge boa performance de acertos na análise e descrição automática de uma língua natural em seus níveis mais concretos, como a morfológica e a sintaxe, apesar de apresentarem determinadas complexidades. Contudo, ao partir para níveis mais abstratos, como o semântico, o pragmático e o discursivo, depara-se com grandes obstáculos, a serem resolvidos no âmbito do Processamento Natural da Linguagem. Dessa forma, o processamento computacional de linguagem não-literal (e também de opiniões, sentimentos e emoções) exige uma análise detalhada de informações linguísticas subjacentes ao texto. Além disso, pela linguagem figurada estar intrinsecamente ligada ao contexto e ao conhecimento extralinguístico, que por sua vez estão em constante modificação, há a dificuldade de se criarem padrões aplicáveis a algoritmos de Aprendizado de Máquina (EMMZ e LUZ, 2011), por exemplo. </p>
      <p id="paragraph-9e99460e58b140a53e3ec181c5827668">Em casos de sintetização de textos opinativos, a presença de ironia pode ser responsável por erros na classificação automática da polaridade de uma opinião (CARVALHO et al., 2009). Isso não significa que é impossível identificá-la de forma automática. Mas, primeiramente, é necessário criar padrões mais genéricos, capazes de identificar possíveis enunciados irônicos em textos. Ou seja, reconhecer aspectos linguísticos suscetíveis à análise computacional de linguagem figurada e, por meio de tratamentos individuais de cada caso, partir para uma solução mais generalizável. </p>
      <p id="paragraph-23d86ecf5897e8fb2a187be03004e1d9">Outro ponto importante a se destacar nos estudos envolvendo análises automáticas de ironia é a escassez de pesquisas voltadas para o português do Brasil (PB). É comum encontrar uma abundância de trabalhos voltados para o processamento do inglês, o que exige uma adaptação dos resultados e dos dados já existentes para o PB.</p>
      <p id="paragraph-1ab78b0dc52fdb3b256551df90850cee">Para o inglês, algumas pesquisas são baseadas em léxicos para a identificação de pistas linguísticas para o reconhecimento de sentenças irônicas. Gonzáles-Ibáñez et al. (2011) sugerem que características lexicais por si só não são suficientes para identificar sarcasmo e que características pragmáticas e contextuais merecem mais atenção. Hogenboom et al. (2013) fazem uma análise de como os <italic id="italic-14d838935cc2e8ffe590201ec2369d1f">emoticons</italic> podem expressar sentimentos. Para isso, os autores criaram manualmente um léxico de sentimentos composto por <italic id="italic-e0368501aad077cc0f020e52128fcd2e">emoticons</italic>, com vistas a melhorar o método de classificação de sentimento baseado em léxico.</p>
      <p id="paragraph-98fd49a59f9899376be282ef4c854cb1">Ainda para o inglês, Veale e Hao (2010) investigaram a relação entre ironia e conhecimento estereotipado de um domínio, mostrando como esse tipo de percepção ajuda no reconhecimento e entendimento de enunciados irônicos. Reyes et al. (2013) analisam a ironia em termos de um modelo multidimensional de elementos textuais, com a identificação de um conjunto de características discriminativas para gerar automaticamente textos irônicos a partir de textos não-irônicos.</p>
      <p id="paragraph-b4cd61135e357dc20766a201124bd56d">Com relação aos trabalhos voltados para o PB, destaca-se o de Carvalho et al. (2009), que elaboraram um conjunto de padrões linguísticos para identificar ironia no português europeu, como <italic id="italic-7954d434fa8ad5c3db04531372433987">emoticons</italic>, expressões onomatopaicas, pontuação e aspas. Algumas dessas pistas são específicas para o português (padrões morfológicos, como os diminutivos), enquanto outras parecem ser independentes da linguagem e presentes em todas as mídias sociais, por exemplo, <italic id="italic-6fd4c04c30b1c9a604b937e5efc1ec41">Facebook</italic> ou <italic id="italic-156c0c8d318b3fd49c9c4363019c0e43">Twitter</italic>. Vanin et al. (2013) apresentam um trabalho inicial para o português do Brasil sobre alguns padrões de detecção de ironia em <italic id="italic-f4af1c7c2bd58ee051a575bb29ca2201">tweets</italic>. Em seu artigo, os autores identificaram padrões com formas diminutivas, que podem tanto expressar sentimentos positivos, como afeto, ternura e intimidade, mas também conotações sarcásticas ou irônicas, quando a intenção é desvalorizar ou insultar uma determinada entidade.</p>
      <p id="paragraph-56bd87dddbe8b1bf254fb1b32526da54">Nota-se que a maioria das pesquisas aqui relatadas são voltadas para redes sociais. Essa preferência ocorre pela facilidade na coleta dos dados por <italic id="italic-ea6e197045c4726ba0a3c38256a154a4">crawlers</italic> (programas computacionais que “varrem” sites de modo metódico e automático). Além disso, plataformas como o <italic id="italic-3b32ac2178b6870e68c14f5ad49811b7">Twitter</italic> permitem a extração de <italic id="italic-9">tweets</italic> em tempo real por meio de APIs<xref id="xref-2451b32c2963d5d10d79dc330323c16c" ref-type="fn" rid="footnote-7ae78e00175dfe0a269d0f50d6926105">2</xref>. Entretanto, <italic id="italic-10">tweets</italic> possuem um número limitado de caracteres, razão pela qual este artigo optou por trabalhar com dados advindos de comentários de notícias de jornal <italic id="italic-11">on-line</italic>, em que não há restrição ao tamanho do conteúdo textual.</p>
    </sec>
    <sec id="heading-000b833c030e6fe83bd6a39382230ffb">
      <title>2. Construção e anotação do <italic id="italic-f26fa65a2323a05d69f137d66f427f22">corpus</italic> opinativo</title>
      <p id="paragraph-ab0bc4b7ba0a835a1cc51c747ad2c7ac">A ascensão das redes sociais alavancou a utilização de plataformas como Facebook, Twitter e YouTube, além de outros conteúdos gerados pelo usuário (em inglês, <italic id="italic-adb754f0b18b9459f0a08668a640ac2e">user-generated content</italic>). Essas mídias sociais permitem que milhares de pessoas se expressem sobres os mais diferentes assuntos, e suas opiniões podem ser acessadas rapidamente por qualquer outra pessoa ou por ferramentas computacionais. </p>
      <p id="paragraph-2ca3a313317c077ab9c8a6f9c340306a">O material textual encontrado nas mídias sociais consiste em textos mais reduzidos e escritos em uma linguagem mais informal, muitas vezes contendo desvios ortográficos e gramaticais da norma culta, que podem ser acidentais ou mesmo deliberados. Ao mesmo tempo, os textos são mais espontâneos. Para Bisognin (2009), a linguagem utilizada em plataformas digitais (ou em todas as mídias sociais) possui um modo único de o usuário expressar suas emoções, opiniões ou impressões, possuindo cada vez mais características da oralidade. Procurou-se, nesta pesquisa, trabalhar com textos em que o usuário pudesse expressar sua opinião de forma direta. Isso justifica a opção por comentários de um jornal de grande circulação, que tem uma versão on-line e que dá espaço para seus leitores manifestarem suas opiniões, como é o caso da Folha de S. Paulo.</p>
      <p id="paragraph-b59cc50a0453c7ea698604fd6bfc8f42">O <italic id="italic-4bfb38c1c465e11add0fab2672f76596">ComentCorpus</italic> é um <italic id="italic-25415827e32f72bf557464519cedd941">corpus</italic> composto por comentários de notícias no PB. Para sua construção foram compilados comentários de 90 notícias referentes ao período de <italic id="italic-e521115f8fa83ef81b6308d6b8198a47">impeachment</italic> da ex-presidente Dilma Rousseff, presentes no caderno <italic id="italic-eef833fe33f48b2e5b737333efca715a">Poder</italic> do jornal <italic id="italic-84caca276775ebaca1e4935635bcfa76">Folha de S. Paulo</italic>, no período de janeiro a junho de 2016. Conteúdo gerado por usuários pode ser considerado subjetivo, e por se tratar de comentários referentes ao domínio político, a hipótese é de que o uso de recursos como a ironia seja inevitável. O <italic id="italic-78e875dbaaf434e3ceb272dc9f53b22b">corpus </italic>é composto por 6.185 comentários, totalizando aproximadamente 14 mil sentenças e 207 mil palavras.</p>
      <p id="paragraph-41c913a65fdb14e9575a6445666ddbb2">Antes do processo de anotação, foi realizada, manualmente, uma identificação de cada comentário por meio da criação de um cabeçalho, em formato XML, incluindo dados como o número do comentário, do autor e da data em que foi postado. Desse modo, cada comentário foi delimitado com as etiquetas <bold id="bold-1">&lt;coment id:“xxxx”&gt; </bold>indicando o início do comentário e <bold id="bold-2">&lt;/coment&gt; </bold>indicando o fim de cada comentário do usuário. As etiquetas <bold id="bold-4985376ae63aaa45738969b2828c8532">&lt;author&gt; </bold>e <bold id="bold-4">&lt;/author&gt; </bold>marcam o autor de cada comentário e as etiquetas <bold id="bold-5">&lt;date&gt; </bold>e <bold id="bold-6">&lt;/date&gt; </bold>indicam a data. Para a anotação das etiquetas criadas na identificação dos comentários, dos autores, das datas e das sentenças foram criadas macros (conjunto de operações codificadas) no software Notepad++, facilitando a anotação das etiquetas.</p>
      <p id="paragraph-1adb22897e67fc2b37ea16dda3894058">Todas as sentenças também foram identificadas manualmente<xref id="xref-d7ee7909a8eb04056b1a18f67569c99f" ref-type="fn" rid="footnote-a364817bc73b3f789347456bf98d80ee">3</xref>, em uma primeira etapa de anotação, sendo delimitadas com a etiqueta <bold id="bold-7">&lt;sentence&gt;</bold>, indicando o início e <bold id="bold-8">&lt;/sentence&gt;</bold>, indicando o fim. Considera-se sentença, toda sequência de palavras seguidas por um ponto final, exclamação, interrogação ou reticências.</p>
      <table-wrap id="table-figure-07386c0b7a0376aab4be3f1897e5a2e5">
        <label>Table 1</label>
        <caption>
          <title><bold id="bold-3b7c21b69d5468cd585a6f06c8138a09">Quadro 1. </bold>Exemplo de anotação utilizada para delimitar o cabeçalho e as sentenças anotadas.</title>
          <p id="paragraph-c96b0154e42074fb430b26569672092c"/>
        </caption>
        <table id="table-8840c3e2396bde702dfc0a6d20239b18">
          <tbody>
            <tr id="table-row-49a33f09ef27908c119edc9a9e77b844">
              <td id="table-cell-9caad4ef8fc89c2ffa80065b798ff5e2">&lt;coment id:"01610"&gt;    &lt;author&gt;Éder&lt;/author&gt;         &lt;date&gt;05/03/2016&lt;/date&gt;             &lt;sentence&gt;Sempre que existe a possibilidade de punir políticos importantes, mesmo com             provas cabais e inequívocas, as elites reagem com esse discurso sobre crise              institucional&lt;/sentence&gt;             &lt;sentence&gt;Seremos eternos reféns das quadrilhas que tomam o poder a séculos neste país?             &lt;/sentence&gt;             &lt;sentence&gt;Estão apenas usando o medo para se perpetuar no poder.&lt;/sentence&gt;&lt;/coment&gt;<bold id="bold-4ea23ce4f60995bdac3cdc583b945544"> </bold></td>
            </tr>
          </tbody>
        </table>
      </table-wrap>
      <p id="paragraph-d9cab43180e031966b858bbd8d657a9b">No entanto, observou-se que em alguns casos a pontuação indica hesitação, pausa ou reprodução da oralidade na escrita dentro de uma mesma sentença. Nesse caso, como mostra o exemplo (2), apesar da pontuação, a sequência foi anotada como uma única sentença.</p>
      <p id="paragraph-bc0761796ae44774a627d85d78c69733"/>
      <p id="paragraph-42d0dc3f24d49c3514a9965a92c60cfa">(2) Afinados?… duas pessoas que envergonham a nação!</p>
      <p id="paragraph-93ccba87778604ea63617df342fa6af1"/>
      <p id="paragraph-176c532670152d571ba823b3f1ce8c6d">Inicialmente, todas as sentenças identificadas na etapa anterior foram anotadas manualmente de acordo com a percepção do anotador quanto à intenção e classificadas como: </p>
      <p id="paragraph-bbee458187e2753c1eae36aba41c2b99"/>
      <p id="paragraph-f1c443c0e4c43a5b680eab088378f098">· <bold id="bold-5636cba71786ea617cb6c5220086cfa0">Opinião não irônica:</bold> sentenças que não contêm mecanismos linguísticos que alterem o seu referencial, por exemplo:</p>
      <p id="paragraph-2b0bb681c17061aa23f644e324756680"/>
      <p id="paragraph-438a83c8b90eb752c969fa217f6af0ee">(3) Se o povo votar em candidatos processados ou que tenham tido os nomes envolvidos com as empreiteiras, então vai ser um problema daqueles que votaram. </p>
      <p id="paragraph-6b521e43ceb891475d516c9bbaef57f5"/>
      <p id="paragraph-baf0b7250104bcaa6c453c831f524cc4">· <bold id="bold-2a22786aa5c041e972a93f078b0fba8d">Opinião irônica:</bold> sentenças opinativas em que há <bold id="bold-6b4d08328c89cc335ae5d3faae9867fc">oposição</bold> de sentido entre a intenção que é pretendida e o que é realmente dito.</p>
      <p id="paragraph-1acc1bce2698840f1596cee635790ff5"/>
      <p id="paragraph-48cbde807837a6ed269fdf017060e024">(4) A Sra. Presidente é tão honesta que vai pro céu...Tadinha...</p>
      <p id="paragraph-878074f6f32fd57d2339dfc23d314bbd"/>
      <p id="paragraph-0b1184c39046b3a0341b101117247db7">· <bold id="bold-203219ff62ab781666259bff8feddd4e">Opinião com outro tipo de ironia:</bold> sentenças opinativas em que <bold id="bold-ff86cbec44361122000fc611acdd03b4">não</bold> há oposição de sentido literal e significado pretendido, embora o texto carregue algum dispositivo figurado que altera sua literalidade. Casos de outro tipo de ironia incluem o sarcasmo, a sátira e o humor.</p>
      <p id="paragraph-22260da07c8e1e87303eaf5e9b3ce80c"/>
      <p id="paragraph-f08476ce4e000761484849bfd4ab249a">(5) Já já começará aquela conversinha de ele é "pelsseguido pulíticu" e blá blá blá.</p>
      <p id="paragraph-e47827410e363e49fafa280af82c1261"/>
      <p id="paragraph-7c8a553544fbe74819340879690b6ac5">A análise foi realizada apenas no nível da sentença, não recorrendo às outras sentenças do comentário. A escolha justifica-se pelo propósito de isolar o contexto da sentença, tendo em vista que esse seria o processo realizado pela máquina.</p>
      <p id="paragraph-cfcf4ee0f8f1c50e937642329cce9a75">É importante ressaltar que uma anotação deve seguir determinados processos para não existirem inconsistências entre os anotadores, sendo necessário etapas-padrão, como treinamento dos anotadores, rodadas de anotação e intersecção entre uma rodada e outra para esclarecimentos de dúvidas entre os anotadores (HOVY e LAVID, 2010). No entanto, devido ao tempo restrito e à falta de anotadores disponíveis, foi necessária uma nova etapa de anotação em uma pequena porção do <italic id="italic-d77ec0218820056f2def6b018094e689">corpus</italic> (aproximadamente 2 mil sentenças), para validar o modelo de anotação proposto anteriormente. Desta vez, além das categorias anteriores, foi incluída também a categoria “não soube responder”. </p>
      <p id="paragraph-4fbcce8445d6dcce4e46f8e29cd6fd87">Com base nas 198 sentenças provenientes de opiniões anotadas como irônicas, no conjunto das quase 2 mil sentenças e de acordo com o conceito de ironia adotado, constatou-se a presença de dois tipos de oposição na estrutura das opiniões: implícita e explícita. Ou seja, há sentenças em que a ironia ocorre em uma camada mais superficial, sendo explicitada a partir de itens lexicais que se opõem. Em outros casos, é preciso acessar uma camada mais profunda do significado, sendo necessário, nesse momento, recorrer ao contexto e ao conhecimento de mundo do leitor. </p>
      <p id="paragraph-61d7f5a04bfdacc30867d757db2fa35b">Visto que o foco desta pesquisa é modelar a ironia em textos opinativos, uma nova anotação foi realizada, classificando as opiniões irônicas por oposição em “oposição implícita” ou “oposição explícita”. Como é possível observar em (6), a oposição explícita é quando a ironia é compreendida devido à oposição de pistas presentes no próprio enunciado. Já em (7), a oposição implícita é quando a ironia é compreendida através de pistas presentes e por um contexto pragmático adicional ao enunciado.</p>
      <p id="paragraph-d97946318fc92c9bccb85c967d8dfe28"/>
      <p id="paragraph-60dcb4811f19897959da1a3324c7b3c4">(6) Viva a corrupção, o país de babacas onde vivemos.</p>
      <p id="paragraph-5fdb5ac5d23defdb6265bab1e4eb5652">(7) Agora são trilionários, ganharam na Mega-Sena...</p>
    </sec>
    <sec id="heading-521a2ea3424c0f6416124fb32d07966a">
      <title>3. Apresentação e análise dos resultados dos dados</title>
      <p id="paragraph-5f9b955fc5ebf80e3b188d1ec256a59e">Das 198 sentenças irônicas analisadas, 68% são opiniões irônicas com oposição implícita. Já as opiniões irônicas com oposição explícita<italic id="italic-d77e88a5f915d184ed8abce7294acfdb"> </italic>totalizam 32% das anotadas. </p>
      <p id="paragraph-f42a8936435e70e7c24085122e11960f">A partir dos dados extraídos com base nas anotações realizadas, procurou-se estabelecer uma análise linguística do funcionamento da ironia em um <italic id="italic-7cade700572357b0484bb6cb6b96d8dd">corpus</italic> opinativo em um domínio político. É necessário enfatizar o domínio, pois o que pode ser compreendido como ironia em um, em outro pode ser entendido em seu sentido literal, o que demonstra mais um obstáculo na caracterização de ironia em textos com vistas à aplicação computacional.</p>
      <p id="paragraph-fd53efcb403b0467b9073884465e9062">Os métodos baseados em Aprendizado de Máquina consistem em oferecer grandes quantidades de exemplos. Cada um deles pode ser visto como um vetor de características (<italic id="italic-e69d23ecaaca4cb55fcad613d1e49305">features</italic>) – <italic id="italic-a1b68f1690d87f0d1b329092186c957a">input</italic>, seguido por um rótulo que o classifica – <italic id="italic-694e3d1031f0ce190d7fa84492d78b18">output</italic> correlacionados por um algoritmo classificador determinando o rótulo para entradas nunca vistas, ou seja, textos a serem classificados. Alguns mecanismos linguísticos foram observados nas opiniões irônicas anotadas neste trabalho, podendo ser utilizados futuramente como características em algoritmos de Aprendizado de Máquina. Todavia, estas aplicações não serão abordadas neste trabalho.</p>
      <p id="paragraph-cb591a65e338ea8bdedaa5e317c90c3a">Conforme foi mencionado anteriormente, no processo de anotação, observou-se dois tipos de oposição em opiniões irônicas, as implícitas e as explícitas. Para uma modelagem linguística, as oposições explícitas são muito mais fáceis de serem formalizadas, uma vez que elas se encontram presentes no corpo da sentença. Já para a compreensão automática da oposição implícita, é necessário um banco de dados, como outro <italic id="italic-5de385bd943c4bdaefb9079db16c5e74">corpus</italic> ou acesso à <italic id="italic-c33660a3a4a37a0423774f71b7ca4855">Web</italic>, ou outro método para que a máquina entenda informações extralinguísticas. </p>
      <p id="paragraph-784a846f8eff36e1de9d47c85e61bbc1">Em (8) é possível inferir o sentido irônico por meio do contraste entre “são muito nobres” versus “usou dinheiro de corrupção”. Nesse caso, o autor da opinião faz a oposição de uma sequência positiva e uma sequência negativa para construir a ironia. Em (9), não é possível compreender o sentido figurado ou literal da sentença sem o contexto da qual foi extraída. </p>
      <p id="paragraph-29259dbe220d8999dd95f78079781474"/>
      <p id="paragraph-de34f8ae81eb68f8685b1508bc6e1c78">(8) São muito nobres, afinal, a chapa usou dinheiro de corrupção.</p>
      <p id="paragraph-c56f38f282755e016a766c573494a833">(9) Nossa, como ela é legal!</p>
      <p id="paragraph-ba498954b25d30fefb0a18e9804a8ed5"/>
      <p id="paragraph-ffee17569db8b3feb1530eb6c3f37e82">Há ainda casos em que não há necessariamente um contraste de polaridade entre os elementos da sentença, nem oposição de proposições. Em (10), nota-se que a ironia se apresenta na contraposição de elementos que, habitualmente, não pertencem a mesma esfera semântica. </p>
      <p id="paragraph-70ea825b45540850afc3c666a2c07327"/>
      <p id="paragraph-7ac359b167048a49a7267f4ba836cb61">(10) Dilma é muito boa para governar o Brasil, tanto que faliu uma lojinha de 1,99!</p>
      <p id="paragraph-77be138264b2be7f62b45f4e8ae57d8c"/>
      <p id="paragraph-dcc7305feb7df27d20f7050825ec7b0a"> No exemplo acima, além da oposição entre as proposições “muito boa para governar o Brasil” e “faliu uma lojinha de 1,99”, que são positiva e negativa, respectivamente, há também um contraste entre o domínio político e o domínio do mercado e/ou comércio.</p>
      <p id="paragraph-52c4dbc4741a197e2d81480d54260083">Nas opiniões de oposição explícita ou implícita, são necessários dispositivos linguísticos para que exista essa oposição de que uma opinião irônica necessita. Estes dispositivos são itens lexicais que podem coocorrer no mesmo enunciado.</p>
      <p id="paragraph-9437c2a50d7477f74016a26a1e04b7e1"/>
      <p id="paragraph-b650fda1a2b40d32b1a0d36691d9b6bd">(11) Aumentar impostos é fácil, né?</p>
      <p id="paragraph-1848d778d54d98e74d52a9d5b08ce56c"/>
      <p id="paragraph-b424eeb909eb8180fc398132f597d899">No exemplo (11), se fosse uma opinião afirmativa, ela poderia ser compreendida como uma oposição implícita ou até mesmo ser entendida em seu sentido literal. Ao transformá-la em uma interrogativa, com o uso do item “né?”, o autor recorre a um dispositivo linguístico retórico, quando uma questão é feita sem a necessidade de obter uma resposta. Neste trabalho, acredita-se que, de uma forma genérica, toda questão retórica é um mecanismo considerado como uma opinião irônica, porque não existe um elemento linguístico evidente que indique a ironia a não ser a própria questão.</p>
      <p id="paragraph-f432769156df11cbdad2a56d91f74c38">É possível observar, com base nos dados desta pesquisa, que as questões retóricas se relacionam mais às ironias implícitas (12,9%), em comparação com as ironias explícitas (4,2%). Esse resultado pode ser explicado pelo fato de que quando o autor de uma opinião utiliza uma questão retórica, ele busca ecoar contextos que não estão necessariamente no texto, como é possível observar no exemplo (12).</p>
      <p id="paragraph-afb349f6fdc61ed3871da581f0874d8e"/>
      <p id="paragraph-8d47a57df7c2591821ee8e2e9678af65">(12) Devemos ser grato ao P.T e seus eleitores, não é verdade? </p>
      <p id="paragraph-ed54fac796f29f29ae88c8dd4ec43e2f"/>
      <p id="paragraph-d3cd5bf1c5647ee190bab9d867334e17">O uso dos diminutivos parece ser um recurso mais evidente em uma opinião irônica. Geralmente, é utilizado para expressar afeto, carinho, intimidade ou outros sentimentos positivos. No entanto, dependendo da sua aplicação na sentença, percebeu-se que foi usado para transmitir um sentido irônico ou sarcástico.</p>
      <p id="paragraph-2a4cc97a0b7541a72332774d3ab90205"/>
      <p id="paragraph-d2349ce9118be787122748171a7d3b0c">(13) Estão preocupados com o coitadinho do Cunha.</p>
      <p id="paragraph-54e76c0630c995946162f1583afedb1c"/>
      <p id="paragraph-83d4563431f93b599b434e05ad23bc52">Em (13) sabe-se que Cunha é um político brasileiro envolvido em casos de corrupção. Logo, o uso do termo “coitadinho” não pode ser compreendido como algo positivo, ativando, consequentemente, o sentido irônico.</p>
      <p id="paragraph-a735af45ba833efcee86ffcdfb14b091">Outro mecanismo utilizado foram as aspas, comumente empregadas em ambientes virtuais para indicar que aquilo que está sendo dito é uma ironia. Alguns trabalhos para o português (FREITAS et al., 2014; CARVALHO et al., 2009) também salientam o uso das aspas para gerar efeito de ironia. </p>
      <p id="paragraph-7bdfc0d4a973dfde3a9f76dbc5e2ca70"/>
      <p id="paragraph-08de33f29282c72839097860bdbcd6c8">(14) O PMDB é um partido tão “pequeno” que não consegue ser medíocre!</p>
      <p id="paragraph-be4ecb3bdf62da90427471fbbdc5e2b4"/>
      <p id="paragraph-6bff4e7d569972f0495d348057a32cee">As aspas são frequentemente usadas para enfatizar um conteúdo, principalmente a polaridade em relação ao resto da sentença. No exemplo (14), o termo “pequeno” não pode ser usado para qualificar o partido PMDB, por exemplo. Isso acontece por ser atualmente o maior partido brasileiro.</p>
      <p id="paragraph-87ff853c3e5ae7195c00ca45dd09090b">Para enfatizar uma opinião, é comum o uso de adjetivos. Apesar disso, muitas vezes os adjetivos podem fazer uma oposição a outro adjetivo (ou a todo um enunciado) de polaridade contrastiva. Alguns adjetivos com alto grau de polaridade, quando usados na mesma sentença, podem ressaltar o sentido irônico de uma opinião, como ocorre em (15).</p>
      <p id="paragraph-3129a8ad0262b2de0cf22d8a8c19a4d5"/>
      <p id="paragraph-62dcb8778a84fdfed2086b2e60acd194">(15) Nossos políticos corruptos aceitam de bom grado, pois vivemos um momento extraordinário nesse país!!!</p>
      <p id="paragraph-1db4bd829b483b66ecdf5e44a19aa1d9"/>
      <p id="paragraph-172565bf48e536b596bd60e0a7e39212">No decorrer da análise foi possível observar, ainda, a existência de alguns itens lexicais essenciais para estabelecer a oposição. Esses itens, na maioria das vezes, possuem uma polaridade bem marcada e são restritos a um determinado domínio, mas ativam a ironia do enunciado, sendo classificados como <bold id="bold-39dc6a09d09bc51f8e3ba37f1d0c5e2b">disparadores</bold>. Palavras como “corrupção”, “impeachment”, “imposto” quando em contraste com outras palavras ou outro contexto que não seja o político, por exemplo, geram uma sentença irônica.</p>
      <p id="paragraph-46a8315d26dcd9c27925ee38a7e19d02">No exemplo (16), os termos “corrupção” e “campanha” se unem e se opõem com “não é grave”, dando o sentido irônico para a opinião. </p>
      <p id="paragraph-4216d30433b559e9862cbe5070d50db7"/>
      <p id="paragraph-7e1664f63f1c459571249c035501b0c5">(16) Dinheiro de corrupção para financiar campanha de Dilma não é grave.</p>
      <p id="paragraph-21c76ea5cd880db55605f8db00e123ed"/>
      <p id="paragraph-c6481cbf1ea15fec9f13351c5fc381b9">Em (17), a ironia ocorre na contraposição entre “muito nobres” e “usou dinheiro de corrupção”. Como no exemplo anterior, o termo “corrupção” é considerado um disparador, pois, se houvesse a substituição por outro elemento lexical, como “trabalho”, não seria possível a compreensão irônica do enunciado.</p>
      <p id="paragraph-bb09055418c7bd34349e9aacf048d80b"/>
      <p id="paragraph-b6af0f860483d68e10e1d2a47c859b28">(17) São muito nobres, afinal, a chapa usou dinheiro de corrupção.</p>
      <p id="paragraph-a6ae1a9a01c61a2f66cdf7472c2553ad"/>
      <p id="paragraph-cbfde4ee53a77903016fc282ff35733f">O uso da hipérbole ou superlativos pode também ser uma característica para indicar a ironia por meio de exageros, como em (18). Ademais, como pode ser visto em (19), algumas interjeições, principalmente positivas, também podem ser um indicador de ironia.</p>
      <p id="paragraph-f04568059ab477c5fe9fe1acad452e4c"/>
      <p id="paragraph-f303c5318fb952c9c8efa44edc52c2d6">(18) Belíssimo modelo de ética e moral dos vermelhos chupins.</p>
      <p id="paragraph-a471e93b1c77ed1284b61b6c3c9d3dc5">(19) Viva a decência.</p>
      <p id="paragraph-e9d435fcf84d459c0cd2b0c7d40ea8de"/>
      <p id="paragraph-677040f50a6f411c1cafec818d438421">Por fim, (20) exemplifica a representação do riso, muito utilizada em conteúdos gerados por usuários e que pode evidenciar a ironia de uma opinião. </p>
      <p id="paragraph-ccf64d27c024ce44c1ce0e157b0d0566"/>
      <p id="paragraph-f9b62a9216a930e2cea2160530b7c0b3">(20) Muito boa essa Data Folha... KKKKK</p>
      <p id="paragraph-63e9e15e328817ce7b9efd87707eaa23"/>
      <p id="paragraph-67e022164d3b55eded20be2787b5469c">Todos os recursos linguísticos aqui descritos são evidências encontradas no <italic id="italic-ba75b313efb75f89635bf3f9e1ca5aa4">ComentCorpus</italic>, mas que só podem ser analisadas como possíveis indicadores de ironia de acordo com a intuição do leitor, além da coocorrência com outros itens lexicais na estrutura da opinião, pois até o momento não foram testados em Aprendizado de Máquina ou outros métodos computacionais.Todos os recursos linguísticos aqui descritos são evidências encontradas no <italic id="italic-aa288e1400fdc3cc93321f54f8dff72f">ComentCorpus</italic>, mas que só podem ser analisadas como possíveis indicadores de ironia de acordo com a intuição do leitor, além da coocorrência com outros itens lexicais na estrutura da opinião, pois até o momento não foram testados em Aprendizado de Máquina ou outros métodos computacionais.</p>
    </sec>
    <sec id="heading-34530bd1db4faa50285366a83d506b2b">
      <title>4. Conclusões</title>
      <p id="heading-6f996fd007dd7a61f0e9a9df942d23bf">O presente trabalho procurou estudar e descrever a ironia em um corpus de comentários com o propósito de auxiliar na construção de recursos linguísticos-computacionais para a Mineração de Opinião. Para tanto, foi criado um esquema de anotação para opiniões irônicas de conteúdo gerado por usuários no domínio político que busca esclarecer como é o processo de identificação desses casos e se existem dispositivos linguísticos capazes de facilitar sua detecção. Por meio da análise feita na atual pesquisa, também foi possível identificar características de expressão da ironia no domínio escolhido, como o uso de itens lexicais em um grupo limitado dentro de um contexto – os chamados “disparadores” – e adjetivos com polaridade positiva e negativa, por exemplo. </p>
      <p id="paragraph-2">É pertinente salientar que um dos principais mecanismos encontrados na identificação de ironia são fatores extralinguísticos e sociais intrínsecos a declarações irônicas, que tornam a tarefa de detecção automática desses mecanismos figurados em instâncias bastante complexa, principalmente pela falta dos contextos e informações extralinguísticas. Ainda assim, foi possível observar que o significado de um enunciado irônico pode ser implicado por essas informações pragmáticas, o que suscita a necessidade de realização de referência a eventos e enunciados anteriores ao que se está analisando.</p>
      <p id="paragraph-3">Tendo em vista o desenvolvimento recente das redes sociais e da importância que ganham em nossas vidas, cremos que o desenvolvimento desses recursos continuará sendo uma tarefa importante no campo do PLN e da Mineração de Opinião. Um próximo passo para a continuidade desta pesquisa seria o desenvolvimento de um léxico de sentimentos voltado à mineração de opinião (e de textos) de mídias sociais, integrando interjeições, adjetivos e advérbios altamente polarizados mais frequentes em português do Brasil, e de outros disparadores de ironia para o domínio político.</p>
    </sec>
    <sec id="heading-86908ff924395c30e16c4b590fec41de">
      <title>Avaliação</title>
      <p id="paragraph-3ef3cd761aa0e8080c4535199d3d55c6">AVALIADOR 1: Elisa Duarte Teixeira</p>
      <p id="paragraph-a64d271612a26d9eaeb87078d25bc55f">ORCID: https://orcid.org/0000-0003-3472-3605</p>
      <p id="paragraph-5a3b707b08aa05003bfc2c9a9428fb6c">FILIAÇÃO: Universidade de Brasília, Brasília, Brasil.</p>
      <p id="paragraph-27b9ef54627d3d008af25fb7722339ab">.</p>
      <p id="paragraph-ee24b29498ef1d5198905840642fb90b">AVALIADOR 2: Bruno Neves Rati de Melo Rocha</p>
      <p id="paragraph-6d68a110cc35eb9a2a954722cc1fd5d6">ORCID: https://orcid.org/0000-0001-7999-1545</p>
      <p id="paragraph-8">FILIAÇÃO: Universidade Federal do Pará, Pará, Brasil.</p>
      <p id="paragraph-9">.</p>
      <p id="paragraph-10">
        <bold id="bold-53eb3d47f9f804443641be080b2d914a">RODADA 1 </bold>
      </p>
      <p id="paragraph-11">AVALIADOR 1 </p>
      <p id="paragraph-12">2020-04-14 | 14:31 </p>
      <p id="paragraph-13">Artigo relevante, bem fundamentado e, no geral, bem escrito. Algumas sugestões pontuais de revisão estão indicadas no arquivo anexo.  </p>
      <p id="paragraph-14">.</p>
      <p id="paragraph-15">AVALIADOR 2</p>
      <p id="paragraph-16">2020-05-15 | 07:41</p>
      <p id="paragraph-17">O trabalho apresenta uma contribuição original que visa contribuir para áreas da Linguística cada vez mais relevantes - o Processamento de Linguagem Natural e a Análise de Sentimentos. Ao identificar dois tipos de ironias presentes no corpus de comentários (implícitas e explícitas), bem como os mecanismos linguísticos responsáveis por marcar a ironia explícita, os autores oferecem subsídios para pesquisas futuras que tentem fazer uma deteção automática de enunciados irônicos.Apesar disso, para que o texto possa ser publicado, é necessário que se faça uma revisão ortográfica e textual. Envio em anexo o manuscrito original acrescido das minhas observações para orientar a revisão.</p>
      <p id="paragraph-18">.</p>
      <p id="paragraph-19">
        <bold id="bold-f9f499697bbfec1e9f0a0e30c39c517a">RODADA 2</bold>
      </p>
      <p id="paragraph-20">AVALIADOR 1 </p>
      <p id="paragraph-21">2020-06-18 | 17:22</p>
      <p id="paragraph-22"/>
      <p id="paragraph-23">.</p>
      <p id="paragraph-24">AVALIADOR 2</p>
      <p id="paragraph-25">2020-06-19 | 13:14 </p>
      <p id="paragraph-ca61a6283d0b133c828b79d35f924d12">Os autores alteraram o artigo de maneira satisfatória considerando a maior parte das minhas observações e, em face disso, considero que o artigo está apto a ser publicado.</p>
      <p id="paragraph-0a7c2398ebf500422e26862a7b8752a9">.</p>
      <p id="paragraph-f121d6e0aa6da7a7449eb8c87345011d">
        <bold id="bold-32574a911da101f9cd455a01648ef631">RODADA 3</bold>
      </p>
      <p id="paragraph-cda0a03e85a254b0d8fe0e56e9571b28">AVALIADOR 1 </p>
      <p id="paragraph-e11baaa24a050a102a53e1a95d635520">2020-07-16 14:05</p>
      <p id="paragraph-546ba213ecc3844eff10ab2471d3756e">O artigo melhorou bastante com relação à versão anterior, mas ainda vejo problemas. Anotei os mais pontuais no corpo do próprio texto.</p>
      <p id="paragraph-ce716a3fd0f109e08194c9517c265e89">De forma geral, fico bastate incomodada com a referência a corpus quando, na verdade, não há nada na fundamentação teórica ou na metodologia de levantamento e análise dos dados que utilize quaisquer das técnicas mais conhecidas da Linguística de Corpus. Mas creio que esta é apenas uma divergência de perspectivas, já que esta é minha principal área de atuação, e não o PLN. Mas, nesse sentido, eu não consigo ver, claramente, quais são as vantagens ou aplicações deste trabalho ao PLN, já que os autores não explicitam, nas conclusões, nenhuma regra bem formalizada de caracterização das ironias que permita sua futura identificação automática. Isto é: se os dados obtidos neste trabalho sobre a caracterização da ironia são suficientes para se fazer algumas generalizações que possibilitem a criação de algoritmos para sua identificação automática em corpora, isto não fica claro, ou bem explicitado no artigo. A própria metodologia de anotação da ironia empregada ainda está descrita de forma confusa, a meu ver.</p>
      <p id="paragraph-6beb87bdaf28824635e35cbe2396230a">Acho que uma forma de remediar essa  desconexão seria acrescentar à análise dos dados algumas listas (talvez até na forma de apêndice) dos chamados "disparadores" principais identificados, ou dos chamados "adjetivos de alta polarização", ou mesmo das palavras mais recorrentes nessas frases identificadas como irônicas - para que se possa perceber se pertencem a campos semânticos específicos, além do mais óbvio (política). Me refiro a dados visualmete mais palpáveis que mostrem que os resultados levantados permitem generalizações - o que é o objetivo último, creio eu, de se fazer um trabalho assim, para que se possa, depois, empregar essas generalizações em identificadores automáticos de ironia.</p>
      <p id="paragraph-5033e27bd81c63b457bd7d0eabe41818">Caso contrário, o artigo poderia ser apresentado como um estudo da ironia em comentários de notícias - o que de fato parece ser o caso, mas precisaria de um aporte teórico mais aprofundado sobre o tema, no caso - sem entrar no mérito da construção de corpus ou da aplicação em PLN, pois isso é o que está de fato faltando: fortalecer essa conexão entre o estudo feito, os dados levantados e o propósito e/ou relação com o PLN ou o estudo de corpora.</p>
      <p id="paragraph-323576b43cd15870a192419fd7ffff51">
        <bold id="bold-c5d8250df3789bfad99d0ee5a10a7e1f">RODADA 4</bold>
      </p>
      <p id="paragraph-c3a3021fa2febec39d8674e34e83eb07">AVALIADOR 1 </p>
      <p id="paragraph-9a5e5d5014355e473d6d79cc82d1cf78">2020-08-28 | 13:49</p>
      <p id="paragraph-0e2cf56c7c37d44555a87ea19f50c619">Me preocupou bastante o fato de a autora (os autores?) terem acrescentado um adjetivo à sentença (15), que claramente não está nos dados de pesquisa (basta ver a versão anterior do artigo e a própria sentença (17), que é idêntica, porém sem o adjetivo "maravilhosa"). Eu havia pontuado, na revisão anterior, que o exemplo (15) não seria pertinente para a descrição que o precede, pois menciona "adjetivos com alto grau de polaridade, quando usados na mesma sentença", e o referido exemplo contém apenas UM adjetivo... </p>
      <p id="paragraph-ff625dd3c0d5d6352d6c64e69d89aff7">Enfim, o artigo chegou num ponto em que, em minha opinião, está publicável, com exceção de algumas minúsculas alterações que não necessitam minha supervisão (não gostaria de recebê-lo novamente, dou a revisão por encerrada). Mas esse fato que relato aqui para os editores apenas - que eu considerei como uma maquiagem dos dados, que é algo bastante antiético; ou, na melhor das hipóteses, como uma ironia desrespeitosa endereçada à revisora - me preocupou um bocado. Creio que valeria a pena uma palavra com o supervisor e co-autor do artigo.</p>
    </sec>
  </body><back>
    <fn-group>
      <fn id="footnote-c45eac43a64cae7a37d5660862476314">
        <label>1</label>
        <p id="paragraph-073ed1f8591483e7e0f23aa236cd0219">O que se conhece na retórica por sentido figurado, a Pragmática irá tratar como <italic id="italic-6e90f21db54870b6675856b4fa5fe590">implicatura</italic>. Para Grice (1975), existem dois tipos de implicatura: a <italic id="italic-57432e1251b78acf10f383893d2bdd8f">convencional</italic> e a <italic id="italic-5e1937aff94d31787cccbf1348489ee8">conversacional</italic>. A primeira refere-se ao significado convencional de um enunciado e a última está ligada ao significado não usual de um enunciado e é determinada pela diferença do que é dito pelo falante e o que ele realmente quer dizer. Além disso, o autor postula que, mesmo que involuntariamente, os interlocutores respeitam quatro <italic id="italic-4">Princípios de Cooperação</italic> para que a informação seja a mais homogênea possível. São elas: i) <italic id="italic-5">Máxima de Qualidade</italic>: tente que a sua contribuição conversacional seja o mais verdadeira possível, para tal, não afirme o que crê ser falso e não afirme aquilo de que não tem provas suficientes para confirmar a sua veracidade; ii) <italic id="italic-6">Máxima de Quantidade</italic>: faça com que a sua contribuição conversacional seja tão informativa quanto necessário; iii) <italic id="italic-7">Máxima de Relevância</italic>: seja relevante ao objetivo da conversa, estabelecendo relações de pertinência entre os enunciados e iv) <italic id="italic-8">Máxima de Modo</italic>: seja claro e evite ambiguidades, obscuridades; seja breve e ordenado.</p>
      </fn>
      <fn id="footnote-7ae78e00175dfe0a269d0f50d6926105">
        <label>2</label>
        <p id="paragraph-38e2b07f3b0b09490391e9accb1ff258">API é uma sigla para <italic id="italic-5e6d9627421cc8c4e436594fafad4d8b">Application Programming Interface –</italic> é<italic id="italic-af774a1438cec5b0c55bc9cae9907d70"> </italic>um conjunto de instruções, rotinas e padrões de programação usados para que se possa acessar um aplicativo na Web. </p>
      </fn>
      <fn id="footnote-a364817bc73b3f789347456bf98d80ee">
        <label>3</label>
        <p id="paragraph-0fb3fb338b108aef5cd97bdb008b4321">Todo o processo de anotação dos comentários e das sentenças foi manual, pois acreditava-se naquele momento que seria necessário uma leitura atenta do material textual que seria analisado posteriormente.</p>
      </fn>
    </fn-group>
    <ref-list>
      <ref id="magazine-article-ref-e957055a7748d325a7a42dbf86691976">
        <element-citation publication-type="magazine">
          <fpage>3</fpage>
          <lpage>20</lpage>
          <page-range>3-20</page-range>
          <volume>12</volume>
          <year>2000</year>
          <person-group person-group-type="author">
            <name>
              <surname>Attardo</surname>
              <given-names>Salvatore</given-names>
            </name>
          </person-group>
          <source>Rask</source>
          <article-title>Irony markers and functions: Towards a goal-oriented theory of irony and its processing</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-f6c3b7d6d304e000612a4e94e559bc83">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 29th Annual ACM Symposium on Applied Computing</conf-name>
          <conf-loc>New York, NY, USA</conf-loc>
          <fpage>628</fpage>
          <lpage>633</lpage>
          <page-range>628-633</page-range>
          <year>2014</year>
          <person-group person-group-type="author">
            <name>
              <surname>Barbieri</surname>
              <given-names>Francesco</given-names>
            </name>
            <name>
              <surname>Ronzano</surname>
              <given-names>Francesco</given-names>
            </name>
            <name>
              <surname>Saggion</surname>
              <given-names>Horacio</given-names>
            </name>
          </person-group>
          <article-title>Pathways for irony detection in tweets</article-title>
        </element-citation>
      </ref>
      <ref id="book-ref-11d62cc22b8255fcf18085147059558b">
        <element-citation publication-type="book">
          <edition>1</edition>
          <publisher-loc>Porto Alegre</publisher-loc>
          <publisher-name>AGE</publisher-name>
          <year>2009</year>
          <person-group person-group-type="author">
            <name>
              <surname>Bisognin</surname>
              <given-names>Tadeu R. </given-names>
            </name>
          </person-group>
          <source>
            <bold id="bold-02908c61d1e42fb502201a067fb70fd0">Sem Medo do Internetês</bold>
          </source>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-8e3f51c8ee7d8c47e824c80582b9b4aa">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 1st international CIKM workshop on Topic-sentiment analysis for mass opinion</conf-name>
          <conf-loc>New York, NY, USA</conf-loc>
          <fpage>53</fpage>
          <lpage>56</lpage>
          <page-range>53-56</page-range>
          <year>2009</year>
          <person-group person-group-type="author">
            <name>
              <surname>Carvalho</surname>
              <given-names>Paula</given-names>
            </name>
            <name>
              <surname>Sarmento</surname>
              <given-names>Luís</given-names>
            </name>
            <name>
              <surname>Silva</surname>
              <given-names>Mario J.</given-names>
            </name>
            <name>
              <surname>Oliveira</surname>
              <given-names>Eugénio</given-names>
            </name>
          </person-group>
          <article-title>Clues for detecting irony in user-generated contents: oh...!! it’s "so easy</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-c837486f0ffe761df267e20596fb1b6a">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 49th Annual Meeting of the Association for Computational Linguistics: Human Language Technologies: shortpapers</conf-name>
          <conf-loc>Portland, Oregon, USA</conf-loc>
          <fpage>564</fpage>
          <lpage>568</lpage>
          <page-range>564-568</page-range>
          <year>2011</year>
          <person-group person-group-type="author">
            <name>
              <surname>Carvalho</surname>
              <given-names>Paula</given-names>
            </name>
            <name>
              <surname>Sarmento</surname>
              <given-names>Luís</given-names>
            </name>
            <name>
              <surname>Teixeira</surname>
              <given-names>Jorge</given-names>
            </name>
            <name>
              <surname>Silva</surname>
              <given-names>Mario J. </given-names>
            </name>
          </person-group>
          <article-title>Liars and Saviors in a Sentiment Annotated Corpus of Comments to Political debates</article-title>
        </element-citation>
      </ref>
      <ref id="webpage-ref-6474f0d11058c8a56daca4c9001cf194">
        <element-citation publication-type="webpage">
          <uri>http://ronaldo.cs.tcd.ie/esslli07/mlfornlp.pdf.</uri>
          <year>2007</year>
          <person-group person-group-type="author">
            <name>
              <surname>Emms</surname>
              <given-names>Martin</given-names>
            </name>
            <name>
              <surname>Luz</surname>
              <given-names>Saturnino</given-names>
            </name>
          </person-group>
          <article-title><bold id="bold-88a55e4b4eb3f927ed537c3fc29186bc">Machine Learning for Natural Language Processing</bold>. European Summer School of Logic, Language and Information, course reader, Dublin</article-title>
        </element-citation>
      </ref>
      <ref id="magazine-article-ref-065496023fe484bb7482166004470ebd">
        <element-citation publication-type="magazine">
          <fpage>1031</fpage>
          <lpage>1059</lpage>
          <page-range>1031-1059</page-range>
          <volume>13</volume>
          <year>2013</year>
          <person-group person-group-type="author">
            <name>
              <surname>Freitas</surname>
              <given-names>Claudia</given-names>
            </name>
          </person-group>
          <source>Revista Brasileira de Linguística Aplicada</source>
          <article-title>Sobre a construção de um léxico da afetividade para o processamento computacional do português</article-title>
        </element-citation>
      </ref>
      <ref id="magazine-article-ref-c7e998d1fa8b9ad23ef50d15349ffa12">
        <element-citation publication-type="magazine">
          <fpage>1</fpage>
          <lpage>13</lpage>
          <page-range>1-13</page-range>
          <volume>11</volume>
          <year>2012</year>
          <person-group person-group-type="author">
            <name>
              <surname>Freitas</surname>
              <given-names>Claudia</given-names>
            </name>
            <name>
              <surname>Motta</surname>
              <given-names>Eduardo</given-names>
            </name>
            <name>
              <surname>Milidiú</surname>
              <given-names>Rui L.</given-names>
            </name>
            <name>
              <surname>Cézar</surname>
              <given-names>Juliana</given-names>
            </name>
          </person-group>
          <source>Caderno de Resumos de XI Encontro de Linguística de Corpus (ELC)</source>
          <article-title>Vampiro que brilha… rá! Desafios na anotação de opinião em um corpus de resenhas de livros</article-title>
        </element-citation>
      </ref>
      <ref id="book-ref-535f30084a530a0ba28c9ede079b6b06">
        <element-citation publication-type="book">
          <edition>1</edition>
          <publisher-loc>Nova Iorque</publisher-loc>
          <year>2007</year>
          <person-group person-group-type="author">
            <name>
              <surname>Gibbs Jr</surname>
              <given-names>Raymond W.</given-names>
            </name>
            <name>
              <surname>Colston</surname>
              <given-names>Herbert L.</given-names>
            </name>
          </person-group>
          <source><bold id="bold-44b4486b26e0ec9e58deac10d60d9e63">Irony in Language and Thought</bold>: A Cognitive Science Reader</source>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-1cc1d25074c4ddc23eab0491ec1fba63">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 49th Annual Meeting of the Association for Computational Linguistics: Human Language Technologies</conf-name>
          <conf-loc>Portland, Oregon, USA</conf-loc>
          <fpage>581</fpage>
          <lpage>586</lpage>
          <page-range>581–586</page-range>
          <year>2011</year>
          <person-group person-group-type="author">
            <name>
              <surname>González-Ibáñez</surname>
              <given-names>Roberto</given-names>
            </name>
            <name>
              <surname>Muresan</surname>
              <given-names>Smaranda</given-names>
            </name>
            <name>
              <surname>Wacholder</surname>
              <given-names>Nina</given-names>
            </name>
          </person-group>
          <article-title>Identifying Sarcasm in Twitter: A Closer Look</article-title>
        </element-citation>
      </ref>
      <ref id="chapter-ref-5c30ffdeba1dc2c690ac5a29a29eae38">
        <element-citation publication-type="chapter">
          <fpage>225</fpage>
          <lpage>242</lpage>
          <page-range>225-242</page-range>
          <publisher-loc>New York</publisher-loc>
          <publisher-name>Academic Press</publisher-name>
          <year>1975</year>
          <person-group person-group-type="author">
            <name>
              <surname>Grice</surname>
              <given-names>Paul</given-names>
            </name>
          </person-group>
          <person-group person-group-type="editor">
            <name>
              <surname>Cole</surname>
              <given-names>Peter</given-names>
            </name>
            <name>
              <surname>Morgan</surname>
              <given-names>J. L. </given-names>
            </name>
          </person-group>
          <source>Syntax and semantics</source>
          <chapter-title>Logic and conversation</chapter-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-0c99167a4aab4c14e07ddeb08a41b212">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 31st Annual Meeting of the Cognitive Science Society 2009 (CogSci 2009)</conf-name>
          <conf-loc>Amsterdam, Netherlands</conf-loc>
          <fpage>1376</fpage>
          <lpage>1381</lpage>
          <page-range>1376-1381</page-range>
          <year>2009</year>
          <person-group person-group-type="author">
            <name>
              <surname>Hao</surname>
              <given-names>Yanfen</given-names>
            </name>
            <name>
              <surname>Veale</surname>
              <given-names>Tony</given-names>
            </name>
          </person-group>
          <article-title>Support Structures for Linguistic Creativity: A Computational Analysis of Creative Irony in Similes</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-f8a9593b89bd30892f3b6d6395acabe7">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 28th Annual ACM Symposium on Applied Computing</conf-name>
          <conf-loc>New York, NY, USA</conf-loc>
          <fpage>703</fpage>
          <lpage>710</lpage>
          <page-range>703-710</page-range>
          <year>2013</year>
          <person-group person-group-type="author">
            <name>
              <surname>Hogenboom</surname>
              <given-names>Alexander</given-names>
            </name>
            <name>
              <surname>Bal</surname>
              <given-names>Daniella</given-names>
            </name>
            <name>
              <surname>Frasincar</surname>
              <given-names>Flavius</given-names>
            </name>
            <name>
              <surname>Bal</surname>
              <given-names>Malissa</given-names>
            </name>
            <name>
              <surname>De Jong</surname>
              <given-names>Franciska</given-names>
            </name>
            <name>
              <surname>Kaymak</surname>
              <given-names>Uzay</given-names>
            </name>
          </person-group>
          <article-title>Exploiting emoticons in sentiment analysis</article-title>
        </element-citation>
      </ref>
      <ref id="book-ref-bd66d7fe06398451f126acb46d2bc703">
        <element-citation publication-type="book">
          <publisher-loc>Rio de Janeiro</publisher-loc>
          <publisher-name>Objetiva</publisher-name>
          <year>2009</year>
          <person-group person-group-type="author">
            <collab>
              <named-content content-type="name">Houaiss</named-content>
            </collab>
          </person-group>
          <source>
            <bold id="bold-323dc449bf169067fbc783c7de33be63">Dicionário eletrônico Houaiss da língua portuguesa</bold>
          </source>
        </element-citation>
      </ref>
      <ref id="journal-article-ref-47736339f75729c6c1b9130f4bb0d4c8">
        <element-citation publication-type="journal">
          <fpage>13</fpage>
          <lpage>36</lpage>
          <page-range>13-36</page-range>
          <volume>22</volume>
          <year>2010</year>
          <person-group person-group-type="author">
            <name>
              <surname>Hovy</surname>
              <given-names>Eduard</given-names>
            </name>
            <name>
              <surname>Lavid</surname>
              <given-names>Julia</given-names>
            </name>
          </person-group>
          <source>International Journal of Translation</source>
          <article-title>Towards a ‘Science’ of Corpus Annotation: A New Methodological Challenge for Corpus Linguistics</article-title>
        </element-citation>
      </ref>
      <ref id="journal-article-ref-80682b12e2bd1ccb1539a2aa45c85da1">
        <element-citation publication-type="journal">
          <page-range>374</page-range>
          <volume>118</volume>
          <person-group person-group-type="author">
            <name>
              <surname>Kreuz</surname>
              <given-names>Roger J.</given-names>
            </name>
            <name>
              <surname>Glucksberg</surname>
              <given-names>Sam</given-names>
            </name>
          </person-group>
          <source>Journal of experimental psychology: General</source>
          <article-title>How to be sarcastic: The echoic reminder theory of verbal irony</article-title>
        </element-citation>
      </ref>
      <ref id="chapter-ref-75a4f6b49d20aee001d29ddc0386b39b">
        <element-citation publication-type="chapter">
          <fpage>627</fpage>
          <lpage>666</lpage>
          <page-range>627–666</page-range>
          <publisher-name>Chapman and Hall/CRC</publisher-name>
          <year>2010</year>
          <person-group person-group-type="author">
            <name>
              <surname>Liu</surname>
              <given-names>Bing</given-names>
            </name>
          </person-group>
          <person-group person-group-type="editor">
            <name>
              <surname>Indurkhya</surname>
              <given-names>N.</given-names>
            </name>
            <name>
              <surname>Damerau</surname>
              <given-names>F. J. </given-names>
            </name>
          </person-group>
          <source>Handbook of Natural Language Processing</source>
          <chapter-title>Sentiment Analysis and Subjectivity</chapter-title>
        </element-citation>
      </ref>
      <ref id="book-ref-ba51caebe254a5094c0958c7859ede95">
        <element-citation publication-type="book">
          <publisher-loc>Toronto</publisher-loc>
          <publisher-name>Morgan &amp; Claypool Publishers</publisher-name>
          <year>2012</year>
          <person-group person-group-type="author">
            <name>
              <surname>Liu</surname>
              <given-names>Bing</given-names>
            </name>
          </person-group>
          <source>
            <bold id="bold-382a003dec6eae2ca5981b618777b730">Sentiment Analysis and Opinion Mining</bold>
          </source>
        </element-citation>
      </ref>
      <ref id="magazine-article-ref-7fc288993ee3b38b897141e1c524f7d8">
        <element-citation publication-type="magazine">
          <fpage>1</fpage>
          <lpage>135</lpage>
          <page-range>1-135</page-range>
          <volume>2</volume>
          <year>2008</year>
          <person-group person-group-type="author">
            <name>
              <surname>Pang</surname>
              <given-names>Bo</given-names>
            </name>
            <name>
              <surname>Lee</surname>
              <given-names>Lillian</given-names>
            </name>
          </person-group>
          <source>Foundations and Trends® in Information Retrieval</source>
          <article-title>Opinion mining and sentiment analysis</article-title>
        </element-citation>
      </ref>
      <ref id="magazine-article-ref-5524b3a24a27f1298543a714df604f96">
        <element-citation publication-type="magazine">
          <fpage>239</fpage>
          <lpage>268</lpage>
          <page-range>239-268</page-range>
          <volume>47</volume>
          <year>2013</year>
          <person-group person-group-type="author">
            <name>
              <surname>Reyes</surname>
              <given-names>Antonio</given-names>
            </name>
            <name>
              <surname>Rosso</surname>
              <given-names>Paolo</given-names>
            </name>
            <name>
              <surname>Veale</surname>
              <given-names>Tony</given-names>
            </name>
          </person-group>
          <source>Language resources and evaluation</source>
          <article-title>A multidimensional approach for detecting irony in twitter</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-37c8fba2ea6695449bada1427f924c14">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 2006 conference on empirical methods in natural language processing</conf-name>
          <conf-loc>Association for Computational Linguistics</conf-loc>
          <year>2006</year>
          <person-group person-group-type="author">
            <name>
              <surname>Riloff</surname>
              <given-names>Ellen</given-names>
            </name>
            <name>
              <surname>Patwardhan</surname>
              <given-names>Siddharth</given-names>
            </name>
            <name>
              <surname>Wiebe</surname>
              <given-names>Janyce</given-names>
            </name>
          </person-group>
          <article-title>Feature subsumption for opinion analysis</article-title>
        </element-citation>
      </ref>
      <ref id="book-ref-0db82c6b6820d88d361783db3e1565ae">
        <element-citation publication-type="book">
          <publisher-loc>Cambridge</publisher-loc>
          <publisher-name>Cambridge University Press</publisher-name>
          <year>1969</year>
          <person-group person-group-type="author">
            <name>
              <surname>Searle</surname>
              <given-names>John</given-names>
            </name>
          </person-group>
          <source>
            <bold id="bold-ef858b52621ff0486f454e1447108e87">Speech acts: an essay in the philosophy of language</bold>
          </source>
        </element-citation>
      </ref>
      <ref id="journal-article-ref-81bf71f7ae28ef5a2ee8705b1b260daf">
        <element-citation publication-type="journal">
          <fpage>63</fpage>
          <lpage>72</lpage>
          <page-range>63-72</page-range>
          <volume>3</volume>
          <year>2012</year>
          <person-group person-group-type="author">
            <name>
              <surname>Singh</surname>
              <given-names>Raj Kishnor</given-names>
            </name>
          </person-group>
          <source>International Journal of English and Literature</source>
          <article-title>Humour, irony and satire in literature</article-title>
        </element-citation>
      </ref>
      <ref id="magazine-article-ref-8054f74dd44e16d98fca44e06618f943">
        <element-citation publication-type="magazine">
          <fpage>143</fpage>
          <lpage>184</lpage>
          <page-range>143-184</page-range>
          <volume>3</volume>
          <year>1981</year>
          <person-group person-group-type="author">
            <name>
              <surname>Sperber</surname>
              <given-names>Dan</given-names>
            </name>
            <name>
              <surname>Wilson</surname>
              <given-names>Deirdre</given-names>
            </name>
          </person-group>
          <source>Philosophy</source>
          <article-title>Irony and the use-mention distinction</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-b8344af60f37bec9f23456c36e72d4f1">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 22nd International Conference on World Wide Web</conf-name>
          <conf-loc>Association for Computing Machinery</conf-loc>
          <fpage>635</fpage>
          <lpage>636</lpage>
          <page-range>635-636</page-range>
          <year>2013</year>
          <person-group person-group-type="author">
            <name>
              <surname>Vanin</surname>
              <given-names>Aline</given-names>
            </name>
            <name>
              <surname>Freitas</surname>
              <given-names>Larissa A.</given-names>
            </name>
            <name>
              <surname>Vieira</surname>
              <given-names>Renata</given-names>
            </name>
            <name>
              <surname>Bochernitsan</surname>
              <given-names>Marco</given-names>
            </name>
          </person-group>
          <article-title>Some Clues on Irony Detection in Tweets</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-bb3c879de7613c43da8bb181e6219699">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the 2010 conference on ECAI 2010: 19th European Conference on Artificial Intelligence</conf-name>
          <conf-loc>Amsterdam, Netherlands</conf-loc>
          <fpage>765</fpage>
          <lpage>770</lpage>
          <page-range>765-770</page-range>
          <person-group person-group-type="author">
            <name>
              <surname>Veale</surname>
              <given-names>Tony</given-names>
            </name>
            <name>
              <surname>Hao</surname>
              <given-names>Yanfen</given-names>
            </name>
          </person-group>
          <article-title>Detecting Ironic Intent in Creative Comparisons</article-title>
        </element-citation>
      </ref>
      <ref id="conference-paper-ref-056cbee1476cc07ee260a7cc5f8a89f5">
        <element-citation publication-type="confproc">
          <conf-name>Proceedings of the Seventeenth National Conference on Artificial Intelligence</conf-name>
          <conf-loc>Austin, Texas, USA</conf-loc>
          <year>2000</year>
          <person-group person-group-type="author">
            <name>
              <surname>Wiebe</surname>
              <given-names>Janyce</given-names>
            </name>
          </person-group>
          <article-title>Learning Subjective Adjectives from Corpora</article-title>
        </element-citation>
      </ref>
    </ref-list>
  </back></article>
