<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Archiving and Interchange DTD v1.0 20120330//EN" "JATS-archivearticle1.dtd">
<article xmlns:xlink="http://www.w3.org/1999/xlink">
  <front>
    <journal-meta />
    <article-meta>
      <title-group>
        <article-title>Extrac¸ a˜o e Validac¸ a˜o de Ontologias a partir de Recursos Digitais</article-title>
      </title-group>
      <contrib-group>
        <contrib contrib-type="author">
          <string-name>Kassius Prestes</string-name>
        </contrib>
        <contrib contrib-type="author">
          <string-name>Rodrigo Wilkens</string-name>
        </contrib>
        <contrib contrib-type="author">
          <string-name>Leonardo Zillio</string-name>
        </contrib>
        <contrib contrib-type="author">
          <string-name>Aline Villavicencio</string-name>
        </contrib>
      </contrib-group>
      <fpage>183</fpage>
      <lpage>188</lpage>
      <abstract>
        <p>This paper aims at presenting a methodology for semi-automatic validation of an wide-coverage ontology based on an existing electronic resource, PAPEL. From the existing relations, we choose those of synonymy and hypernymy to generate the ontology. The resulting output was converted to OWL format e manually validated by a lexicographer. As result, we have a wide-coverage ontological resource that can be used in different subareas of computer science. The resource displays concepts organized according to their hypernymy and validated synonymy relations. Resumo. O objetivo desse trabalho e´ apresentar uma metodologia para validac¸a˜o semiautoma´tica de uma ontologia de ampla cobertura, com base em um recurso eletroˆnico existente, o PAPEL. Das relac¸o˜es dispon´ıveis, foram usadas as de sinon´ımia e de hiperon ´ımia para construc¸ a˜o da ontologia. Os resultados foram convertidos para o formato OWL e manualmente validados por um lexico´grafo. O resultado obtido foi um recurso ontolo´gico de ampla cobertura que pode ser empregado em diversas a´reas da computac¸a˜o. O recurso apresenta termos organizados a partir de suas relac¸o˜es de hiperon´ımia e de sinon ´ımia, sendo estas validadas.</p>
      </abstract>
    </article-meta>
  </front>
  <body>
    <sec id="sec-1">
      <title>-</title>
      <p>necessa´ria uma ontologia de ampla cobertura que possa auxiliar tanto o m o´dulo de
reconhecimento de voz a validar as palavras reconhecidas quanto o m o´dulo de processamento
de texto na identificac¸a˜o de conceitos.</p>
      <p>
        O objetivo deste trabalho e´ apresentar a metodologia de extrac¸a˜o e validac¸a˜o da
ontologia de prop o´sito geral usada no aˆmbito do projeto Comunica. A ontologia foi
extra´ıda de modo semiautom a´tico a partir do PAPEL (Palavras Associadas Porto Editora
Linguateca) [
        <xref ref-type="bibr" rid="ref11">Oliveira et al. 2008</xref>
        ] e convertida para o formato OWL. Os resultados da
conversa˜o foram validados por um lexic o´grafo. O PAPEL e´ um conjunto de relac¸ o˜es
entre palavras extra´ıdas automaticamente das definic¸ o˜es em um tesauro eletr oˆnico. Ele
conte´m 199.672 entradas, distribu´ıdas em 8 tipos de relac¸ o˜es. Dentre essas, foram
selecionadas as relac¸ o˜es de hiperon´ımia 1 e de sinon´ımia 2 como base para a ontologia. Neste
trabalho, sa˜o descritos os processos de conversa˜o dos dois tipos de relac¸ o˜es, com uma
discussa˜o da validac¸a˜o das relac¸ o˜es de sinon´ımia.
      </p>
      <p>Este artigo e´ estruturado da seguinte maneira: na Sec¸a˜o 2, sa˜o discutidos alguns
trabalhos relacionados; a metodologia para extrac¸a˜o e validac¸a˜o e´ descrita nas Sec¸ o˜es 3 e
4; por fim, a Sec¸a˜o 5 apresenta conclus o˜es e trabalhos futuros.</p>
    </sec>
    <sec id="sec-2">
      <title>2. Trabalhos Relacionados</title>
      <p>
        <xref ref-type="bibr" rid="ref2">Buitelaar [Buitelaar et al. 2005</xref>
        ] define o aprendizado de ontologias como a aquisic¸a˜o
de conhecimento a partir de textos. Grande parte desse trabalho utiliza como base
a´reas da computac¸a˜o como processamento de linguagem natural, inteligeˆncia
artificial e aprendizado de ma´quina. Existem diversas abordagens para a extrac¸a˜o
automa´tica de ontologias. Algumas abordagens sa˜o probabil´ısticas, como em [
        <xref ref-type="bibr" rid="ref14">Venant 2008</xref>
        ]
[
        <xref ref-type="bibr" rid="ref3">Chotimongkol and Rudnicky 2002</xref>
        ] [
        <xref ref-type="bibr" rid="ref12">Salton and Buckley 1988</xref>
        ]. Contudo, uma das
abordagens mais exploradas e´ a identificac¸a˜o de relac¸ o˜es a partir de express o˜es textuais, como
mostrado em [
        <xref ref-type="bibr" rid="ref5">Hearst 1992</xref>
        ]. A identificac¸a˜o baseada em express o˜es apresenta um
melhor resultado na extrac¸a˜o de documentos que possuem uma estrutura mais ou menos fixa,
como diciona´rios, por isso, essa abordagem foi utilizada para a criac¸a˜o do PAPEL.
      </p>
      <p>
        Ontologias, especialmente as de ampla cobertura, sa˜o recursos de grande valor
para sistemas que empregam tecnologias de linguagem. Por exemplo, a WordNet
[
        <xref ref-type="bibr" rid="ref9">Miller 1995</xref>
        ] e´ um recurso eletr oˆnico que conte´m relac¸ o˜es semaˆntico-conceptuais e
lexicais entre as palavras. Ela foi originalmente desenvolvida pela Universidade de Princeton
para o ingleˆs, e posteriormente estendida para outras l´ınguas, inclusive para o portugu eˆs
[
        <xref ref-type="bibr" rid="ref8">Marrafa et al. 2005</xref>
        ]. Nela, os termos sa˜o agrupados em synsets, onde todos os sin oˆnimos
de um termo esta˜o no mesmo grupo que ele, contendo uma definic¸a˜o e um conjunto de
relac¸ o˜es lingu´ısticas. A Wordnet e´ utilizada em aplicac¸ o˜es como traduc¸a˜o automa´tica,
sistemas de busca e extrac¸a˜o de informac¸a˜o, entre outros. A WordNet do portugueˆs
(WordNet.PT 3) conte´m cerca de 19.000 termos, distribu´ıdos em v a´rios campos semaˆnticos.
O fragmento dispon´ıvel e´ composto por termos de diversos dom´ınios, como arte, sa u´de,
transportes e vestua´rio.
      </p>
      <p>1hiperon´ımia e´ uma relac¸a˜o entre palavras que da´ ide´ia de um todo, da qual se originam diversas
ramificac¸o˜es, por exemplo, ve´ıculo e´ hiperoˆnimo de carro, barco e avia˜o</p>
      <p>2sinon´ımia e´ uma relac¸a˜o entre palavras da mesma categoria gramatical, com sentido parecido e com
forma diferente, como por exemplo carro e automo´vel</p>
      <p>3Desenvolvida pelo Centro de Lingu´ıstica da Universidade de Lisboa pelo CLG - Grupo de Computac¸ a˜o
do Conhecimento Le´xico-Gramatical.</p>
      <p>
        Outro importante recurso le´xico para o portugueˆs e´ o PAPEL, desenvolvido
com o objetivo de prover uma ontologia geral da linguagem, de grande abrangeˆncia
[
        <xref ref-type="bibr" rid="ref11">Oliveira et al. 2008</xref>
        ]. Esse recurso foi construido atrave´s de extrac¸a˜o semiautoma´tica
baseada em padr o˜es de express o˜es que ocorrem nas definic¸o˜es do Diciona´rio da L´ıngua
Portuguesa [
        <xref ref-type="bibr" rid="ref4">Editora 2005</xref>
        ]. Dessa forma, foram identificadas relac¸o˜es composicionais,
hiera´rquicas e de sinon´ımia. Exemplos dessas relac¸ o˜es seriam:
      </p>
      <p>repartir SINONIMO DE partilhar
vasqueiro PROPRIEDADE DE ALGO QUE CAUSA vasca
vazar ACCAO QUE CAUSA vaza˜o</p>
      <p>cabo PARTE DE vassoura
navio HIPERONIMO DE veleiro</p>
      <p>
        Devido a` sua abrangeˆncia (com 199.672 entradas), foi realizada uma avaliac¸a˜o
por amostragem dos resultados da extrac¸a˜o semiautomatica [
        <xref ref-type="bibr" rid="ref10">Oliveira et al. 2009</xref>
        ], sendo
que 50% das relac¸ o˜es de sinon´ımia apresentam erros em potencial. Por exemplo:
deliberadamente SINONIMO DE peito. Para contornar estes problemas apresentamos uma
metodologia de extrac¸a˜o e validac¸a˜o mais confia´veis (pela validac¸a˜o manual) inseridas no
projeto Comunica[
        <xref ref-type="bibr" rid="ref15">Wilkens et al. 2010</xref>
        ].
      </p>
    </sec>
    <sec id="sec-3">
      <title>3. Metodologia</title>
      <p>Para a construc¸a˜o de uma ontologia de alta cobertura e precisa˜o a partir dos dados
disponibilizados no PAPEL, foi necessa´ria a definic¸a˜o de uma metodologia para conversa˜o e
validac¸a˜o sistema´tica do recurso com a construc¸a˜o de um sistema para identificac¸a˜o
automa´tica de conflitos nas entradas definidas. Neste trabalho, e´ abordada a conversa˜o de
duas relac¸ o˜es para o format OWL: sin oˆnimos e hiper oˆnimos.</p>
    </sec>
    <sec id="sec-4">
      <title>3.1. Relac¸ o˜es de Hiperon´ımia</title>
      <p>O PAPEL conte´m 61.263 entradas com relac¸ o˜es de hiperon´ımia expressas no seguinte
formato: palavra 1 HIPERONIMO DE palavra 2. Para a conversa˜o, foi utilizada a
linguagem de programac¸a˜o Java e o framework Jena. A metodologia de conversa˜o preveˆ
duas etapas: conversa˜o passiva e conversa˜o ativa.</p>
    </sec>
    <sec id="sec-5">
      <title>3.1.1. Convers a˜o Passiva</title>
      <p>A abordagem passiva consiste em armazenar as classes ontol o´gicas apenas quando estas
sa˜o apresentadas pelo PAPEL (as classes va˜o sendo criadas enquanto o arquivo de relac¸ o˜es
e´ lido). Para cada entrada do PAPEL, definida em termos de duas palavras (palavra 1 e
palavra 2):
1. Para cada palavra:
(a) Verificar se a palavra ja´ existe como classe (dadas as va´rias palavras
repetidas no PAPEL),
(b) Se na˜o existe, criar a classe.
2. Adicionar a` ontologia a relac¸a˜o onde a classe palavra 1 e´ superclasse da classe
palavra 2.</p>
      <p>Esse processo e´ repetido para cada uma das relac¸ o˜es de hiperon´ımia existentes.
Devido ao n u´mero de entradas do PAPEL e a`s va´rias comparac¸ o˜es necessa´rias, esta
abordagem se mostrou muito custosa em termos de processamento e alto consumo de
mem o´ria 4.</p>
      <p>4Apenas cerca de 3% das relac¸o˜es em um per´ıodo de aproximadamente 24 horas.</p>
    </sec>
    <sec id="sec-6">
      <title>3.1.2. Conversa˜o Ativa</title>
      <p>Para tornar o processo mais eficiente em ontologias de alta cobertura, a segunda
abordagem proposta cria inicialmente uma nova ontologia esquema´tica, e as informac¸o˜es ja´
validadas somente sa˜o inseridas na nova ontologia ao final de cada passo de validac¸a˜o.
Esse processo e´ composto por duas etapas. Primeiro, define-se uma ontologia ba´sica com
todas as classes necessa´rias, mas sem as relac¸o˜es entre elas. Para tanto, extraem-se do
PAPEL todas as palavras sem repetic¸a˜o e cria-se uma classe para cada uma delas. A
partir dessa ontologia ba´sica com as classes necessa´rias, adicionam-se as relac¸o˜es
entre as classes. Dada uma definic¸a˜o no PAPEL no formato palavra 1 HIPERONIMO DE
palavra 2, procura-se na ontologia ba´sica as classes relativas a palavra 1 e palavra 2 e
adiciona-se a relac¸a˜o a` ontologia. Como resultado, obtem-se a conversa˜o da estrutura de
hiperonimos do PAPEL para o formato OWL.</p>
    </sec>
    <sec id="sec-7">
      <title>3.2. Relac¸o˜es de Sinon´ımia</title>
      <p>A base de sinoˆnimos do PAPEL possui relac¸o˜es expressas da seguinte maneira: palavra 1
SINONIMO &lt;classe&gt; DE palavra 2, onde em &lt;classe&gt; ocorrem as seguintes tags, que
indicam classes gramaticais: N substantivo, V verbo, ADJ adjetivo e ADV adve´rbio.
Dado o contexto deste trabalho, foram extra´ıdas as relac¸ o˜es de sinon´ımia entre
substantivos 5. A extrac¸a˜o de sinoˆnimos foi realizada atrave´s das seguintes etapas:
1. Criar uma lista (inicialmente vazia) de conjuntos (inicialmente vazios). Cada
conjunto armazenara´ palavras que sa˜o sinoˆnimas entre si.
2. Para cada uma das entradas, identificar as duas palavras sinoˆnimas presentes.
3. Verificar se uma dessas palavras ja´ se encontra em algum conjunto de sinoˆnimos
existente.</p>
      <p>(a) Se sim, insere-se a outra palavra nesse conjunto.
(b) Se as palavras na˜o estavam em nenhum conjunto existente, cria-se um
novo conjunto contendo ambas.</p>
      <p>Dada a ampla abrangeˆncia do PAPEL, a polissemia das palavras e a transitividade
da relac¸a˜o de sinon´ımia (se A e´ sinoˆnimo de B e B e´ sinoˆnimo de C, enta˜o A e´ sinoˆnimo
de C), ao final do processo, quase todas as palavras foram reconhecidas como sinoˆnimas
entre si. Para criar uma ontologia de alta precisa˜o e cobertura, a aplicac¸a˜o da
metodologia foi semiautoma´tica, e esses casos foram supervisionados por um lexico´grafo, com a
seguinte modificac¸a˜o no passo 3:
3. Verificar se uma dessas palavras ja´ se encontra em algum conjunto de sinoˆnimos
existente.</p>
      <p>(a) Se sim, realizar a verificac¸a˜o manual da ambiguidade, analisando os dois
conjuntos em que as palavras seriam inseridas. Caso necessa´rio, editar os
conjuntos manualmente, separando as palavras de modo adequado.
(b) Se nenhuma estava em um conjunto existente, criar um novo conjunto com
ambas.</p>
      <p>Ao final do processo obtem-se um amplo conjunto de grupos de sinoˆnimos, que
pode ser integrado a` estrutura da ontologia gerada no passo anterior.</p>
      <p>5Pore´m, essa abordagem pode ser, em princ´ıpio, aplicada diretamente aos outros tipos de relac¸ a˜o.</p>
    </sec>
    <sec id="sec-8">
      <title>4. Validac¸ a˜o das Relac¸ o˜es de Sinon´ımia</title>
      <p>As relac¸ o˜es de sinon´ımia da ontologia resultante foram manualmente validadas. Essa
validac¸a˜o ocorreu com consulta a diciona´rios de l´ıngua portuguesa e a contextos reais
de ocorreˆncia dos pares de sin oˆnimos analisados 6. Caso as definic¸o˜es dos diciona´rios
na˜o aclarassem o problema, utilizou-se o buscador on-line do Yahoo! para se observarem
tambe´m os contextos de ocorreˆncia.</p>
      <p>Dada a magnitude do recurso gerado, para palavras polisseˆmicas, a validac¸a˜o foi
realizada com base no significado mais frequente apropriado para o grupo de sinoˆnimos,
sendo que cada substantivo poderia estar presente em apenas um grupo de sin oˆnimos. Por
exemplo: dada a avaliac¸a˜o da relac¸a˜o de sinonimia proposta entre abatimento, diminuic¸a˜o
e desaˆnimo, apesar de desaˆnimo e diminuic¸a˜o na˜o parecerem sin oˆnimas sem um contexto
muito espec´ıfico, a palavra abatimento pode ser considerada sin oˆnima de ambas, entre
outras. A consulta a diciona´rios retornou informac¸ o˜es sobre abatimento de animais,
abatimento de prec¸os (diminuic¸ a˜o) e abatimento emocional (desaˆnimo). No buscador do
Yahoo!, entre as primeiras 20 ocorreˆncias de “abatimento”, havia 12 ocorr eˆncias
“abatimento de prec¸os”, 4 de “abatimento emocional” e 1 de “abatimento de animais”; as outras
eram irrelevantes (definic¸o˜es de diciona´rios on-line etc.). Como resultado, abatimento foi
inclu´ıda com diminuic¸ a˜o e exclu´ıda do conjunto de des aˆnimo.</p>
      <p>A adoc¸a˜o da metodologia proposta permite reduzir a subjetividade envolvida em
todo o processo de decidir que palavras sa˜o sin oˆnimas entre si e quais na˜o devem ser 7.
Isso se torna importante para a replicabilidade do processo de validac¸a˜o, tendo em vista a
natureza inerentemente subjetiva e depedente do vocabula´rio do avaliador da decisa˜o de
quais palavras possuem uma semelhanc¸a de significado.</p>
      <p>Ao final desse processo, a ontologia resultante con te´m 46.904 entradas, com
40.614 relac¸ o˜es de hiperon´ımia e 20.096 de sinon ´ımia. O recurso apresenta alta
abrangeˆncia e pode ser utilizado em uma grande variedade de sistemas de tecnologia
de linguagem.</p>
    </sec>
    <sec id="sec-9">
      <title>5. Conclus o˜es e Trabalhos Futuros</title>
      <p>
        Este artigo prop oˆs uma metodologia para validac¸a˜o de uma ontologia com relac¸ o˜es de
hiperon´ımia e sinon ´ımia a partir de um recurso lexical eletr oˆnico. Foi apresentada em
detalhes a avaliac¸a˜o de sinon´ımia realizada manualmente e com decis o˜es auxiliadas por
outros recursos. Apesar da magnitude do recurso original e das relac¸ o˜es a serem
adicionadas, essa metodologia possibilitou uma validac¸a˜o mais ampla do recurso, em vez
da avaliac¸a˜o por amostragem proposta em [
        <xref ref-type="bibr" rid="ref10">Oliveira et al. 2009</xref>
        ]. Ap o´s a etapa
apresentada neste trabalho, resta ainda a validac¸a˜o da estrutura de hiper oˆnimos. Contudo, a parte
ja´ validada do recurso permite a sua utilizac¸a˜o em diversas a´reas da computac¸a˜o, tais
como traduc¸a˜o automa´tica, sistemas de busca e extrac¸a˜o de informac¸a˜o, sistemas
conversacionais, sistemas de infereˆncia e extrac¸a˜o automa´tica de ontologias.
      </p>
    </sec>
    <sec id="sec-10">
      <title>Agradecimentos</title>
      <p>Esta pesquisa tem apoio dos projetos COMUNICA (FINEP/SEBRAE 1194/07),
CAPESCOFECUB (707/11) e CNPq (479824/2009-6 e 309569/2009-5).</p>
      <p>6Os diciona´rios utilizados foram o Houaiss Eletroˆnico (dispon´ıvel em CD), o Michaelis On-line e o
Diciona´rio da L´ıngua Portuguesa da Porto Editora.</p>
      <p>7Tal procedimento pode ser suficiente para os casos que envolvem mais de um significado frequente,
mas, dada a abrangeˆncia do recurso, tal avaliac¸a˜o manual se torna impratica´vel.</p>
    </sec>
  </body>
  <back>
    <ref-list>
      <ref id="ref1">
        <mixed-citation>
          <string-name>
            <surname>Amaral</surname>
            ,
            <given-names>C.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Figueira</surname>
            ,
            <given-names>H.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Martins</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Mendes</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Mendes</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Pinto</surname>
            ,
            <given-names>C.</given-names>
          </string-name>
          (
          <year>2006</year>
          ).
          <article-title>Priberams question answering system for portuguese</article-title>
          .
          <source>CLEF.</source>
        </mixed-citation>
      </ref>
      <ref id="ref2">
        <mixed-citation>
          <string-name>
            <surname>Buitelaar</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Cimiano</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Magnini</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          (
          <year>2005</year>
          ).
          <article-title>Ontology learning from text: An overview</article-title>
          .
          <article-title>Ontology learning from text: Methods, evaluation and applications</article-title>
          ,
          <volume>123</volume>
          :
          <fpage>3</fpage>
          -
          <lpage>12</lpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref3">
        <mixed-citation>
          <string-name>
            <surname>Chotimongkol</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          and
          <string-name>
            <surname>Rudnicky</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          (
          <year>2002</year>
          ).
          <article-title>Automatic concept identification in goaloriented conversations</article-title>
          .
          <source>In Seventh International Conference on Spoken Language Processing.</source>
        </mixed-citation>
      </ref>
      <ref id="ref4">
        <mixed-citation>
          <string-name>
            <surname>Editora</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          (
          <year>2005</year>
          ).
          <article-title>Diciona´rio PRO da L´ıngua Portuguesa</article-title>
          . Porto.
        </mixed-citation>
      </ref>
      <ref id="ref5">
        <mixed-citation>
          <string-name>
            <surname>Hearst</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          (
          <year>1992</year>
          ).
          <article-title>Automatic acquisition of hyponyms from large text corpora</article-title>
          .
          <source>In Proceedings of the 14th conference on Computational linguistics-Volume</source>
          <volume>2</volume>
          , pages
          <fpage>539</fpage>
          -
          <lpage>545</lpage>
          . Association for Computational Linguistics.
        </mixed-citation>
      </ref>
      <ref id="ref6">
        <mixed-citation>
          <string-name>
            <surname>Kaisser</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          (
          <year>2005</year>
          ). Qualim at trec 2005:
          <article-title>Web-question answering with framenet</article-title>
          .
          <source>TREC.</source>
        </mixed-citation>
      </ref>
      <ref id="ref7">
        <mixed-citation>
          <string-name>
            <surname>Lin</surname>
            ,
            <given-names>J.</given-names>
          </string-name>
          (
          <year>2005</year>
          ).
          <article-title>Evaluation of resources for question answering evaluation</article-title>
          .
          <source>Technical report</source>
          , University of Maryland, College Park.
        </mixed-citation>
      </ref>
      <ref id="ref8">
        <mixed-citation>
          <string-name>
            <surname>Marrafa</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Amaro</surname>
            ,
            <given-names>R.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Chaves</surname>
            ,
            <given-names>R. P.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Lourosa</surname>
            ,
            <given-names>S.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Martins</surname>
            ,
            <given-names>C.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Mendes</surname>
            ,
            <given-names>S.</given-names>
          </string-name>
          (
          <year>2005</year>
          ).
          <article-title>Wordnet.pt uma rede le´xico-conceptual do portugueˆs on-line. XXI Encontro da Associac¸a˜o Portuguesa de Lingu´ıstica</article-title>
          , pages
          <fpage>28</fpage>
          -
          <lpage>30</lpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref9">
        <mixed-citation>
          <string-name>
            <surname>Miller</surname>
            ,
            <given-names>G.</given-names>
          </string-name>
          (
          <year>1995</year>
          ).
          <article-title>Wordnet: a lexical database for english</article-title>
          .
          <source>Communications of the ACM</source>
          ,
          <volume>38</volume>
          (
          <issue>11</issue>
          ):
          <fpage>39</fpage>
          -
          <lpage>41</lpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref10">
        <mixed-citation>
          <string-name>
            <surname>Oliveira</surname>
            ,
            <given-names>H. G.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Santos</surname>
            ,
            <given-names>D.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Gomes</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          (
          <year>2009</year>
          ).
          <article-title>Extracc¸a˜o de relac¸o˜es semaˆnticas entre palavras a partir de um diciona´rio: o papel e sua avaliac¸a˜o</article-title>
          .
          <source>STIL</source>
          <year>2009</year>
          , Linguama´tica, pages
          <fpage>77</fpage>
          -
          <lpage>93</lpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref11">
        <mixed-citation>
          <string-name>
            <surname>Oliveira</surname>
            ,
            <given-names>H. G.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Santos</surname>
            ,
            <given-names>D.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Gomes</surname>
            ,
            <given-names>P.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Seco</surname>
            ,
            <given-names>N.</given-names>
          </string-name>
          (
          <year>2008</year>
          ).
          <article-title>Papel: A dictionary-based lexical ontology for portuguese</article-title>
          . In Teixeira, A.,
          <string-name>
            <surname>de Lima</surname>
          </string-name>
          , V. L. S.,
          <string-name>
            <surname>de Oliveira</surname>
            ,
            <given-names>L. C.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Quaresma</surname>
          </string-name>
          , P., editors,
          <source>Proceedings of Computational Processing of the Portuguese Language (PROPOR)</source>
          , volume
          <volume>5190</volume>
          <source>of LNAI</source>
          , pages
          <fpage>31</fpage>
          -
          <lpage>40</lpage>
          . Springer.
        </mixed-citation>
      </ref>
      <ref id="ref12">
        <mixed-citation>
          <string-name>
            <surname>Salton</surname>
            ,
            <given-names>G.</given-names>
          </string-name>
          and
          <string-name>
            <surname>Buckley</surname>
            ,
            <given-names>C.</given-names>
          </string-name>
          (
          <year>1988</year>
          ).
          <article-title>Term-weighting approaches in automatic text retrieval* 1</article-title>
          .
          <string-name>
            <surname>Information</surname>
          </string-name>
          processing &amp; management,
          <volume>24</volume>
          (
          <issue>5</issue>
          ):
          <fpage>513</fpage>
          -
          <lpage>523</lpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref13">
        <mixed-citation>
          <string-name>
            <surname>Sarmento</surname>
            ,
            <given-names>L.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Teixeira</surname>
            ,
            <given-names>J. F.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Oliveira</surname>
            ,
            <given-names>E.</given-names>
          </string-name>
          (
          <year>2008</year>
          ).
          <article-title>Experiments with query expansion in the raposa (fox) question answering system. The Cross-Language Evaluation Forum (CLEF).</article-title>
        </mixed-citation>
      </ref>
      <ref id="ref14">
        <mixed-citation>
          <string-name>
            <surname>Venant</surname>
            ,
            <given-names>F.</given-names>
          </string-name>
          (
          <year>2008</year>
          ).
          <article-title>Semantic visualization and meaning computation</article-title>
          .
          <source>In 22nd International Conference on on Computational Linguistics: Demonstration Papers</source>
          , pages
          <fpage>185</fpage>
          -
          <lpage>188</lpage>
          . Association for Computational Linguistics.
        </mixed-citation>
      </ref>
      <ref id="ref15">
        <mixed-citation>
          <string-name>
            <surname>Wilkens</surname>
            ,
            <given-names>R.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Villavicencio</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Muller</surname>
            ,
            <given-names>D.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Wives</surname>
            ,
            <given-names>L.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>da Silva</surname>
            ,
            <given-names>F.</given-names>
          </string-name>
          , and
          <string-name>
            <surname>Loh</surname>
            ,
            <given-names>S.</given-names>
          </string-name>
          (
          <year>2010</year>
          ).
          <article-title>Comunica - a question answering system for brazilian portuguese</article-title>
          .
          <source>Coling</source>
          <year>2010</year>
          .
        </mixed-citation>
      </ref>
      <ref id="ref16">
        <mixed-citation>
          <string-name>
            <surname>Zheng</surname>
            ,
            <given-names>Z.</given-names>
          </string-name>
          (
          <year>2002</year>
          ).
          <article-title>Answerbus question answering system</article-title>
          .
          <source>Proceeding of HLT Human Language Technology Conference (HLT</source>
          <year>2002</year>
          ).
        </mixed-citation>
      </ref>
    </ref-list>
  </back>
</article>