<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Archiving and Interchange DTD v1.0 20120330//EN" "JATS-archivearticle1.dtd">
<article xmlns:xlink="http://www.w3.org/1999/xlink">
  <front>
    <journal-meta />
    <article-meta>
      <title-group>
        <article-title>Modelo automatico para la prevencion del suicidio mediante la deteccion precoz de mensajes suicidas en redes sociales</article-title>
      </title-group>
      <contrib-group>
        <contrib contrib-type="author">
          <string-name>Saray Zafra Dpt. Leng. y Sist. Inf.</string-name>
          <email>saray.zafra@ua.es</email>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <aff id="aff0">
          <label>0</label>
          <institution>Univ. de Alicante Apdo. de correos</institution>
          ,
          <addr-line>99 E-03080 Alicante</addr-line>
        </aff>
      </contrib-group>
      <abstract>
        <p>Unfortunately, the number of suicides in Spain is growing more and more. Constantly, news are published about young and not-so-young people who have attempted suicide but, previously, they have shown strange behaviours in their social networks pro les. With the aim of preventing, it is important to be capable of detecting messages by means of using Machine Learning techniques due to its utility observed in other researching areas. However, the previous task requires a balanced corpus with a lot of samples in order to learn by examples. That's why the compilation process should be spread out to all of social networks based on Surface Web and Deep Web.</p>
      </abstract>
    </article-meta>
  </front>
  <body>
    <sec id="sec-1">
      <title>-</title>
      <p>
        Segun los datos ofrecidos por la Organizacion
Mundial de la Salud en su ultima nota
descriptiva
        <xref ref-type="bibr" rid="ref18">(OMS, 2017)</xref>
        , el suicidio sigue siendo
la segunda causa de defuncion entre los
jovenes de 15 a 29 an~os. Ademas, a nivel mundial,
el suicidio representa el 50 % de las muertes
violentas en los hombres y el 71 % en las
mujeres
        <xref ref-type="bibr" rid="ref17">(Navarro-Gomez, 2017)</xref>
        . En el plano
nacional, el suicidio representa la primera
causa de muerte por causas externas, con mas
de 2.500 muertes en hombres frente a las casi
1.000 muertes en mujeres
        <xref ref-type="bibr" rid="ref11">(Instituto Nacional
de Estad stica, 2017)</xref>
        .
      </p>
      <p>
        El pensamiento de quitarse la vida
requiere una previa re exion por parte del sujeto
        <xref ref-type="bibr" rid="ref8">(Dunlop, More, y Romer, 2011)</xref>
        y puede
obedecer a un sinf n de causas
        <xref ref-type="bibr" rid="ref3 ref5">(Aranguren, 2009;
Brea, 2013)</xref>
        cada cual mas compleja y
dependiente de una amplia gama de factores de
proteccion y de riesgo que a su vez tienen su
origen tanto en factores internos como externos.
Es por ello que las estrategias destinadas a su
prevencion deberian ser lo mas variadas
posibles
        <xref ref-type="bibr" rid="ref13">(Mansilla, 2010)</xref>
        y centradas en aquellos
ambitos en los que mas presentes esten dichas
manifestaciones, como por ejemplo, las Redes
Sociales.
      </p>
      <p>
        En una era marcada por los nativos
digitales
        <xref ref-type="bibr" rid="ref21">(Prensky, 2010)</xref>
        , las redes sociales se
han convertido en un modo de comunicacion
habitual entre los jovenes de 14 y 24 an~os
en el 91,3 % de los casos
        <xref ref-type="bibr" rid="ref10">(Instituto Nacional
de Estadistica, 2014)</xref>
        . En la actualidad,
Internet es una de las herramientas mas
empeladas para realizar gestiones habituales y
consultar dudas de todo tipo, incluidas las
relacionadas con el suicidio
        <xref ref-type="bibr" rid="ref1 ref14 ref14 ref24 ref4 ref4">(Alao, Yolles, y
Armenta, 1999; Trujano Ruiz, Dorantes
Segura, y Tovilla Quesada, 2009; Moreno Gea
y Blanco Sanchez, 2012; Arroyo Fernandez y
Bertomeu Ruiz, 2012)</xref>
        .
      </p>
      <p>En la Deep Web o aquel entorno con
motores de busqueda distintos de los
convencionales cuya IP es imposible de rastrear, muchos
usuarios han encontrado un entorno ideal
para la libre expresion de ideas relacionadas con
la tematica del suicidio.</p>
      <p>Establecido el trinomio Redes
socialesJovenes-Suicidio, existe la necesidad de
desarrollar una herramienta capaz de detectar el
nivel de alerta de un mensaje suicida
compilado desde las redes sociales (tanto de la
Deep Web como de la Surface Web) con el
n de que el mismo sea derivado a los
servicios correspondientes y as , poder prevenir el
suicidio.
2</p>
    </sec>
    <sec id="sec-2">
      <title>Antecedentes y trabajos relacionados</title>
      <p>
        El suicidio es un fenomeno complejo.
Ademas, todav a representa un tabu en la
epoca en la que vivimos (mencion aparte
requiere la ausencia de datos \contrastados"
por parte del INE 1). Las pocas
aproximaciones teoricas existentes
        <xref ref-type="bibr" rid="ref12 ref15">(Morton et al., 1995;
Leenaars, 2010)</xref>
        aparte de las innumerables
clasi caciones basadas en la primigenia
categorizacion realizada por Durkheim
        <xref ref-type="bibr" rid="ref9">(Durkheim, 1897)</xref>
        , tambien di culta su estudio.
      </p>
      <p>
        No obstante, en el campo de las TLH y
mano a mano con la disciplina medica, s se
han realizado varios corpus relacionados con
la tematica. Estos se encuentran en ingles y
centran su ambito de estudio en ambientes
controlados. Nosotros, por el contrario,
queremos que una maquina aprenda a detectar el
\lenguaje suicida" sin que sepa si dicho
texto pertenece o no a un suicida previamente
identi cado. Grosso modo, los corpus
relacionados son los siguientes:
1. The Pak's and Paroubek's Twitter
Cor1https://elpais.com/2017/06/12/ciencia/
1497291180_123865.html
pus
        <xref ref-type="bibr" rid="ref13 ref19 ref23 ref6">(Pak y Paroubek, 2010)</xref>
        .
      </p>
      <p>
        Compila posts de Twitter y los clasi ca
en funcion de si presentan (i)
Emociones positivas (e.g. Felicidad, diversion,
alegr a, plenitud, etc.), (ii) Emociones
Negativas (e.g. Tristeza, enfado,
decepcion, etc.) o son (iii) Textos Objetivos
(e.g. Hechos facticos o emociones
confusas que los investigadores no pod an
clasi car en las categor as anteriores).
2. The Cincinnati Children's Hospital
Medical Center Corpus
        <xref ref-type="bibr" rid="ref14 ref20 ref4">(Pestian,
Matykiewicz, y Linn-Gust, 2012)</xref>
        .
      </p>
      <p>
        Digitaliza y compila notas de suicido
real recogidas entre los an~os 1950 y 2012
por dos especialistas en el ambito de la
prevencion del suicidio: Edwin
Shneidman (considerado el padre de la
Suicidiolog a Moderna
        <xref ref-type="bibr" rid="ref12 ref13 ref19 ref23 ref6">(Chavez-Hernandez y
Leenaars, 2010)</xref>
        ) y John Perstian.
3. The Genuine Suicide Notes Corpus
        <xref ref-type="bibr" rid="ref23">(Schoene y Dethlefs, 2016)</xref>
        .
      </p>
      <p>
        La compilacion de textos procede de
art culos de revista, corpus existentes y
otros recursos academicos
        <xref ref-type="bibr" rid="ref22">(Scheidman y
Farberow, 1957)</xref>
        , clasi cando cada
muestra en dos categor as: (i) Caracter sticas
Sentimentales (e.g. Miedo, culpa,
esperanza, culpa, informacion, orgullo, amor,
etc.) y (ii) Caracter sticas Lingu sticas
(e.g. Items tales como la longitud de la
nota, el tiempo verbal de las mismas,
etc.).
4. The Corpus of Palestian Suicide
Bombers' Farewell Letters
        <xref ref-type="bibr" rid="ref7">(Cohen, 2016)</xref>
        .
Recoge la compilacion de notas de
suicidio real de hombres bomba
palestinos desde el 2000 hasta el 2006 y
analiza: (i) La Tematica mas frecuente en
las notas suicidas (e.g. Empleo de
mecanismos cognitivos, sociedad, afecto,
religion, etc.), (ii) Las palabras mas
frecuentes. Ademas realiza dos analisis: (i)
Analisis computerizado de textos de los
temas mas frecuentes (e.g. 27 palabras
relacionadas con \MyMother", 21 con
\MyFather", etc.) y (ii) Analisis de
concordancia.
5. The Mowery's et al. Twitter Corpus
        <xref ref-type="bibr" rid="ref16">(Mowery et al., 2016)</xref>
        .
      </p>
      <p>
        Los textos aqu compilados proceden de
notas suicidas escritas en Twitter y el
esquema de anotacion seguido se basa en
los criterios de depresion establecidos en
el DSM-V
        <xref ref-type="bibr" rid="ref2">(American Psychiatric
Association, 2013)</xref>
        .
      </p>
      <p>En los ejemplos mostrados previamente,
podemos observar tres factores comunes que
marcan la diferencia entre dichos corpus y
el que queremos desarrollar en este
proyecto de investigacion: (i) Ambiente controlado,
(ii) Conocimiento del historial cl nico de
muchos de los sujetos que componen la muestra
y (iii) Compilacion de notas de suicidio
conrmadas.</p>
      <p>Nuestro objetivo en este plan de
investigacion es claro: Conseguir que una
maquina aprenda acerca de un modo particular de
expresion del lenguaje suicida en un entorno
concreto (como son las redes sociales) y que,
sin la previa elaboracion del per l del usuario
del que procede el mensaje o los mensajes, sea
posible establecer un nivel de alerta su
ciente como para derivar a los servicios que sean
necesarios. Somos conscientes de que
supone una tarea complicada, pero ser a un gran
avance en lo que a la prevencion del suicidio
se re ere.
3</p>
    </sec>
    <sec id="sec-3">
      <title>Hipotesis y objetivos de investigacion</title>
      <p>Las hipotesis que gu an el proceso de
investigacion son las siguientes:
1. Los textos extra dos de redes sociales de
la Deep Web son diferentes a los
obtenidos desde la Surface Web.
2. El anonimato que ofrece la Deep Web
diculta las labores de prevencion y/o
actuacion en el caso concreto.
3. Un corpus de calidad debidamente
anotado sobre mensajes suicidas puede
mejorar los sistemas automaticos de
deteccion de este tipo de mensajes.</p>
      <p>
        Entre los objetivos planteados en la
investigacion encontramos los siguientes:
1. Desarrollar un crawler capaz de extraer
informacion de Deep Web y Surface Web
de manera automatica.
2. Crear un entorno web donde sea posible
realizar todas las tareas de anotacion y
gestion del proceso de anotacion en
general.
3. Generar conciencia social acerca de que
el suicidio es un problema real de salud
publica
        <xref ref-type="bibr" rid="ref18">(OMS, 2017)</xref>
        y que el desarrollo
de herramientas preventivas es la clave
para reducir las cifras (800.000 personas
se quitan la vida cada an~o).
4. Construir un corpus amplio y de calidad
valorado mediante medidas objetivas
como el acuerdo mutuo para que pueda ser
empleado en futuros sistemas de
aprendizaje automatico.
5. Garantizar el libre acceso al corpus, que
ira actualizandose periodicamente.
6. Asegurar el anonimato de los datos
presentados en el corpus.
7. Evaluar la utilidad de este corpus
probandolo en sistemas de aprendizaje
automatico.
4
      </p>
    </sec>
    <sec id="sec-4">
      <title>Metodolog a y experimentos propuestos</title>
      <p>El objetivo de la elaboracion de un corpus
de mensajes suicidas basado en redes
sociales no es otro que poder crear una
herramienta preventiva. Dentro de las Tecnolog as del
Lenguaje Humano (TLH ) nosotros hemos
seleccionado el Aprendizaje Automatico (o
Machine Learning</p>
      <p>Aportando a una maquina el mayor
numero de ejemplos posible y tras la compilacion
de mensajes suicidas extra dos de redes
sociales, es posible que la misma aprenda sobre
un particular modo de expresion de ideas
suicidas 2. Para ello, se requiere la elaboracion
de los siguientes pasos:</p>
      <sec id="sec-4-1">
        <title>1. Proceso de compilacion</title>
        <p>Desarrollo de un crawler capaz de
realizar una busqueda automatica de textos
en redes sociales (tanto de la Deep Web
como Surface Web) de per les publicos
y que no requieran el login.</p>
      </sec>
      <sec id="sec-4-2">
        <title>2. Gu a de anotacion</title>
        <p>Indicaciones sobre el per odo de
entrenamiento y su duracion, que anotar, como
anotarlo, as como una descripcion
detallada de las propiedades requeridas para
cada texto ademas del programa con el
que se realizara dicha anotacion (para lo
2https//qz.com/1001968/arti
cial-intelligencecan-now-predict-suicide-with-remarkable-accuracy/
que se enviara a los anotadores el
correspondiente plugin y documentos
informativos). En el caso de que se consiga crear
un entorno web para dicho proceso,
tambien se elaborara una gu a de anotacion
en la que se indique cuales son los
pasos a seguir para realizar el proceso de
anotacion correctamente.</p>
      </sec>
      <sec id="sec-4-3">
        <title>3. Fase de Anotacion</title>
        <p>A medida que el proyecto se inicie,
cada anotador contara con muestras
procedentes del crawler desarrollado que ira
anotando segun las categor as especi
cadas en la gu a de anotacion.
4. Gold-Standard o corpus consensuado
Se realizaran reuniones periodicas para
analizar desacuerdos entre los
anotadores y as poder establecer que categor as
son las mas idoneas para cada propiedad.
Este proceso sera documentado con el n
de observar cuales han sido las di
cultades a lo largo del proceso de anotacion
y, de ser necesario, proceder a realizar
cambios en la gu a de anotacion.
5. Uso del corpus en sistemas de
aprendizaje automatico.</p>
        <p>Para demostrar que el corpus puede ser
una herramienta valiosa en la deteccion
del fenomeno suicida, se aplicara el
corpus en varias etapas de construccion a
sistemas de aprendizaje automatico
para poder estimar si el corpus puede ser
parte de una solucion global a este
problema.
5</p>
      </sec>
    </sec>
    <sec id="sec-5">
      <title>Cuestiones de interes a tratar durante el simposio</title>
      <p>Por la envergadura que el fenomeno del
suicidio representa, nos gustar a plantear las
siguientes cuestiones al auditorio:
- &gt;Es posible la prevencion del
suicidio mediante la aplicacion del Machine
Learning a los textos compilados de las
redes sociales de ambos entornos?
- &gt;Existe realmente un particular modo de
expresion de las ideas relacionadas con el
suicidio en las Redes Sociales?
- &gt;Facilita el anonimato que se genera en
la Deep Web la mayor difusion de
contenidos relacionados con las ideaciones
suicidas?
- &gt;Di culta la Deep Web la tarea de
derivar un mensaje a los servicios de
salud correspondientes en funcion del nivel
de alerta previamente establecido para el
mismo?.</p>
    </sec>
    <sec id="sec-6">
      <title>Agradecimientos</title>
      <p>Especial agradecimiento a las Ayudas
Fundacion BBVA a equipos de
investigacion cient ca por la nanciacion del
proyecto Analisis de Sentimientos Aplicado a la
Prevencion del Suicidio en las Redes Sociales
(ASAP ) y a Beatriz Botella Gil, Isabel
Moreno Agullo y Mar a de los Angeles Herrero,
compan~eras del Departamento de Lenguajes
y Sistemas Informaticos de la Universidad de
Alicante (DLSI ).</p>
    </sec>
    <sec id="sec-7">
      <title>Bibliograf a</title>
    </sec>
  </body>
  <back>
    <ref-list>
      <ref id="ref1">
        <mixed-citation>
          <string-name>
            <surname>Alao</surname>
            ,
            <given-names>A. O.</given-names>
          </string-name>
          ,
          <string-name>
            <given-names>J. C.</given-names>
            <surname>Yolles</surname>
          </string-name>
          , y
          <string-name>
            <given-names>W.</given-names>
            <surname>Armenta</surname>
          </string-name>
          .
          <year>1999</year>
          .
          <article-title>Cybersuicide: The Internet and suicide</article-title>
          .
          <source>American Journal of Psychiatry</source>
          ,
          <volume>156</volume>
          (
          <issue>11</issue>
          ):
          <year>1836</year>
          {
          <year>1837</year>
          .
        </mixed-citation>
      </ref>
      <ref id="ref2">
        <mixed-citation>
          <string-name>
            <given-names>American</given-names>
            <surname>Psychiatric Association</surname>
          </string-name>
          .
          <year>2013</year>
          .
          <article-title>Diagnostic and Statistical Manual of Mental Disorders, Fifth Edition</article-title>
          . American Psychiatric Association, may.
        </mixed-citation>
      </ref>
      <ref id="ref3">
        <mixed-citation>
          <string-name>
            <surname>Aranguren</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          <year>2009</year>
          .
          <article-title>Modelos teoricos de la comprension del suicidio</article-title>
          . Universidad de Buenos Aires.
        </mixed-citation>
      </ref>
      <ref id="ref4">
        <mixed-citation>
          <string-name>
            <given-names>Arroyo</given-names>
            <surname>Fernandez</surname>
          </string-name>
          , A. y
          <string-name>
            <given-names>A. Bertomeu</given-names>
            <surname>Ruiz</surname>
          </string-name>
          .
          <year>2012</year>
          . Metodos suicidas e Internet.
          <volume>38</volume>
          (
          <issue>4</issue>
          ):
          <volume>143</volume>
          {
          <fpage>148</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref5">
        <mixed-citation>
          <string-name>
            <surname>Brea</surname>
            ,
            <given-names>J. M.</given-names>
          </string-name>
          <year>2013</year>
          .
          <article-title>En torno al suicidio</article-title>
          . Cuadernos de atencion primaria, paginas
          <volume>168</volume>
          {
          <fpage>172</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref6">
        <mixed-citation>
          <string-name>
            <surname>Chavez-Hernandez</surname>
            , A. M. y
            <given-names>A. A.</given-names>
          </string-name>
          <string-name>
            <surname>Leenaars</surname>
          </string-name>
          .
          <year>2010</year>
          .
          <article-title>Edwin S Shneidman y la suicidolog a moderna</article-title>
          .
          <source>Salud Mental</source>
          ,
          <volume>33</volume>
          (
          <issue>4</issue>
          ):
          <volume>355</volume>
          {
          <fpage>360</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref7">
        <mixed-citation>
          <string-name>
            <surname>Cohen</surname>
            ,
            <given-names>S. J.</given-names>
          </string-name>
          <year>2016</year>
          .
          <article-title>Mapping the minds of suicide Bombers using linguistic methods: The corpus of Palestinian suicide bombers' farewell letters (CoPSBFL)</article-title>
          .
          <source>Studies in Con ict &amp; Terrorism</source>
          ,
          <volume>39</volume>
          (
          <issue>7-8</issue>
          ):
          <volume>749</volume>
          {780, jul.
        </mixed-citation>
      </ref>
      <ref id="ref8">
        <mixed-citation>
          <string-name>
            <surname>Dunlop</surname>
            ,
            <given-names>S. M.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>E</surname>
          </string-name>
          . More,
          <string-name>
            <given-names>y D.</given-names>
            <surname>Romer</surname>
          </string-name>
          .
          <year>2011</year>
          .
          <article-title>Where do youth learn about suicides on the Internet, and what in uence does this have on suicidal ideation?</article-title>
          <source>Journal of Child Psychology and Psychiatry</source>
          ,
          <volume>52</volume>
          (
          <issue>10</issue>
          ):
          <volume>1073</volume>
          {1080, oct.
        </mixed-citation>
      </ref>
      <ref id="ref9">
        <mixed-citation>
          <string-name>
            <surname>Durkheim</surname>
            ,
            <given-names>E.</given-names>
          </string-name>
          <year>1897</year>
          .
          <article-title>El suicidio</article-title>
          .
          <source>Un estudio de sociolog a. 2a edicion.</source>
        </mixed-citation>
      </ref>
      <ref id="ref10">
        <mixed-citation>
          <string-name>
            <surname>Instituto Nacional de Estadistica</surname>
          </string-name>
          .
          <year>2014</year>
          . Encuesta sobre Equipamiento y Uso de Tecnolog as de Informacion y Comunicacion en los Hogares. paginas 1{
          <fpage>9</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref11">
        <mixed-citation>
          <string-name>
            <surname>Instituto Nacional de Estad stica</surname>
          </string-name>
          .
          <year>2017</year>
          .
          <article-title>Espan~a en cifras</article-title>
          .
          <source>paginas</source>
          <volume>17</volume>
          {
          <fpage>19</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref12">
        <mixed-citation>
          <string-name>
            <surname>Leenaars</surname>
            ,
            <given-names>A. A.</given-names>
          </string-name>
          <year>2010</year>
          . Edwin S. Shneidman on Suicide.
          <source>Suicidology Online</source>
          ,
          <volume>1</volume>
          :5{
          <fpage>18</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref13">
        <mixed-citation>
          <string-name>
            <surname>Mansilla</surname>
            ,
            <given-names>F.</given-names>
          </string-name>
          <year>2010</year>
          . Suicidio y Prevencion.
          <source>Valldargents</source>
          ,
          <volume>27</volume>
          bajos,
          <year>2010</year>
          edicion.
        </mixed-citation>
      </ref>
      <ref id="ref14">
        <mixed-citation>
          <string-name>
            <given-names>Moreno</given-names>
            <surname>Gea</surname>
          </string-name>
          , P. y C.
          <source>Blanco Sanchez</source>
          .
          <year>2012</year>
          . Suicidio e Internet. Medidas preventivas y de actuacion. Moreno Gea P. Psiquiatria.com,
          <volume>16</volume>
          :1{
          <fpage>12</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref15">
        <mixed-citation>
          <string-name>
            <surname>Morton</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          ,
          <string-name>
            <given-names>R. W.</given-names>
            <surname>Suicide</surname>
          </string-name>
          ,
          <string-name>
            <given-names>L.</given-names>
            <surname>Threatening</surname>
          </string-name>
          , B. New, y Y. Spring.
          <year>1995</year>
          .
          <article-title>The prevention of suicidal behaviors : An overview</article-title>
          .
          <volume>25</volume>
          (Spring):
          <volume>10</volume>
          {
          <fpage>21</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref16">
        <mixed-citation>
          <string-name>
            <surname>Mowery</surname>
            ,
            <given-names>D.</given-names>
          </string-name>
          ,
          <string-name>
            <given-names>H. A.</given-names>
            <surname>Smith</surname>
          </string-name>
          ,
          <string-name>
            <given-names>T.</given-names>
            <surname>Cheney</surname>
          </string-name>
          , C. Bryan, y
          <string-name>
            <given-names>M.</given-names>
            <surname>Conway</surname>
          </string-name>
          .
          <year>2016</year>
          .
          <article-title>Identifying Depression-Related Tweets from Twitter for Public Health Monitoring</article-title>
          .
          <source>Online Journal of Public Health Informatics</source>
          ,
          <volume>8</volume>
          (
          <issue>1</issue>
          ):
          <fpage>2579</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref17">
        <mixed-citation>
          <string-name>
            <surname>Navarro-Gomez</surname>
            ,
            <given-names>N.</given-names>
          </string-name>
          <year>2017</year>
          .
          <article-title>El suicidio en jovenes en Espan~a: cifras y posibles causas</article-title>
          . Analisis de los ultimos datos disponibles.
          <source>Cl nica y Salud</source>
          ,
          <volume>28</volume>
          (
          <issue>1</issue>
          ):
          <volume>25</volume>
          {
          <fpage>31</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref18">
        <mixed-citation>
          <string-name>
            <given-names>OMS. 2017. Nota</given-names>
            <surname>Descriptiva</surname>
          </string-name>
          .
          <source>Prevencion del suicidio.</source>
        </mixed-citation>
      </ref>
      <ref id="ref19">
        <mixed-citation>
          <string-name>
            <surname>Pak</surname>
            ,
            <given-names>A. y P.</given-names>
          </string-name>
          <string-name>
            <surname>Paroubek</surname>
          </string-name>
          .
          <year>2010</year>
          .
          <article-title>Twitter as a Corpus for Sentiment Analysis and Opinion Mining</article-title>
          .
          <source>In Proceedings of the Seventh Conference on International Language Resources and Evaluation</source>
          , paginas
          <volume>1320</volume>
          {
          <fpage>1326</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref20">
        <mixed-citation>
          <string-name>
            <surname>Pestian</surname>
            ,
            <given-names>J. P.</given-names>
          </string-name>
          , P. Matykiewicz, y M.
          <year>LinnGust</year>
          .
          <year>2012</year>
          .
          <article-title>What's In a Note: Construction of a Suicide Note Corpus</article-title>
          .
          <source>Biomedical informatics insights</source>
          ,
          <volume>5</volume>
          :
          <issue>1</issue>
          {
          <fpage>6</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref21">
        <mixed-citation>
          <string-name>
            <surname>Prensky</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          <year>2010</year>
          .
          <article-title>Nativos e Inmigrantes Digitales. Cuadrenos SEK 2</article-title>
          .o, (M-24433- 2010):
          <fpage>21</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref22">
        <mixed-citation>
          <string-name>
            <surname>Scheidman</surname>
            ,
            <given-names>E. y N.</given-names>
          </string-name>
          <string-name>
            <surname>Farberow</surname>
          </string-name>
          .
          <year>1957</year>
          . Ckues to Suicide.
          <source>Public Health Report</source>
          ,
          <volume>71</volume>
          (No 2).
        </mixed-citation>
      </ref>
      <ref id="ref23">
        <mixed-citation>
          <string-name>
            <surname>Schoene</surname>
            ,
            <given-names>A. M. y N.</given-names>
          </string-name>
          <string-name>
            <surname>Dethlefs</surname>
          </string-name>
          .
          <year>2016</year>
          .
          <article-title>Automatic Identi cation of Suicide Notes from Linguistic and Sentiment Features</article-title>
          . (
          <year>2010</year>
          ):
          <volume>128</volume>
          {
          <fpage>133</fpage>
          .
        </mixed-citation>
      </ref>
      <ref id="ref24">
        <mixed-citation>
          <string-name>
            <given-names>Trujano</given-names>
            <surname>Ruiz</surname>
          </string-name>
          ,
          <string-name>
            <surname>P.</surname>
          </string-name>
          , J. Dorantes Segura, y V.
          <source>Tovilla Quesada</source>
          .
          <year>2009</year>
          .
          <article-title>Violencia En Internet: Nuevas V ctimas, Nuevos Retos</article-title>
          .
          <volume>15</volume>
          (
          <issue>1</issue>
          ):7{
          <fpage>19</fpage>
          .
        </mixed-citation>
      </ref>
    </ref-list>
  </back>
</article>