<!DOCTYPE article PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Archiving and Interchange DTD v1.0 20120330//EN" "JATS-archivearticle1.dtd">
<article xmlns:xlink="http://www.w3.org/1999/xlink">
  <front>
    <journal-meta />
    <article-meta>
      <title-group>
        <article-title>Mikro Bloglardaki Finans Toplulukları için Kullanıcı Ağırlıklandırılmış Duygu Analizi Yöntemi</article-title>
      </title-group>
      <contrib-group>
        <contrib contrib-type="author">
          <string-name>Alpaslan Burak Eliaçık</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <contrib contrib-type="author">
          <string-name>Nadia Erdoğan</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <contrib contrib-type="author">
          <string-name>Bilgisayar Mühendisliği Bölümü</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <contrib contrib-type="author">
          <string-name>İstanbul Teknik Üniversitesi</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <contrib contrib-type="author">
          <string-name>İstanbul</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <contrib contrib-type="author">
          <string-name>aeliacik</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <contrib contrib-type="author">
          <string-name>nerdogan}@itu.edu.tr</string-name>
          <xref ref-type="aff" rid="aff0">0</xref>
        </contrib>
        <aff id="aff0">
          <label>0</label>
          <institution>Anahtar Kelimeler. Duygu Analizi, Sosyal Ağ Analizi</institution>
          ,
          <addr-line>Mikro Blog, Borsa</addr-line>
        </aff>
      </contrib-group>
      <fpage>782</fpage>
      <lpage>793</lpage>
      <abstract>
        <p>Nowadays, sentiment analysis is a popular research area in computer science. which aims to determine a person's or a group's mood, behaviour and opinion about any topic with using textual documents. With the proliferation of social micro-blogging sites, digital opinion text data is increased. Thus, many sentiment analysis researches are performed on these public data in different sociological fields, such as finance, economy and politics. In this paper, a novel sentiment analysis method is proposed on micro-blogging sites which uses new user metrics. Proposed method is used to measure financial community's sentiment polarity on micro-blogging sites. In addition to that we analyze the correlation between the mood of financial community and the behavior of the Borsa Istanbul 100 index weekly by Pearson correlation coefficient method. Our test results show that this novel sentiment analysis method improves to the accuracy of linear relationship between the behavior of the stock market and the sentiment polarity of the financial community.</p>
      </abstract>
    </article-meta>
  </front>
  <body>
    <sec id="sec-1">
      <title>-</title>
      <p>Günümüzde, insanların iletişim ihtiyaçlarını pratik bir şekilde karşılayan mikro blog
servisleri çok hızlı bir şekilde yaygınlaşmaktadır. Mikro blog servisleri sayesinde
günlük olan olaylar ve haberler kamusal alanda hızlı bir şekilde yayılmaktadır. Bu
imkândan yararlanmak isteyen bireyler ilgi duydukları alanlar ile alakalı bilgiye
erişebilmek için birbirlerini mikro blog servisleri aracılığı ile takip etmektedir. Bu
şekilde oluşan topluluklar sayesinde konu ile ilgili bilgi, topluluklar içerisinde hızlıca
yayılmaktadır ve topluluğa üye olan kullanıcılara etkili bir şekilde tesir etmektedir.</p>
      <p>Duygu analizi, bilişimsel dilbilimi ve veri madenciliği içerisinde yer alan bir alt
disiplindir. Duygu analizinin ana amacı kişilerin ruh halini, davranışlarını ve
fikirlerini metinsel dokümanlardan keşfetmektir. Mikro blog servislerinin artmasıyla,
bu servislere ait kamusal veriler; politika, ekonomi ve finans gibi farklı sosyolojik
alanları hedef alan duygu analizi çalışmalarında kullanılmaktadırlar.</p>
      <p>
        Günümüzde, mikro blog servisleri üzerinden günlük çok sayıda finans haberi
paylaşılmaktadır. Haberler mikro blog servisi üzerinden gönderildiği için piyasa
hakkında önemli bilgiler içermektedir. Bu servisler sayesinde yatırımcılar finans ile
alakalı önemli bilgilerden hızlıca haberdar olup bilgiler dâhilinde yatırım kararı
almaktadır. Alınan yatırım kararları ile finansal piyasaların davranışı etkilenmektedir.
Bu bağlamda bu iletiler üzerinde yapılan duygu analizi araştırmaları sayesinde
finansal piyasaların davranışları analiz edilebilmektedir. Literatür incelendiğinde,
araştırmacılar finansal piyasaların davranışını incelemek için birçok duygu analizi
çalışması gerçekleştirmişlerdir [
        <xref ref-type="bibr" rid="ref1">1</xref>
        ], [
        <xref ref-type="bibr" rid="ref3">3</xref>
        ], [
        <xref ref-type="bibr" rid="ref4">4</xref>
        ], [
        <xref ref-type="bibr" rid="ref11">11</xref>
        ], [
        <xref ref-type="bibr" rid="ref12">12</xref>
        ], [
        <xref ref-type="bibr" rid="ref13">13</xref>
        ], [
        <xref ref-type="bibr" rid="ref14">14</xref>
        ].
      </p>
      <p>BIST 100, Türkiye merkezli en iyi 100 kamuya açık şirketi içeren ve standart işlem
seansında bu şirketlere ait hisse senetlerinin alınıp satıldığı bir borsa endeksidir. Bu
çalışmada BIST 100 endeksinin hareketleri ile klasik duygu analizi yöntemi
kullanılarak elde edilen Türk finans topluluğunun duygu polaritesi arasında doğrusal
bir korelasyon olduğu görülmektedir. Daha sonra klasik duygu analizi yöntemine ek
olarak önerilen özgün kullanıcı metrikleri ile birlikte topluluğa ait hesaplanan duygu
polaritesinin, klasik yöntemlere nazaran BIST 100 endeksinin hareketleri ile daha
doğrusal bir korelasyona sahip olduğu gösterilmektedir. Finans alanında
gerçekleştirilen önceki duygu analizi yöntemlerinde topluluğun duygu polaritesi
hesaplanırken, mikro blog kullanıcılarının ait olduğu topluluğa olan etkisi göz ardı
edilerek sadece kısa ileti içeriklerine odaklanılmaktadır. Önceki çalışmalardan farklı
olarak, bu çalışmada kullanıcıların topluluğa olan etkilerini hesaplamaya dâhil eden
yeni bir duygu analizi yöntemi önerilmektedir. Her kullanıcı için bir "güven” değeri
hesaplanmaktadır ve gönderilerine bu güven değeri ile orantılı bir katsayı değeri
atanmaktadır. Kullanıcının, finans alanındaki uzmanlığı ve ait olduğu topluluktaki
inandırıcılığı onun güven değerini oluşturmaktadır.</p>
      <p>Bildirinin geri kalan bölümleri şöyle sıralanmaktadır: Bölüm 2’de finans alanında
gerçekleştirilen duygu analizi yöntemleri ele alınmaktadır. Bölüm 3’te önerilen
çalışma detaylı olarak açıklanmaktadır. Bölüm 4’te çalışma kapsamında toplanan veri
kümesi ve yapılan deneysel çalışmaların sonuçları vurgulanmaktadır. Son bölümde
ise çalışma, çıkan sonuçlar ışığında sonuca bağlanmaktadır.</p>
    </sec>
    <sec id="sec-2">
      <title>Finans Alanındaki Mevcut Duygu Analizi Çalışmaları</title>
      <p>
        Liu [
        <xref ref-type="bibr" rid="ref7">7</xref>
        ], insana ait görüşlerin hemen hemen tüm insani faaliyetlerin merkezinde yer
aldığını belirtmektedir. Bu nedenle, birey bir konu hakkında karar alacağı zaman
başkalarının o durum hakkındaki görüşlerini öğrenmek istemektedir. Bu bağlamda
finansal piyasalarda, başkalarının düşünceleri çok önemlidir, çünkü finansal
enstrümanların fiyatlarını finansal topluluktaki bireylerin görüşleri belirlemektedir.
      </p>
      <p>
        Duygu analizinin temel motivasyonu diğer insanların düşüncelerini ortaya
çıkarmaktır [
        <xref ref-type="bibr" rid="ref8">8</xref>
        ]. Literatürde, finansal piyasalar üzerinde mikro blog verilerini
kullanılarak gerçekleştirilen birçok duygu analizi araştırması gerçekleştirilmiştir.
Bollen ve ark [
        <xref ref-type="bibr" rid="ref4">4</xref>
        ] Twitter servisi kullanıcılarına ait duygu polaritelerinin borsa
davranışlarını tahmin etmekte kullanışlı olup olmadığını araştırmışlardır. Bir diğer
çalışmada Rao ve Srivastava [
        <xref ref-type="bibr" rid="ref11">11</xref>
        ] çalışmalarında finansal market enstrümanları ile
Twitter servisi kısa iletileri arasındaki ilişkiyi incelemişlerdir. Sprenger ve ark. [
        <xref ref-type="bibr" rid="ref14">14</xref>
        ]
ise çalışmalarında finansal piyasalar ile birden fazla mikro blog servisi arasındaki
ilişkiyi araştırmışlardır. Diğer bir önemli araştırmada Si ve ark. [
        <xref ref-type="bibr" rid="ref12">12</xref>
        ] Twitter servisi
verilerini kullanarak borsa hareketlerini tahmin eden konu tabanlı bir duygu analizi
yöntemi önermişlerdir. Smailović ve ark. [
        <xref ref-type="bibr" rid="ref13">13</xref>
        ] ise çalışmalarında hisse senedi
piyasalarında kısa ileti tabanlı duygu analizi için akış tabanlı aktif öğrenme
gerçekleştiren yeni bir yöntem önermişlerdir. Bir diğer duygu analizi araştırmasında
Bing ve ark. [
        <xref ref-type="bibr" rid="ref3">3</xref>
        ] sosyal medyada duygu analizi kullanarak belirli şirketlerin borsada
işlem gören hisse senedi fiyatlarını tahmin etmek istemişlerdir.
      </p>
      <p>Finansal alanda yapılan duygu analizi çalışmaları artmasına rağmen, bu çalışmalar
tanımlanmış bir sosyal ağın duygu polaritesini analiz etmek için sadece mikro blog
servislerinden gönderilen kısa iletilere ait metinsel içerikleri göz önünde
bulundurmaktadırlar. Böyle bir yaklaşımın tanımlanmış sosyal ağa ait duygu
polaritesinin belirlenmesinde yetersiz olduğu varsayılmaktadır. Liu'dan esinlenerek bu
çalışmada önerilen temel fikir, herhangi bir topluluğun gerçeğe yakın duygu
polaritesini bulabilmek için kullanıcıların topluluk içerisindeki güven değerleri
dikkate alınmalıdır. Bu nedenle bu çalışmada, mikro blog servisleri üzerinde analiz
yapmak için yeni tanımlanan kullanıcı metrikleri kullanan özgün bir duygu analizi
yöntemi önerilmektedir.
3
3.1</p>
    </sec>
    <sec id="sec-3">
      <title>Yöntem</title>
      <sec id="sec-3-1">
        <title>Veri Temizleme ve Dönüşümü</title>
      </sec>
      <sec id="sec-3-2">
        <title>Finansal Sosyal Topluluk Paylaşımları. Toplanan Twitter servisi verisi duygu</title>
        <p>analizi için hazır değildir. Çalışmanın kapsamı doğrultusunda ilk önce Türkçe
olmayan iletiler veri kümesinden çıkartılmaktadır. Bu adımdan sonra veriyi duygu
analizi için daha anlamlı bir hale getirmek için bazı doğal dil işleme teknikleri
uygulanmaktadır. Bu teknikler adım adım kısaca aşağıda ifade edilmektedir;
Cümleleri Ayrıştırmak. Ana doğal dil işleme adımıdır. Bu adımda girdi olarak alınan
cümleler, kelimelere ve anlamlı ifadelere ayrıştırılmaktadır. Normal Türkçe metin
ayrıştırma işlemlerine ek olarak mikro blog iletileri ayrıştırılırken bazı hususlar
dikkate alınmalıdır. Bunlar; his simgeleri (":D", ":x", ":)"), Twitter işaret dili ("@",
"#"), büyük harfle ve tekrarlı yazım ("HAYIR", "lüüütttfeeenn").</p>
        <p>Gövdeleme. Doğal dil işlemede önemli bir adımdır. Gövdeleme işlemenin ana görevi
kelimenin çekim eklerini temizlemektedir. Böylece duygu analizi yönteminin başarı
oranı artmaktadır. Sadece çekim eklerini temizlediği için kelime anlam kaybına
uğramamaktadır.</p>
        <p>
          Finansal Sosyal Topluluk Ağ Bilgisi. Çalışmada kullanılan finansal sosyal topluluk,
Türkiye'de yayın yapan bir ekonomi kanalının sunucuları ve bu sunucuların ortak
arkadaşlarından oluşmaktadır. Bu çalışmanın amacı, finansal sosyal topluluğun
Türkçe kısa iletileri üzerinde özgün bir duygu analizi yöntemi uygulamaktır. Bu
yüzden elde edilen veri kümesi içerisindeki kişilerin paylaşımlarına bakılarak Türkçe
kelime paylaşımı %50'den düşük olan kişiler bu topluluktan çıkartılmaktadır. Bir
kelimenin Türkçe olup olmadığını anlamak için güncel Türk Dil Kurumu [
          <xref ref-type="bibr" rid="ref15">15</xref>
          ] sözlüğü
kullanılmaktadır. Bu veri hazırlama adımı dışında daha güvenilir sonuçlar elde
edebilmek için tanımlanan topluluk içerisinde 3 haftadan az kalan kişiler topluluktan
çıkartılmaktadır. Topluluk verisinin üzerinde yapılan temizleme adımlarından sonra
üyelerin topluluk içerisindeki kronolojik yaşam sürelerini içeren zaman çizelgeleri
elde edilmektedir.
3.2
        </p>
        <p>Özellik Çıkarma ve Seçme
Duygu analizi yaklaşımı temelde bir sınıflandırma problemidir. Bu nedenle, veri
kümesi üzerinde duygu analizi gerçekleştirmek için öncelikle metin özellikleri
çıkartılmalıdır. Daha sonra bu özellikler içerisinden belirlenen kriterler doğrultusunda
uygun olan metin özellikleri seçilmelidir. Bu özellikler daha çok terimlerin varlığı
veya sıklığı şeklinde durumlar hakkında görüş belirten kelimelerden oluşmaktadır.
Özellik çıkarma işlemi dokümanlara bir kelime kümesi şeklinde davranarak n-grams
(unigram, bigram, trigram) yaklaşımı uygulamaktadır. Uygun n-grams tekniği veri
kümelerinin karmaşıklık derecesine göre belirlenmektedir.</p>
        <p>
          Literatürde özellik seçimi için istatiksel yöntemler kullanılmaktadırlar. Bu
yöntemlerden bazıları Point-wise Mutual Information [
          <xref ref-type="bibr" rid="ref20">20</xref>
          ], Chi-square [
          <xref ref-type="bibr" rid="ref2">2</xref>
          ] ve Latent
Semantic Index [
          <xref ref-type="bibr" rid="ref5">5</xref>
          ] yaklaşımlarıdır. Point-wise Mutual Information (PMI) yöntemi
özellikler ve sınıflar arasındaki ilişkiyi bulan temel bir yaklaşım sunmaktadır. Sınıf c
ve kelime a arasındaki birlikte gözlemlenebilirlik Pc(w), sınıf c ve kelime a arasındaki
bağımsızlık Pc ile tanımlanmaktadır(denklem 1).
        </p>
        <p>Bu çalışmada, özellik çıkartmak için unigram ve bigram özellik temsilleri
birleştirilmektedir. Özellik seçmek için ise PMI yöntemi kullanılmaktadır.</p>
        <p>Vc(w) = log(  c( ))</p>
        <p>3.3</p>
      </sec>
      <sec id="sec-3-3">
        <title>Duygu Sınıflandırması</title>
        <p>Duygu sınıflandırması yöntemi iki ana dala ayrılmaktadır; makine öğrenmesi tabanlı
yaklaşım ve sözlük tabanlı yaklaşım. Makine öğrenme tabanlı yaklaşım sınıflandırma
sırasında makine öğrenme algoritmalarını ve dilbilimsel özellikleri kullanmaktadır.
Sözlük tabanlı yaklaşım ise sınıflandırma sırasında önceden hazırlanmış duygu
kavramlarından oluşan sözlüklerden yararlanmaktadır. Bazı çalışmalarda ise bu iki
yönelimin melez bir yaklaşımı kullanılmaktadır.</p>
        <p>
          Literatürde, duygu analizi için bazı makina öğrenmesi tabanlı sınıflandırma
yöntemleri önerilmektedir. Ancak, duygu analizi için hangi yöntemin daha uygun
olduğu tam olarak açık değildir [
          <xref ref-type="bibr" rid="ref6">6</xref>
          ]. Destek Vektör Makinası (DVM) yöntemi duygu
analizi için kullanılan yöntemlerden biridir [
          <xref ref-type="bibr" rid="ref9">9</xref>
          ], [
          <xref ref-type="bibr" rid="ref10">10</xref>
          ]. Çalışmada DVM yöntemi duygu
sınıflandırmasının karar mekanizmasında kullanılmaktadır. Çünkü DVM'ın
performansı diğer duygu analizi çalışmalarına benzer değerlere sahiptir ve ayrıca
DVM metin madenciliği yaklaşımları için ideal bir çözüm sunmaktadır [
          <xref ref-type="bibr" rid="ref9">9</xref>
          ], [
          <xref ref-type="bibr" rid="ref10">10</xref>
          ].
3.4
        </p>
        <p>
          Önerilen Duygu Analizi Yöntemi
Duygu analizinin amacı verilen metinin polaritesini sınıflandırmaktır. Mikro blog
perspektifinde, duygu analizi sınıflandırması için kullanıcılarının kısa metin
şeklindeki görüşleri kullanılmaktadır. Liu [
          <xref ref-type="bibr" rid="ref7">7</xref>
          ] çalışmasında görüşü beşli şekilde
tanımlamaktadır (denklem 2). Bu denklemde e görüşü ifade edilen kavramı, a ise bu
kavrama ait bir özelliği nitelemektedir. s hedef (e,a) için düşünülen duygu değerini, h
görüşü ifade eden bireyi ve t ise ifadenin edildiği zamanı belirtmektedir.
        </p>
        <p>Opinion(e, a, s, h, t)
(2)</p>
        <p>Liu bir görüşün açık bir şekilde ifade edilebilmesi için bu beş parametrenin gerekli
olduğunu belirtmektedir. Bu nedenle, başarılı bir duygu analizi gerçekleştirilebilmesi
için bu beş kavramın görüş için kullanılması gerekmektedir.</p>
        <p>
          Literatürde, finansal piyasalar ve sosyal ağların duygu polaritesi arasındaki
korelasyonu bulmayı hedefleyen birçok çalışma gerçekleştirilmiştir. Bu çalışmaların
birçoğu [
          <xref ref-type="bibr" rid="ref1">1</xref>
          ], [
          <xref ref-type="bibr" rid="ref3">3</xref>
          ], [
          <xref ref-type="bibr" rid="ref4">4</xref>
          ], [
          <xref ref-type="bibr" rid="ref11">11</xref>
          ], [
          <xref ref-type="bibr" rid="ref12">12</xref>
          ], [
          <xref ref-type="bibr" rid="ref13">13</xref>
          ], [
          <xref ref-type="bibr" rid="ref14">14</xref>
          ] sadece sosyal medya aracılığı ile paylaşılan
zaman damgasına sahip metinsel içeriği kullanarak sosyal ağın duygu polaritesine
karar vermektedir. Metinsel içerik duygu polaritesini hesaplamak için, zaman değeri
ise finansal enstrümanlar arasındaki korelasyonu bulmak için kullanılmaktadır.
Araştırmacılar çalışmalarında sadece duygu (s), onun hedef aldığı kavramı (e,a) ve
zaman değerini (t) göz önünde bulundurmaktadırlar. Görüş sahibi birey (h) duygu
polaritesinin hesaplanmasında sağlıklı bir şekilde ele alınmamaktadır.
        </p>
        <p>Bu bağlamda bu çalışma, bir konu üzerinde belirtilen görüşün sahip olduğu polarite
değerinin, görüş sahibinin ait olduğu topluluğun ona duyduğu güven doğrultusunda
değişeceğini iddia etmektedir. Bu iddia doğrultusunda toplulukların duygu polaritesini
ölçümleyebilmek için görüş sahiplerini hesaplamaya dâhil eden özgün bir duygu
analiz yaklaşımı önerilmektedir. Bu amaçla, mikro blog kullanıcıları için iki tane
metrik tanımlanmaktadır. Bu metriklerin tanımlanma amacı kullanıcıların sosyal
ağlardaki önemini ölçmek içindir. Bu metrikler; Üyelik Derecesi (üd) ve İlgi Derecesi
(id) olarak adlandırılmaktadır. Üyelik Derecesi kullanıcının grup içerisindeki
inandırıcılığını ölçmektedir. İlgi Derecesi ise kullanıcının bir konu ile alakalı ilgi
derecesini ölçmektedir.
Üyelik Derecesi. Bu çalışmada konu tabanlı mikro blog kullanıcılarının oluşturduğu
sosyal ağ bir yönsüz çizelge olarak ifade edilmektedir (U,L). Bu ifadede mikro blog
kullanıcıları kümesi U ve bu kullanıcılar arasındaki arkadaşlık ilişkisi kümesi L olarak
gösterilmektedir. Arkadaşlık ilişkisi l birbirini takip eden iki mikro blog kullanıcısı
arasındaki ilişkiyi belirtmektedir. Bunlara ek olarak, H çalışma için belirlenen
ekonomi kanalı sunucularının oluşturduğu kümeyi ve F ise çalışmada önerilen
finansal ilgiye sahip kullanıcıların oluşturduğu sosyal ağı nitelemektedir. Bir mikro
blog kullanıcısı olan x, F kümesine katılabilmesi için H kümesine ait iki kullanıcı h1
ve h2 ile arasında l1 ve l2 arkadaşlık ilişkisi olması gerekmektedir. Önerilen finansal
sosyal ağa katılım tanımı denklem 3 ve 4'te ifade edilmektedir.</p>
        <p>∀x∈U, h1,h2∈H, l1,l2∈L;
∀x{l1={(x,h1)=(h1,x)} ∧ l2={(x,h2)=(h2,x)}→ x∈F}</p>
        <p>Bir kullanıcının gruba katılma zamanı tbm ile gruptan ayrılma zamanı tlm arasında
geçen üyelik süresini tm olarak tanımlanmaktadır. Ayrıca bütün sosyal ağa ait üyelerin
ortalama üyelik süresini tm_ort ile ifade edilmektedir. Üyelik Derecesi (üd),
kullanıcının üyelik süresinin tm, ait olduğu sosyal ağın üyelik süresi ortalamasına tm_ort
oranıdır. Bu tanımlar denklem 5, 6 ve 7’de gösterilmektedir. Çalışmada kullanıcının
üye kalma süresi ile kullanıcının inandırıcılığı doğru orantılı düşünülmektedir. Bu
nedenle üyelik zamanı uzun olan kullanıcıların görüşleri daha güvenilir bir kaynak
olarak ele alınmaktadır.</p>
        <p>tm = tbm – tlm
tm_ort = ∑|=|1</p>
        <p>| |
üd =</p>
        <p>_
(3)
(4)
(5)
(6)
(7)
İlgi Derecesi. Finans literatüründe, finans ile ilgili isim tamlamaları, kelimeler ve
kısaltmalardan oluşan finans sözlükleri araştırmalarda kullanılmaktadır. Bu
çalışmada, akademik çalışmalarda kullanılmış Türkçe finans sözlüklerinin
birleştirilmesinden oluşan FW olarak ifade edilen bir sözlük kullanılmaktadır. Bu
sözlük 1953 tane finans ile alakalı terim içermektedir, FW={w1, w2, w3, w4…}.
Birleştirilen finans sözlüğü mikro blog kullanıcılarının ne kadar finans ile ilgili
paylaşım yaptığını belirlemek için kullanılmaktadır.</p>
        <p>İlgi Derecesi (id) bir kullanıcının ne kadar finans ile alakalı paylaşım yaptığını
göstererek aslında o kullanıcının konu hakkındaki uzmanlık derecesi hakkında ipucu
vermektedir. İlgi derecesini hesaplarken ilk önce kullanıcının mikro blog iletileri
kelime kümesine dönüştürülmektedir; UTW = {w1, w2, w3, w4....}. Daha sonra hem
FW kümesinin hem de UTW kümesinin üyesi olan elemanlar için UFW kümesi
oluşturulmaktadır. Kesişim kümesi, kullanıcıların kullandığı finans ile alakalı
kelimeleri içermektedir, UFW = {w1, w2, w3, w4…}. Kümeler arasındaki ilişki
denklem 8’de gösterilmektedir.</p>
        <p>∀x{x∈FW, x∈UTW; → x∈UFW}, FW ∩ UTW = UFW
(8)</p>
        <p>Bir kullanıcının tanımlanan finansal kelime kullanma yüzdesi ilgi değeri iv olarak
tanımlanmaktadır. Ayrıca bütün F sosyal ağına ait kullanıcıların ortalama ilgi değeri
ivort olarak ifade edilmektedir. İlgi Derecesi (id), kullanıcının ilgi değerinin iv ait
olduğu sosyal ağın ortalama ilgi değerine ivort oranıdır. Bu tanımlar denklem 9, 10 ve
11’de gösterilmektedir
iv = ||
|
|
ivort =
∑| =|1</p>
        <p>| |
id =</p>
        <p>Önerilen özgün duygu analizi yönteminde, her kullanıcı için finansal alan ile ilgili
duygu polaritesi ölçümünün başarımını artırmak için üd ve id olarak adlandırılan iki
metriğin belirlenmesi gerekmektedir.</p>
        <p>Önceki finans alanı üzerinde yapılan duygu analizi çalışmalarında, topluluğun
duygu polaritesi hesaplanırken kullanıcıların o konuya olan ilgi seviyesi ve grup
içindeki inandırıcılık seviyesi göz önünde bulundurulmamaktadır. Araştırmacılar
sadece mikro blog içeriğini hesaplamaya dâhil etmektedirler. Bir başka ifadeyle
aslında araştırmacılar gerçekleştirilen çalışmalarında kullanıcı kavramının yani kısa
ileti sahibinin katsayı değerini 1 almaktadırlar. Önceki çalışmalarda toplulukların
duygu polaritesini (tdp) hesaplamak için kullanılan yöntem denklem 12’de
gösterilmektedir. SP kümesi her kısa ileti için duygu polaritesini içeren küme olarak
ifade edilmektedir, SP={sp1, sp2, sp3, sp4.....}.</p>
        <p>tdp = ∑|=1|   = ∑|=1|   ∗1</p>
        <p>| | | |</p>
        <p>Bu çalışmada, bir kullanıcının bir konu üzerindeki alaka düzeyinin ve dâhil olduğu
gruptaki inandırıcılık düzeyinin duygu analizindeki değerlendirme sürecine dâhil
edilmesi gerektiği iddia edilmektedir. Yukarıda tanımlanan metrikler sayesinde,
topluluğun duygu polaritesi hesaplamasında her bir kullanıcı için üd ve id değerleri
eklenerek klasik duygu polaritesi hesaplama yaklaşımları geliştirilmektedir. Denklem
12’de ifade edilen hesaplama yöntemi her kısa ileti için kısa ileti sahibinin üdks ve idks
değerleri eklenerek denklem 13’deki ifadeye dönüştürülmektedir. Önerilen
yaklaşımdaki adımlar blok diyagram olarak Şekil 1’de tasvir edilmektedir.
tdp = ∑|=1|   ∗ü  ∗ 
| |
Şekil 1. Önerilen Duygu Analizi Yöntemi
4</p>
        <p>
          Deneysel Çalışma
Önerilen yöntemi değerlendirmek için, yukarıda tanımlanan kullanıcı metriklerini
kullanan özgün bir duygu analizi uygulaması geliştirilmiştir. Uygulamada
kullanılacak modeli oluşturabilmek için Twitter4j kütüphanesi [
          <xref ref-type="bibr" rid="ref17">17</xref>
          ] yardımıyla Türkçe
kısa iletiler Twitter servisinden elde edilmiştir. Elde edilen kısa iletiler, finans
konusunda uzman üç kişi tarafından etiketlenmiştir. Etiketlenen kısa iletinin
çalışmaya dâhil edilebilmesi için üç kişinin onayı alınmıştır. Eğer bu üç kişi aynı kısa
ileti için finans ile alakalı olduğu ve aynı polariteye sahip olduğu ortak kararını
vermiş ise o kısa ileti çalışmada kullanılmıştır. Bu etiketleme yöntemi ile 1501 negatif
kısa ileti ile 907 pozitif kısa ileti içeren bir Türkçe veri kümesi oluşturulmuştur.
        </p>
        <p>Özellikleri çıkartmak için unigram ve bigram özellik temsilleri birleştirilmiştir.
Özellik seçmek için ise PMI yöntemi kullanılmıştır. Özellik çıkarma ve seçme
işlemlerinden sonra 35,030 özellikten oluşan özellik kümesi elde edilmiştir. Bu
çalışmada, Destek Vektör Makinası tabanlı bir duygu sınıflandırma yöntemi
seçilmiştir. Etiketlenmiş veri kümesinin sınıflandırma performansı artırmak için
10katlamalı çapraz doğrulama yöntemi kullanılmıştır. Yöntem sonucunda elde edilen
duygu sınıflandırma modelinin başarım oranı %73,63’dir.</p>
        <p>Çalışmada kullanılan veri Twitter servisinden elde edilmiştir. Twitter sosyal ağı
içerisindeki finans ile alakalı bireyleri keşfedilmek için bir yaklaşım belirlenmiştir. İlk
olarak, Türkiye’de yayın yapan bir ekonomi kanalının spikerleri belirlenmiştir. Sonra
bu belirlenen spikerler ile çift yönlü izleme ilişkisine sahip bireyler belirlenmiştir. Bu
belirlenen grup içerisinde eğer iki spiker aynı kişi ile çift yönlü izleme ilişkisine
sahipse, bu bireyin de finans ile ilgili olduğu varsayılmıştır. Bu öngörülü yaklaşım
sayesinde finans hakkında konuşan bir sosyal ağ topluluğu oluşturulmuştur.
Algoritma 1 finans topluluğu oluşturmak için kullanılan yöntemin çalışma adımlarını
göstermektedir. FINANSALSOSYALTOPLULUKHAZIRLA prosedürünün zaman
karmaşıklığı O(k*m) = O(n2); m bu prosedürde sunucuların ortak arkadaş sayısını, k
ise sunucuların ortak arkadaşlarının arkadaşlarını tanımlamaktadır.</p>
        <p>Algoritma 1: Finansal Sosyal Topluluğu Hazırlama
1: procedure FINANSALSOSYALTOPLULUKHAZIRLA(sunucular)
2: finansalSosyalToplulukÜyeleriİlişkileri ← [ ]
3: arkadaşlar ← [ ]
4: for all sunucu ∈ sunucular do
5: arkadaşlar.Ekle(ÇİFTYÖNLÜİLİŞKİLERESAHİPKULLANICILARIBUL(sunucu))
6: end for
7: ortakArkadaşlar ← ORTAKARKADAŞBUL(arkadaşlar,2) // İkiden fazla arkadaşlar’a eklenen kişiler
8: for all ortakArkadaş ∈ ortakArkadaşlar do
9: finansalSosyalToplulukÜyeİlişkileri.Ekle(ÇİFTYÖNLÜİLİŞKİLERİBUL(ortakArkadaş))
10: end for
11: return finansalSosyalToplulukÜyeleriİlişkileri
12: end procedure</p>
        <p>
          Çalışmada kullanılan verileri Twitter servisinden elde etmek için Twitter4j
kütüphanesi [
          <xref ref-type="bibr" rid="ref17">17</xref>
          ] kullanan bir araç geliştirilmiştir. Bu araç finansal sosyal ağın o anki
görüntüsünü alabilmek için her Pazartesi çalıştırılmıştır. Test verisi bu çalışma için 22
Eylül 2014 ile 14 Mart 2015 tarihleri arasında haftalık toplanmıştır. Veri kümesi, 475
kullanıcının topluluk içerisindeki zaman çizelgesini yani hangi haftalarda topluluğun
üyesi kalmış bilgisi ve bu kullanıcılara ait 619091 tane kısa iletiyi içermektedir.
        </p>
        <p>
          Her kullanıcı için haftalık pozitif ve negatif kısa ileti sayısını Weka kütüphanesi
[
          <xref ref-type="bibr" rid="ref18">18</xref>
          ] kullanılarak geliştirilen bir araç yardımıyla elde edilmiştir. Daha sonra, bir
kullanıcının bir konu hakkındaki ilgisinin ve topluluk içerisindeki inandırıcılığının
duygu polaritesine nasıl etki ettiği gözlemlemek için kullanıcının üd ve id değerleri
hesaplanıp, normal duygu analizi sonucunda çıkan polarite sayıları ile çarpılmıştır.
Böylece o kullanıcıya ait ağırlıklandırılmış polarite değeri bulunmuştur.
        </p>
        <p>
          Haftalık karşılaştırma sırasında yüzdesel değişimi izleyebilmek için, BIST 100
kapanış ve açılış değerleri Türkiye Merkez Bankası internet sitesinden [
          <xref ref-type="bibr" rid="ref16">16</xref>
          ] elde
edilmiştir. Diğer taraftan BIST 100 değerleri ile karşılaştırma yapabilmek için, normal
(klasik hesaplama yöntemi) ve ağırlıklandırılmış (önerilen hesaplama yöntemi) duygu
polaritesinin haftalık değişimi (dphd) hesaplanmıştır. Duygu polaritesinin haftalık
yüzdesel değişimi, önceki hafta duygu polarite değeri ve mevcut haftadaki duygu
polarite değeri arasındaki fark alınıp önceki hafta duygu polarite değerine bölerek
hesaplanmıştır. Böylelikle haftalık duygu polariteleri yüzdesel değişimi elde
edilmiştir. Bu hesaplama denklem 14’te gösterilmektedir.
        </p>
        <p>dphd = ℎ

ℎ
 ğ  +1− ℎ</p>
        <p>ğ 
 ğ</p>
        <p>(14)
Şekil 2’de 29 Eylül 2014 ile 14 Mart 2015 tarihleri arasında, klasik yöntem ile
hesaplanan duygu polarite değeri, önerilen yöntem ile hesaplanan duygu polarite
değeri ve BIST 100 haftalık değişim değeri görülmektedir. Şekil 2 incelendiği zaman,
çoğu hafta topluluğun duygu polaritesi ile BIST 100 arasında doğrusal bir ilişki
olduğu açıkça fark edilmektedir. Ancak bu değerler incelendiği zaman bazı haftalarda
bu ilişkinin bozulduğu dikkat çekmektedir. Bu haftalar araştırıldığında sosyal topluluk
üzerinde büyük etki yaratan olağandışı olayların bu haftalar içerisinde gerçekleştiği
görülmektedir. Bu olağandışı olayları listesi Tablo 1’de verilmektedir.
Şekil 2. 29 Eylül 2014 ile 14 Mart 2015 Tarihleri Arası Değişim Yüzdeleri</p>
        <sec id="sec-3-3-1">
          <title>Tablo 1. Olağandışı Olaylar</title>
          <p>
            Şekil 2’de açıkça görüldüğü gibi önerilen genişletilmiş duygu analizi yönteminin
yüzdesel değişim oranları, klasik duygu analizi yönteminin yüzdesel değişim
oranlarına göre BIST 100’un haftalık yüzdesel değişim oranlarına daha yakın
seyretmektedir. Buna ek olarak, ayrıca eğer olağandışı olay ekonomi ile alakalı ise
önerilen yönteme ait sonuçların klasik yönteme ait sonuçlara göre daha çok
etkilendiği görülmektedir. Önerilerimizi daha netleştirmek ve haklı çıkarmak için, iki
değer serisi arasındaki doğrusal ilişki ölçümünde sıklıkla kullanılan Pearson
korelasyon katsayı [
            <xref ref-type="bibr" rid="ref19">19</xref>
            ] yöntemi kullanılmıştır (denklem 15). .Pearson korelasyon
katsayı "r" değeri -1 ile 1 arasında değişmektedir.Yöntemi kullanmadan önce verinin
normal dağılımı "Shapiro-Wilk" testi ile sınanmıştır. Test sonucunda üç grubun da
önem olasılık değerleri (sig.) 0.05' den büyük olduğundan tüm gruplar için %95
güvenle veriler normal dağılımlı olduğu gözlemlenmiştir ve Pearson korelasyon
katsayısı yöntemine uygun olduğu görülmüştür.
          </p>
          <p>BIST 100 ile topluluğun duygu polaritesi arasındaki güçlü doğrusal ilişkiyi bulmak
ve önerilen duygu analizi yönteminin başarımını ölçmek için Pearson korelasyon
katsayı yöntemi ile dört farklı analiz yapılmıştır.
1. Bütün veri üzerinde klasik duygu analizi yöntemi (BV-KDAY).
2. Bütün veri üzerinde önerilen duygu analizi yöntemi (BV-ÖDAY).
3. Olağandışı olayların gerçekleştiği haftalar çıkarılmış veri üzerinde klasik duygu
analizi yöntemi (OO-KDAY).
4. Olağandışı olayların gerçekleştiği haftalar çıkarılmış veri üzerinde önerilen duygu
analizi yöntemi (OO-ÖDAY)</p>
          <p>Analizler sonucunda elde edilen Pearson korelasyon katsayı değerlerinin gösterdiği
üzere önerilen duygu analizi yöntemiyle, haftalık borsa fiyat değişimleri ile haftalık
finansal sosyal topluluk duygu polaritesi değişimleri arasında önceki yaklaşımlara
göre daha yakın bir doğrusal ilişki elde edilmiştir. Analiz sonuçları Tablo 2'de
gösterilmektedir.</p>
        </sec>
        <sec id="sec-3-3-2">
          <title>Tablo 2. Pearson Korelasyon Katsayı Sonuçları</title>
        </sec>
        <sec id="sec-3-3-3">
          <title>Analiz Tipi</title>
        </sec>
        <sec id="sec-3-3-4">
          <title>BV-KDAY</title>
          <p>BV-ÖDAY</p>
        </sec>
        <sec id="sec-3-3-5">
          <title>OO-KDAY OO-ÖDAY</title>
        </sec>
        <sec id="sec-3-3-6">
          <title>Pearson Korelasyon Katsayı</title>
          <p>0,1986
0,2283
0,5701
0,6662
5</p>
        </sec>
      </sec>
    </sec>
    <sec id="sec-4">
      <title>Sonuç</title>
      <p>Literatürde gerçekleştirilen araştırmalarda finans ve duygu analizi ilişkisi çokça ele
alınmasına rağmen sosyal ağ kullanıcıları yeterince göz önünde
bulundurulmamaktadır. Bu çalışmada, finans ile alakalı kullanıcı verileri göz önünde
bulundurarak o kullanıcının finans ile alakalı ilgi düzeyini ve finansal topluluk
içerisindeki inandırıcılığını kullanan, yeni bir topluluk düzeyi duygu analizi yöntemi
önerilmektedir. Yapılan analizler sonucu önerilen yöntemin önceki yöntemlere göre
finansal sosyal toplulukların duygu polaritesi ile borsa fiyatları arasındaki bağdaşıklık
oranını daha hassas hesapladığı görülmektedir. Bu nedenle bir topluluğun duygu
polaritesi hesaplamasında önerilen yöntemin önceki yaklaşımlardan daha etkin olduğu
düşünülmektedir. Son olarak, gelecekte yapılacak çalışmalarda farklı sınıflandırma
yöntemleri ve farklı veri kümeleri kullanılarak önerilen yaklaşımın daha detaylı ele
alınması planlanmaktadır.</p>
    </sec>
  </body>
  <back>
    <ref-list>
      <ref id="ref1">
        <mixed-citation>
          1.
          <string-name>
            <surname>Agarwal</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Xie</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Vovsha</surname>
            ,
            <given-names>I.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Rambow</surname>
            ,
            <given-names>O.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Passonneau</surname>
          </string-name>
          , R.:
          <article-title>Sentiment analysis of twitter data</article-title>
          .
          <source>In: Proceedings of the Workshop on Languages in Social Media. Association for Computational Linguistics</source>
          , pp.
          <fpage>30</fpage>
          -
          <lpage>38</lpage>
          (
          <year>2011</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref2">
        <mixed-citation>
          2.
          <string-name>
            <surname>Aggarwal</surname>
            ,
            <given-names>C. C.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Zhai</surname>
            ,
            <given-names>C.</given-names>
          </string-name>
          :
          <article-title>Mining text data</article-title>
          . Springer Science &amp; Business
          <string-name>
            <surname>Media</surname>
          </string-name>
          (
          <year>2012</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref3">
        <mixed-citation>
          3.
          <string-name>
            <surname>Bing</surname>
            ,
            <given-names>L.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Chan</surname>
            ,
            <given-names>K.C.C.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Ou</surname>
            ,
            <given-names>C.</given-names>
          </string-name>
          :
          <article-title>Public Sentiment Analysis in Twitter Data for Prediction of a Company's Stock Price Movements</article-title>
          . In: e-Business
          <string-name>
            <surname>Engineering</surname>
          </string-name>
          (ICEBE),
          <source>2014 IEEE 11th International Conference</source>
          , pp.
          <fpage>232</fpage>
          -
          <lpage>239</lpage>
          (
          <year>2014</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref4">
        <mixed-citation>
          4.
          <string-name>
            <surname>Bollen</surname>
            ,
            <given-names>J.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Mao</surname>
            ,
            <given-names>H.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Zeng</surname>
            ,
            <given-names>X.</given-names>
          </string-name>
          :
          <article-title>Twitter mood predicts the stock market</article-title>
          .
          <source>Journal of Computational Science</source>
          , vol.
          <volume>2</volume>
          , no.
          <issue>1</issue>
          , pp.
          <fpage>1</fpage>
          -
          <lpage>8</lpage>
          (
          <year>2011</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref5">
        <mixed-citation>
          5.
          <string-name>
            <surname>Deerwester</surname>
            ,
            <given-names>S. C.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Dumais</surname>
            ,
            <given-names>S. T.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Landauer</surname>
            ,
            <given-names>T. K.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Furnas</surname>
            ,
            <given-names>G. W.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Harshman</surname>
            ,
            <given-names>R. A.</given-names>
          </string-name>
          :
          <article-title>Indexing by latent semantic analysis</article-title>
          .
          <source>JASIS</source>
          , vol.
          <volume>41</volume>
          , no.
          <issue>6</issue>
          , pp.
          <fpage>391</fpage>
          -
          <lpage>407</lpage>
          (
          <year>1990</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref6">
        <mixed-citation>
          6.
          <string-name>
            <surname>Go</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Bhayani</surname>
            ,
            <given-names>R.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Huang</surname>
            ,
            <given-names>L.</given-names>
          </string-name>
          :
          <article-title>Twitter sentiment classification using distant supervision</article-title>
          ,
          <source>CS224N Project Report</source>
          , Stanford, pp.
          <fpage>1</fpage>
          -
          <lpage>12</lpage>
          (
          <year>2009</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref7">
        <mixed-citation>
          7.
          <string-name>
            <surname>Liu</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          :
          <article-title>Sentiment Analysis</article-title>
          and
          <string-name>
            <given-names>Opinion</given-names>
            <surname>Mining</surname>
          </string-name>
          , Morgan &amp; Claypool Publishers, (
          <year>2012</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref8">
        <mixed-citation>
          8.
          <string-name>
            <surname>Pang</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Lee</surname>
            ,
            <given-names>L.</given-names>
          </string-name>
          :
          <article-title>Opinion mining and sentiment analysis</article-title>
          .
          <source>Foundations and Trends in Information Retrieval</source>
          , vol.
          <volume>2</volume>
          , no.
          <issue>1-2</issue>
          , pp.
          <fpage>1</fpage>
          -
          <lpage>135</lpage>
          (
          <year>2008</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref9">
        <mixed-citation>
          9.
          <string-name>
            <surname>Pang</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Lee</surname>
            ,
            <given-names>L.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Vaithyanathan</surname>
            ,
            <given-names>S</given-names>
          </string-name>
          ,:
          <article-title>Thumbs up?: sentiment classification using machine learning techniques</article-title>
          .
          <source>In: Proceedings of the ACL-02 Conference on Empirical Methods in Natural Language Processing</source>
          , pp.
          <fpage>79</fpage>
          -
          <lpage>86</lpage>
          (
          <year>2002</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref10">
        <mixed-citation>
          10.
          <string-name>
            <surname>Phienthrakul</surname>
            ,
            <given-names>T.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Kijsirikul</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Takamura</surname>
            ,
            <given-names>H.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Okumura</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          ,:
          <article-title>Sentiment classification with support vector machines and multiple kernel functions'</article-title>
          .
          <source>In: Proceedings of the 2009 International Conference on Neural Information Processing</source>
          , pp.
          <fpage>583</fpage>
          -
          <lpage>592</lpage>
          (
          <year>2009</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref11">
        <mixed-citation>
          11.
          <string-name>
            <surname>Rao</surname>
            ,
            <given-names>T.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Srivastava</surname>
            <given-names>S.:</given-names>
          </string-name>
          <article-title>Analyzing stock market movements using twitter sentiment analysis</article-title>
          .
          <source>In: Proceedings of the 2012 International Conference on Advances in Social Networks Analysis and Mining</source>
          , pp.
          <fpage>119</fpage>
          -
          <lpage>123</lpage>
          , Washington, DC, USA (
          <year>2012</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref12">
        <mixed-citation>
          12.
          <string-name>
            <surname>Si</surname>
            ,
            <given-names>J.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Mukherjee</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Liu</surname>
            ,
            <given-names>B.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Li</surname>
            ,
            <given-names>Q.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Li</surname>
            ,
            <given-names>H.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Deng</surname>
            ,
            <given-names>X.</given-names>
          </string-name>
          :
          <article-title>Exploiting Topic based Twitter Sentiment for Stock Prediction</article-title>
          .
          <source>In: Proceedings of the 51st Annual Meeting of the Association for Computational Linguistics, Association for Computational Linguistics</source>
          , pp.
          <fpage>24</fpage>
          -
          <lpage>29</lpage>
          (
          <year>2013</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref13">
        <mixed-citation>
          13.
          <string-name>
            <surname>Smailovic</surname>
            ,
            <given-names>J.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Grcar</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Lavrac</surname>
            ,
            <given-names>N.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Znidarsic</surname>
            ,
            <given-names>M.</given-names>
          </string-name>
          :
          <article-title>Stream-based active learning for sentiment analysis in the financial domain</article-title>
          .
          <source>Information Sciences</source>
          , vol.
          <volume>285</volume>
          , pp.
          <fpage>181</fpage>
          -
          <lpage>203</lpage>
          (
          <year>2014</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref14">
        <mixed-citation>
          14.
          <string-name>
            <surname>Sprenger</surname>
            ,
            <given-names>T. O.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Tumasjan</surname>
            ,
            <given-names>A.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Sandner</surname>
            ,
            <given-names>P. G.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Welpe</surname>
            ,
            <given-names>I. M.</given-names>
          </string-name>
          :
          <article-title>Tweets and trades: The information content of stock microblogs</article-title>
          .
          <source>European Financial Management</source>
          , vol.
          <volume>20</volume>
          , no.
          <issue>5</issue>
          , pp.
          <fpage>926</fpage>
          -
          <lpage>957</lpage>
          (
          <year>2014</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref15">
        <mixed-citation>15. Türk Dil Kurumu, http://www.tdk.gov.tr</mixed-citation>
      </ref>
      <ref id="ref16">
        <mixed-citation>16. Türkiye Merkez Bankası, http://evds.tcmb.gov.tr</mixed-citation>
      </ref>
      <ref id="ref17">
        <mixed-citation>17. Twitter4j, http://twitter4j.org/en/index.html</mixed-citation>
      </ref>
      <ref id="ref18">
        <mixed-citation>18. Waikato Üniversitesi Makine Öğrenme Grubu, http://www.cs.waikato.ac.nz/ml/weka/</mixed-citation>
      </ref>
      <ref id="ref19">
        <mixed-citation>
          19.
          <string-name>
            <given-names>Wright</given-names>
            <surname>Gillham</surname>
          </string-name>
          , N. :
          <article-title>A Life of Sir Francis Galton: From African Exploration to the Birth of Eugenics</article-title>
          , Oxford University Press (
          <year>2001</year>
          )
        </mixed-citation>
      </ref>
      <ref id="ref20">
        <mixed-citation>
          20.
          <string-name>
            <surname>Yu</surname>
            ,
            <given-names>L. C.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Wu</surname>
            ,
            <given-names>J. L.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Chang</surname>
            ,
            <given-names>P. C.</given-names>
          </string-name>
          ,
          <string-name>
            <surname>Chu</surname>
            ,
            <given-names>H. S.</given-names>
          </string-name>
          :
          <article-title>Using a contextual entropy model to expand emotion words and their intensity for the sentiment classification of stock market news</article-title>
          .
          <source>Knowledge-Based Systems</source>
          , vol.
          <volume>41</volume>
          , pp.
          <fpage>89</fpage>
          -
          <lpage>97</lpage>
          (
          <year>2013</year>
          )
        </mixed-citation>
      </ref>
    </ref-list>
  </back>
</article>