Piek vossen-data-donderdag

1. Sentimenten, meningen en perspectieven
in taal
Piek Vossen
CLTL, VU University Amsterdam
Datadonderdag, November 19, 2015
Amsterdam

2. http://wersm.com/how-much-data-is-generated-every-minute-on-social-media/
Facebook: 1.4 billion active monthly
users, 4 million likes/minute
Instagram: 300 million monthly
users, 1.7 million likes/minute
Vine: 1 million video’s played/
minute
Tinder: 290K matches/minute
Twitter: 347K tweets/minute
Youtube: 300 hours upload/minute
Buzzfeed: 34K video watches/
minute
Social media
2015

3. We leven niet alleen in een
informatiemaatschappij
…
We leven met name in een
communicatiemaatschappij

4. Everybody has an opinion
• Good or bad

5. Who wants an opinion?
• Companies: product feedback, market analysis, competitor analysis,
customer feedback, automated stock trading, CRM
• Politicians and countries: image makers
• You:
• anyone overwhelmed by the variety on the web:
• too many different voices, too little trustworthiness
• You want to buy a camera
• You want to find medical advice
• You want to go somewhere on a holiday
Based on Ed Hovy, USC, Information Sciences Institute, www.isi.edu/~hovy

7. Sentiment & Stock market
J. Sharma, 7/29 http://www.csee.umbc.edu/2013/07/ms-defense-sentiment-
analysis-on-tweets-and-their-relationship-with-stock-market-trends-j-sharma-729/

9. http://tour-pedia.org/about/index.html

12. Everybody has an opinion
• Good or bad
• About what?
• Who are you?
• When?
• What emotion?
• Why?

13. A hotel review
Nothing special really. Comfortable and clean but very boring decor in comparison to other NH
hotels. I stayed in NH in Brussels and Zurich and I really liked them because of their modern
and stylish design and big rooms. This one was just like any other hotel. Basic rooms with
basic and dull decor - bit disappointing. The customer service was average. The rate was very
expensive and I still had to pay for Internet and 20 euros for breakfast!!! It was good but way
overpriced! The best thing about the hotel was the location - city centre, 2min from a metro
stop.

14. A hotel review
Nothing special really. Comfortable and clean but very boring decor in comparison to other NH
hotels. I stayed in NH in Brussels and Zurich and I really liked them because of their modern
and stylish design and big rooms. This one was just like any other hotel. Basic rooms with
basic and dull decor - bit disappointing. The customer service was average. The rate was very
expensive and I still had to pay for Internet and 20 euros for breakfast!!! It was good but way
overpriced! The best thing about the hotel was the location - city centre, 2min from a metro
stop.
Named entities
- this NH hotel
- NH Brussels
- NH Zurich
http://en.wikipedia.org/wiki/NH_Hoteles
http://dbpedia.org/page/NH_Hoteles
http://en.wikipedia.org/wiki/Brussels
http://en.wikipedia.org/wiki/Zurich

15. • Nothing special really. Comfortable and clean but very boring decor in
comparison to other NH hotels. I stayed in NH in Brussels and Zurich and I
really liked them because of their modern and stylish design and big rooms.
This one was just like any other hotel. Basic rooms with basic and dull decor -
bit disappointing. The customer service was average. The rate was very
expensive and I still had to pay for Internet and 20 euros for breakfast!!! It was
good but way overpriced! The best thing about the hotel was the location -
city centre, 2min from a metro stop.
Named entities: Properties: Sentiments:
- this NH hotel - décor - nothing special really
- NH Brussels - design - comfortable and clean
- NH Zurich - room - boring
- clean (hygiene) - really liked
Co-references: - service - modern and stylish
- other - rate - big
- them - Internet - just
- this one - breakfast - basic and dull
A hotel review

16. • Nothing special really. Comfortable and clean but very boring decor in
comparison to other NH hotels. I stayed in NH in Brussels and Zurich and I
really liked them because of their modern and stylish design and big rooms.
This one was just like any other hotel. Basic rooms with basic and dull decor -
bit disappointing. The customer service was average. The rate was very
expensive and I still had to pay for Internet and 20 euros for breakfast!!! It
was good but way overpriced! The best thing about the hotel was the
location - city centre, 2min from a metro stop.
Overall Design Room Service Price Location Transport
This NH 2 1,5 2 3 1 4 4
NH Brussels 4 4 4
NH Zurich 4 4 4
Scale 1 (negative) to 5 (positive)
A hotel review

17. Opinion is a relation
• Holder usually author or source in the text
• Emotion or judgement
• Target can be anything: people, situations,
products, future, past, systems, ideas

18. Double propagation
START

20. Cross-lingual/cultural sentiment
GENERAL-EVALUATION 669
en definitely recommend; strong positive
es recomendariamos sin duda alguna positive
fr recommander chaleureusement strong positive
it consiglio vivamente positive
NOISE 1117
en a lot of noise strong negative
fr énormement de bruit strong negative
it molto rumore negative
nl veel lawaai negative
nl ontzettend veel lawaai strong negative
• 2,486 expressions in hotel reviews
• annotated in 6 languages
• 8 aspect groups (food, clean, price,
behaviour, general evaluation, size, location,
noise, size),
http://opener-fp7project.rhcloud.com

21. Cultural Normalization
Differences in language use in hotel reviews:
• Dutch and Spanish are more expressive as they show a relative over-use of strong expressions
• German and English are less expressive as they show a relative under-use of strong expressions
Differences in ratings in hotel reviews:
• English and Germans give more
extreme (strong positive and strong negative)
ratings than the other cultures
=> People from German and English culture are quite strong when expressing their emotions in ratings,
but they seem to downgrade their emotions when expressing them with language

22. Reviewer & reader ratings
• The hotel seems rather outdated. The
breakfast room is just not big enough to
cope with the Sunday-morning crowds.

23. Reviewer & reader ratings
• The hotel seems rather outdated. The
breakfast room is just not big enough to
cope with the Sunday-morning crowds.
• Maks and Vossen (RANLP-2013)
Review
rating
7
Reader
rating
negative
Target= hotel, holiday Target= aspects in the text
9% - 37% sentiment mismatch at document level

24. Its is complex
When?
First interest Buyer Support Upgrade
Who are you?
female, 32, Dutch, educated
mountaineerparent
What aspect?
weightwifi
What sentiment?
criticalangry

25. What is the landscape
behind thumbs up & down?
• World is complex
• We are complex
• Our language is complex

26. Sentiment =
response to a changing world
FuturePast
Hope
Fear
Nostalgic
Frustrated
Speculate
Summarise

27. Die labbekakker is misschien bang dat zij vermoedt
dat zijn baas verwacht dat hij het zeker niet zou
hebben moeten doen.

28. 2009: Vaccinatie 12-jarige meisjes tegen
papillomavirus (HPV)
● Opgenomen in landelijk vaccinatie-programma
ondanks hoge kosten
● Ondersteund door overheid en wetenschap
● Ondermijnd door actieve groepen op Internet:
“Angstige berichten uit Amerika bijvoorbeeld over meisjes die een half uur na inenting
verlamd raakten. In Amerika, dat ruim een jaar geleden begon met het inenten van
tienermeisjes met het vaccin Gardasil, zijn tientallen ernstige ‘bijwerkingen’ gerapporteerd
waarin een verband met de vaccinaties wordt vermoed.”
● Gedeeltelijk mislukt: 60% liet zich inenten, lager dan
verwacht

29. http://www.wanttoknow.nl/nieuws/hpv-vaccin-
gardasil-vernielt-eierstokken-jonge-vrouw/
Hoe naïef kun je zijn als wetenschapper die een vaccin uitvindt tegen
HPV, door bijwerkingen niet in kaart te brengen. Het HPV-vaccin, dat
‘baarmoederhalskanker’ zou bestrijden..? Of is het zo dat dit verhaal
het gevolg is van bewust gemanipuleerde vaccins..? Wij sluiten niets
meer uit, en jij mag het opnieuw weer zeggen. Want noch de
wetenschappers, noch de politieke beleidsmakers schijnen het nog
te weten.. Zij volgen bijna klakkeloos het geratel van de
farmaceutische industrie, die niet voor niks als ‘Big Pharma’ te boek
staat..! Een industrie, die groot is geworden door manipulatief
handelen, heftig politiek lobbywerk, maar ook door falsificaties en
regelrechte juridische fraude..

30. http://www.earth-matters.nl/5/7516/gezondheid/de-
gevaren-van-de-hpv-vaccins-gardasil-en-cervarix-
bijwerkingen-baarmoederhalskanker.html
Gardasil en Cervarix bieden GEEN bescherming voor vrouwen met een HPV-
infectie hebben en verhogen juist de kans op kankercellen met 44,6%! Zie:
vactruth.com / kanker-therapie.nl
Zowel Gardasil en Cervarix bevatten aluminium hydroxide, een neurologisch gif
dat ernstige gevaarlijke bijwerkingen veroorzaakt. Gardasil bevat 0.225 mg
aluminium hydroxide per prik en Cervarix bevat 0.5 mg per prik. Zie:
argusoog.org / proliberty.com
Medische autoriteiten claimen dat Gardasil en Cervarix 'veilig' zijn omdat het
aantal bijwerkingen tijdens de klinische onderzoeken vrijwel gelijk was met de
controle-groep, die een placebo vaccin ontving. Maar in de placebo vaccins zat
ook aluminum hydroxide... Zie:uitdaging.net
HPV-vaccinaties hebben geleid tot beroertes, epilepsie, verlammingen, duizeligheid, flauwvallen, coma, hoofdpijn, slapheid,
chronische vermoeidheid, auto-immuun ziekten, gewrichtspijn, hartproblemen, korte adem, haaruitval, gewichtsverlies, misselijkheid, stemmingswisselingen,
slapeloosheid, huiduitslag, jeuk, zwellingen, zenuwpijn, spierpijn, rugpijn, opgezette lymfeklieren, spraak en oogproblemen, gehoorverlies, trombosis, vergrote
lever, menstruatiepijn, vergrote eileiders, eierstokcysten, onvruchtbaarheid, spontane abortussen, miskramen, geboorteafwijkingen, baarmoederhalskanker en al
meer dan 100 sterfgevallen!
logica?

31. http://www.apotheek.nl/Medische_informatie/Medicijnen/
Producten/Gardasil.aspx?mId=10704&rId=2078
Soms
● Pijn op de plaats van de injectie, soms met roodheid, zwelling,
harde plek onder de huid of bloeding.
● Griepachtige verschijnselen, zoals hoofdpijn, koorts, spierpijn,
vermoeidheid, misselijkheid of buikpijn...
● Flauwvallen, een enkele keer met stuiptrekkingen, vreemde
gevoelswaarneming of problemen met zien....

32. pijn plaats injectie
roodheid
harde plek onder huid of bloeding
koorts
vermoeidheid
misselijkheid
buikpijn
stuiptrekkingen
vreemde gevoelswaarneming
problemen met zien
braken
diarree
galbulten
pijn in de armen of benen
jeuk
benauwdheid
opgezwollen lippen, tong of gezicht
beroertes
epilepsie
verlammingen
duizeligheid
coma
slapheid
chronische vermoeidheid
auto-immuun ziekten
hartproblemen
korte adem
haaruitval
gewichtsverlies
stemmingswisselingen
slapeloosheid
zenuwpijn
rugpijn
opgezette lymfeklieren
spraak en oogproblemen
gehoorverlies
trombosis
vergrote lever
menstruatiepijn
vergrote eileiders
eierstokcysten
onvruchtbaarheid
spontane abortussen
miskramen
geboorteafwijkingen
baarmoederhalskanker
zwellingen
jeuk
spierpijn
flauwvallen
hoofdpijn
gewrichtspijn
misselijkheid
huiduitslag
www.earth-matters.nl
www.apotheek.nl
www.dokterdokter.nl
roodheid
hoofdpijn
spierpijn
zwellingen

33. www.wanttoknow.nl
Frank Bleeker
www.naturalnews.com
www.apotheek.nl
www.dokterdokter.nl
nvkp.nl
slippdigby.wordpress.com
alexautismoysurecuperacion.wordpress.com
www.autismweb.com
www.tinussmits.nl
www.cease-therapie.nl
www.menssana.nu
www.nujij.nl
www.rivm.nl
wijwordenwakker.org
www.earth-matters.nl
kanker-therapie.nl
vaccinatiesdoorgeprikt.nl www.klassiekehomeopathie.net
Provenance networks
martinvrijland.com
www.lareb.nl
www.actueelnieuwsnederland.nl

34. 34
Meningen en perspectieven
• Wat wordt beweerd: bijwerkingen van vaccinatie
• Wie beweert wat?
• Wanneer beweert die persoon dat?
• Is het een bewering in het hier en nu, de toekomst?
• Is de persoon zeker of onzeker?
• Ontkent of bevestigt de persoon het?
• Welke emotie heeft de persoon bij dit gegeven?
• Gaat het om een morele of esthetische waardering?
• Bij wie wordt de verantwoordelijkheid neergelegd?

35. www.apotheek.nl
www.dokterdokter.nl
HPV vaccin CAUSES
zwellingen
gehoorverlies
HPV vaccin CAUSES
2011-12-26 certain
uncertain2009–03-06
Formal Perspective model
www.earth-matters.nl
gaf:attributedTo
gaf:attributedTo
gaf:attributedTo
gaf:attributedTo

36. Conclusies
● Het Internet bevat een schat aan informatie verpakt in
taal
● Mensen en taal zijn misleidend en vol booby traps
● Verbazingwekkend hoe makkelijk mensen een
complex beeld vormen van sociale-psychische
perspectief relaties ondanks complexiteit van relaties
en taal
● Om de schat te vinden is geavanceerde
taaltechnologie nodig om betekenissen, feiten en
meningen te ontrafelen
● Broninformatie is essentieel als informatielaag