Skal man få fullt utbytte av dataene man sitter, på må disse integreres, samles og vaskes. Det kan være både vanskelig og dyrt, men fremskritt innen integrasjonsteknologi har gjort dette vesentlig enklere og mer fleksibelt. Vi forteller om teknikker vi har brukt for dette, og ser på noen kundecaser.
JavaZone 2015: Semantisk integrasjon hos Hafslund AMSSimen Sommerfeldt
- hvordan "data oriented architecture" brukes i Norges største IOT prosjekt. Du får en intro til prosjektet, til semantisk integrasjon, hvordan det settes opp, og hvordan det ble brukt i prosjektet. Opptak her: https://vimeo.com/album/3556815/video/138849272
Integrasjonsdagene 2014 - Lenkede data - automagisk integrasjon?Steinar Skagemo
Presentasjon på Communicates arrangement "Integrasjonsdagene" i Halden. Presentasjonen inneholder en lang rekke eksempler på bruk av lenkede data / linked data / RDF i offentlig sektor i Norge, samt noen internasjonale eksempler. De fleste foilene har pekere til kilden, for mer informasjon
Begrepsapparat for åpne data med semantisk web teknologiPia Jøsendal
A presentation given in Norwegian at Oslo Open Data Forum.
Presentasjonen gir en kort innføring i åpne offentlige data og behovet for felles begrepsapparat for å håndtere felles nasjonale registre av åpen data. Holdt i 2009.
Skal man få fullt utbytte av dataene man sitter, på må disse integreres, samles og vaskes. Det kan være både vanskelig og dyrt, men fremskritt innen integrasjonsteknologi har gjort dette vesentlig enklere og mer fleksibelt. Vi forteller om teknikker vi har brukt for dette, og ser på noen kundecaser.
JavaZone 2015: Semantisk integrasjon hos Hafslund AMSSimen Sommerfeldt
- hvordan "data oriented architecture" brukes i Norges største IOT prosjekt. Du får en intro til prosjektet, til semantisk integrasjon, hvordan det settes opp, og hvordan det ble brukt i prosjektet. Opptak her: https://vimeo.com/album/3556815/video/138849272
Integrasjonsdagene 2014 - Lenkede data - automagisk integrasjon?Steinar Skagemo
Presentasjon på Communicates arrangement "Integrasjonsdagene" i Halden. Presentasjonen inneholder en lang rekke eksempler på bruk av lenkede data / linked data / RDF i offentlig sektor i Norge, samt noen internasjonale eksempler. De fleste foilene har pekere til kilden, for mer informasjon
Begrepsapparat for åpne data med semantisk web teknologiPia Jøsendal
A presentation given in Norwegian at Oslo Open Data Forum.
Presentasjonen gir en kort innføring i åpne offentlige data og behovet for felles begrepsapparat for å håndtere felles nasjonale registre av åpen data. Holdt i 2009.
[NORWEGIAN only] Revisjon av DCAT-AP-NO versjon 1.1André Torkveen
A public agency invited representatives from other agencies and vendors alike for an open work session. Difi inviterte til samlet åpen arbeidssamling med både offentlige etater og konsulentmiljø tilstede.
[Norwegian only:] Hvordan skal vi bygge fellesskapets digitale tvilling?André Torkveen
NOKIOS ’23 sitt ‘kurs 4’ handlet om hvordan man kan bruke digital tvilling til å «Oppdage mulighetene for økt effektivitet og bærekraft i offentlig sektor». Dette var ett av fire innlegg, hold av Reidun Kittelsrud (Kartverket) og André Torkveen (Knowit). De øvrige innleggende ble holdt av Andreas Amundsen (Ålesund kommune), Tor Gausemel Kristensen (da: Bodø kommune) og Håkon Haugros (Accenture).
VidenDanmark afholdt den 8.10.2009 seminar om Enterprise Search Best Practice 2009. Ved seminaret var der præsentationer fra Findwise, Convergens, Scanjour, Metier, COWI og Creuna. Der blev præsenteret en række søgeteknologier: Fast, Google Search Application, Autonomy, Sharepoint. Seminaret blev understøttet af et seminar 2.0 - system. Se hele dokumentationen på http://videndanmark.dk/8-10-Search-2009.441.0.html.
Fra tjenesteorientert til dataorientert integrasjonStian Danenbarger
Sammenlikning av to paradigmer for systemintegrasjon. Utarbeidet for UNINETT teknisk samling for UH-sektoren 19. - 21. april 2016 i Trondheim. Videoopptak fra presentasjonen: https://mediasite.uninett.no/Mediasite/Play/201139f4b538447eb533449e2f4598eb1d
Tross all publisiteten har få utviklere erfaring med bruk og publisering av åpne data. Foredraget gir deg praktisk innføring i teori og praksis du trenger for å bruke åpne data på egenhånd.
Dette foredraget ble holdt først på Software konferansen den 13.februar 2013.
Dataeierskap som grunnlag for applikasjonsutvikling - Make Data Smart Trondhe...Mufrid Krilic
Tradisjonelt har dataanalyse og rapportering tatt utgangspunkt i spesiallagde datamodeller opprettet på bakgrunn av konvertering og transformasjon av operasjonell data. Det er derimot applikasjonsutviklingen som ligger bak designet av operasjonell data og som regel har denne datamodellen vært lite egnet til analyse og rapportering. En av de direkte årsakene til dette skillet er tilnærmingen som de aller fleste applikasjonsutviklere tar, nemlig funksjonell dekomponering av systemer, basert på systemfunksjoner beskrevet i kravspesifikasjoner, use-case, produkt backlogg etc.
Hva om det fantes en annen måte å utvikle applikasjoner på som gjør at data spiller mye mer sentral rolle i dekomponering av systemer? Hva om denne måten å modularisere systemet på gjør at dataanalyse, rapportering og applikasjonsutvikling plutselig sitter mye nærmere hverandre?
Bli med og se hvordan komplekse systemer kan designes med bakgrunn i dataeierskap og forretningstjenester (business capabilities), noe som fører til et helt annet utgangspunkt for dataanalyse og rapportering. Presentasjonen er basert på reelle historier fra helse- og forsikringsdomenet.
Statistisk sentralbyrå har et nytt API der en kan redigere spørringer mot alle 5000 tabeller i Statistikkbanken. Det er også utviklet et brukervennlig konsoll.
[NORWEGIAN only] Revisjon av DCAT-AP-NO versjon 1.1André Torkveen
A public agency invited representatives from other agencies and vendors alike for an open work session. Difi inviterte til samlet åpen arbeidssamling med både offentlige etater og konsulentmiljø tilstede.
[Norwegian only:] Hvordan skal vi bygge fellesskapets digitale tvilling?André Torkveen
NOKIOS ’23 sitt ‘kurs 4’ handlet om hvordan man kan bruke digital tvilling til å «Oppdage mulighetene for økt effektivitet og bærekraft i offentlig sektor». Dette var ett av fire innlegg, hold av Reidun Kittelsrud (Kartverket) og André Torkveen (Knowit). De øvrige innleggende ble holdt av Andreas Amundsen (Ålesund kommune), Tor Gausemel Kristensen (da: Bodø kommune) og Håkon Haugros (Accenture).
VidenDanmark afholdt den 8.10.2009 seminar om Enterprise Search Best Practice 2009. Ved seminaret var der præsentationer fra Findwise, Convergens, Scanjour, Metier, COWI og Creuna. Der blev præsenteret en række søgeteknologier: Fast, Google Search Application, Autonomy, Sharepoint. Seminaret blev understøttet af et seminar 2.0 - system. Se hele dokumentationen på http://videndanmark.dk/8-10-Search-2009.441.0.html.
Fra tjenesteorientert til dataorientert integrasjonStian Danenbarger
Sammenlikning av to paradigmer for systemintegrasjon. Utarbeidet for UNINETT teknisk samling for UH-sektoren 19. - 21. april 2016 i Trondheim. Videoopptak fra presentasjonen: https://mediasite.uninett.no/Mediasite/Play/201139f4b538447eb533449e2f4598eb1d
Tross all publisiteten har få utviklere erfaring med bruk og publisering av åpne data. Foredraget gir deg praktisk innføring i teori og praksis du trenger for å bruke åpne data på egenhånd.
Dette foredraget ble holdt først på Software konferansen den 13.februar 2013.
Dataeierskap som grunnlag for applikasjonsutvikling - Make Data Smart Trondhe...Mufrid Krilic
Tradisjonelt har dataanalyse og rapportering tatt utgangspunkt i spesiallagde datamodeller opprettet på bakgrunn av konvertering og transformasjon av operasjonell data. Det er derimot applikasjonsutviklingen som ligger bak designet av operasjonell data og som regel har denne datamodellen vært lite egnet til analyse og rapportering. En av de direkte årsakene til dette skillet er tilnærmingen som de aller fleste applikasjonsutviklere tar, nemlig funksjonell dekomponering av systemer, basert på systemfunksjoner beskrevet i kravspesifikasjoner, use-case, produkt backlogg etc.
Hva om det fantes en annen måte å utvikle applikasjoner på som gjør at data spiller mye mer sentral rolle i dekomponering av systemer? Hva om denne måten å modularisere systemet på gjør at dataanalyse, rapportering og applikasjonsutvikling plutselig sitter mye nærmere hverandre?
Bli med og se hvordan komplekse systemer kan designes med bakgrunn i dataeierskap og forretningstjenester (business capabilities), noe som fører til et helt annet utgangspunkt for dataanalyse og rapportering. Presentasjonen er basert på reelle historier fra helse- og forsikringsdomenet.
Statistisk sentralbyrå har et nytt API der en kan redigere spørringer mot alle 5000 tabeller i Statistikkbanken. Det er også utviklet et brukervennlig konsoll.
Hvordan få forretningsverdi av Big Data - Lars Marius GarsholBouvet ASA
Hva slags typer analyse kan være interessant for en typisk norsk kunde? Hvilken forretningsverdi kan disse ha? Hva trenger man for å kunne kjøre analysene? Hva slags verktøy finnes?
I dette innlegget går Lars Marius gjennom noen oppsiktsvekkende eksempler på bruk av Big Data-analyse i den virkelige verden. Vi ser også på hva slags teknikker som ligger under analysen, og hvordan disse fungerer. Egentlig er dette tung matematikk og statistikk, men det går an å gi et inntrykk av hovedprinsippene nokså enkelt.
Fra Big Data til Small Data - Ina SvarødBouvet ASA
I dette innlegget får du høre om hvordan man i kommunikasjon med kunder og brukere kan dra nytte av informasjon man har i databasen. Riktig bruk av informasjonen kan gjøre at budskapet blir relevant for mottakeren samtidig som den støtter opp under virksomhetens hovedmål for aktiviteten og bedriftens strategi. Det blir presentert eksempler fra kampanjer laget for Ice.net, Kreftforeningen og Redningsselskapet.
Foredrag holdt av Nina Taraldsen på Bouvet Innsikt 2012 i Larvik og Kristiansand. Om brukskvalitet, emotional design og 3 tips til hvordan du kan skape en god brukeropplevelse.
1. Faktabasert, strukturert søk
med Recommind Decisiv Search
Sømløs virksomhet, Bouvet, 2011-12-14
Petr Vasilev, <petr.vasilev@bouvet.no>
1
2. Alt er i orden
• Definere forskjellige skjemer og system
spesifiske språk
• Oversette mellom de
• Synkronisere data kilder
• Federere mellom data
kilder
2
3. Eller er det?
• Data er veldig absktrakt, generisk og fleksibel
• Det blandes masse forskjellige systemer
sammen
• Vanskelig å vise semantisk data til bruker
3
4. Datapresentasjon lag
Tekonologiske viktig
• Skalere sammen med datakilder
• Levere resultater på det forteste
• Støtte eksisterende autorisasjon/autentisering
mekanismer
• Støtte datafleksebilitet
4
5. Datapresentasjon lag
Viktig for brukerne
• Enkelt brukergrensesnitt
• Gi sjanse å navigere over data, ikke bare lete
• Vise koblet data
• Støtte språk
(lemmatisering, synonymer, stopord)
• Osv
5
7. Alternativer?
• Direkte tilgang til RDF lagringsted/datakilder
med SPARQL
– Ingen indeksering ventetid
– Ingen OOTB (out of the box) støtte til sikkerhet
mekanismer og SSO (single sign on)
– Ingen OOTB brukergrensesnitt
– Ingen spårkstøtte
7
8. Recommind? Fast? Noe annet?
• Recommind
– Fleksibelt data skjema
– Har muligheter for avansert data analyse
• Fast Search for Sharepoint
– Integreres utrolig bra i MS miljø
• Andre alternativer
– Attivio
– Expert Systems
8
9. Arkitektur
Recommind Decisiv Search
Data
source 1
Indexing / Querying User
Connector
Search component interface
Data
source 1
Publisher
Autorization
External and
system authntication
source
9
10. Fleksibel data skjema
• Det tar inn alt som kommer fra konnektor
– Data sitter i indeksen som XML
• Det er mulig å definere felter etter data er inn
• Det er mulig å skrive sine egene konnektorer
– Vi har skrevet konnektor til SDShare
10
11. Navigering over entiteter
• Det er mulig å definere søkefilterer etter data
er inn
– Vi kan opprette nye filterer uten komplett
reindeksering
• Det er mulig å binde etiketter til verdier
– http://psi.kunde.no/ifs/customer/1 = “Statnett”
11
13. Navigering over objekter i søk
• Nedtrekksmenyen på hovedside
– Engasjerer brukerene
– Gir mulighet å naivgere, ikke å søke
• Søkefilter verdier i boksen
– Mye lettere å vite hva vi filtrer med
• Avansert søk for de modige
13
14. Navigering over objekter på entitet
Kundestøtte Kundestøtte
• Følge metadata lenker
is part
Oslo of Oslo Sentrum
– F eks departament nesten alltid har overordne
department
• Vise alle koblete objekter
– Vise alle anlegg og dokumenter, som er relatert til sak
14
15. Personalisering
ad/user/e29266
• Vis alle dine dokumenter works-in
– Din avdeling ad/department/123 same-as ifs/company/31
– Din selskap
• Framtid: OWL resonering
– Få info som er nytt for deg
15
16. Avansert dataanalyse
• OCR (Optical character recognition)
• Dyp tekstanalyse
– PSVM (Probabilistic Support Vector Machines)
– Skille mellom møtereferat og nabovarsel
• Spørringsutvidelse
– PLSA (Probabilistic Latent Semantic Analysis)
16
17. Recommind sine ulemper
• Noe vanskelig problemer med arkitektur
– Spesielt med store taksonomier
• Ingen push API
• Sessjon basert Query API
• Lisens modell
17
25. Oppsummering
Recommind som søkemotor i semantisk miljø
• Kjempe god verktøy til å bygge opp sluttbruker
grensnitt
• Spiller bra sammen med RDF/SPARQL basert
løsninger
• Har noen ulemper, men de er ikke kritiske
25