Wikiprojekti:Oodi/14. helmikuuta 2019

Oodi-wikiprojektissa on tarkoitus pitää wikitapaamisia Helsingin keskustakirjasto Oodissa. Päämääränä tapaamisilla on opintopiirin tapaan esitellä Wikipediaan liittyviä projekteja ja tekniikoita. Samalla se toimii paikkana, johon aloittelevatkin wikipedistit voivat tulla muokkaamaan avointa tietosanakirjaa yhdessä muiden kanssa.

Kolmannen tapaamiskerran päämääränä on käydä läpi sitä miten luettelomuodossa olevia sisältöjä saadaan tallennettua OpenRefine 3 -työkalulla Wikidataan. Tapaamispaikkana on Oodin 2. kerroksen ryhmätila 5 kl 19.00-22.00.

OpenRefine 3

• OpenRefine 3.x:lla, katso http://openrefine.org/

Ohjeita

• d:Wikidata:Tools/OpenRefine
• d:Wikidata:Tools/OpenRefine/Editing/Tutorials/Basic_editing

Valmistauduthan jo etukäteen

1. Katso, että olet luonut Wikipedian käyttäjätunnuksen
2. Lataa ja asenna OpenRefine 3.1 - http://openrefine.org/download.html

Mitä käymme läpi?

• Taulukkomuotoisen datan tuominen OpenRefineen eri muodoissa. Voit ottaa mukaan tai etsiä verkosta sopivan datasetin. Katso, että datasettisi kohteet sopivat Wikidataan merkittävyydeltään ja että datasetissä on korkeintaan muutamakymmentä riviä. Sopiva datasetti on sellainen, jonka rivi on tai voisi olla Wikipedia-artikkeli.
• Wikidatan tekijänoikeuden lisensointimalli on CC0. Tekijänoikeuslain mukaisesti datasetistä voi kopioida vähäpätöisen otoksen ilman tekijänoikeuden rajoituksia. Jos haluat siirtää kokonaisen datasetin, sen on oltava tekijänoikeuksista vapaata, joko Public Domain tai CC0.
• Miten dataa siivotaan? Datasetissäsi sama nimi voi olla esimerkiksi kirjoitettu usealla eri tavalla. Ehkä etu- ja sukunimi tarvitsee laittaa eri järjestykseen tai tiedot on sullottu yhteen kenttään. OpenRefinessa on erilaisia työkaluja, joilla dataa työstetään yhä yhdenmukaisemmaksi ja valmiimmaksi vietäväksi Wikidataan.
• Osa tiedoista voi olla jo ennestään Wikidatassa ja osalle voi olla ristiriitaista tietoa. Merkittävä osa työstä kohdistuu yhteneväisten kohteiden tunnistamiseen ja yhdistämiseen. Tätä kutsutaan rekonsilioinniksi. Rekonsilioinnissa auttaa, jos datasettisi kohteilla on auktoriteettitunnus, kuten ISBN, VIAF-tunnus, YSO-tunnus tai vastaava.
• Kaikille lisättäville tiedoille on muistettava luoda korkealaatuiset lähdeviitteet. Viite voi olla Wikidataan talletettu kohde (julkaisu, tietokanta tms.) tai verkosta löytyvä resurssi (julkaisu, verkkosivu, tietokanta tms.). Varmista, että sinulla on nämä tiedot.
• Kun tiedot on yhdenmukaistettu, muotoiltu ja olemassaolevat kohteet on tunnistettu, tiedot voi viedä Wikidataan.

OpenRefine video walkthrough

osa 1 - Tietojen lataus OpenRefineen CSV-tiedostosta. Ladattujen tietojen linkitys Wikidatakohteisiin.

Osa 2 - Ladattuje tietojen siivous OpenRefine -työkalussa.

Osa 3 - Siivottujen tietojen vienti OpenRefinestä Wikidataan.

OpenRefine esimerkki

Wikidata	Henkilön nimi	Familyname	First name 1	First name 2
Q4115189	Ilmo Hassinen	Hassinen	Ilmo	Ensio
Second Wikidata sandbox	Gunnar Myllylä	Myllylä	Johan	Gunnar
Third sandbox	Kalevi Lönnqvist	Lönnqvist	Jouko	Kalevi

Ensimmäinen esimerkki

Ohjeessa muokataan Wikidatan hiekkalaatikkoa johon voi tehdä kokeilumuokkauksia.

1. Asenna OpenRefine 3
2. Kopioi ylläoleva taulukko leikepöydälle
3. Avaa OpenRefine 3
4. Valitse Clipboard
5. Liitä teksti leikepöydältä Paste data from clipboard here -laatikkoon
6. Klikkaa Next
7. Vaihda project name kenttään projektiksi "Esimerkki"
8. Klikkaa Create project'
   
   

9. 

   Start reconciling

   Valitse otsikosta Wikidata Reconcile -> Start reconciling
10. Valitse Serviceksi Wikidata (en)
11. Valitse kenttään Reconcile each cell to an entity of one of these types arvo Wikipedian
12. Klikkaa Start reconciling
    
    
13. Valitse otsikosta Familyname Reconcile -> Start reconciling
14. Valitse Wikidata (en)
15. Valitse kenttään Reconcile each cell to an entity of one of these types arvo family name
16. Klikkaa Start reconciling
17. Klikkaan niille joille ei löytynyt tulosta Choose new match
    
    
18. Valitse otsikosta First name 1 Reconcile -> Start reconciling
19. Valitse Wikidata (en)
20. Valitse kenttään Reconcile each cell to an entity of one of these types arvo male given name
21. Klikkaa Start reconciling
22. Valitse niille joille löytyi monta tulosta oikea klikkaamalla oikeaa riviä (klikkaamalla tekstiä saa lisätietoa boksin)
    
    

23. 

    Wikidata schema -valikko

    Klikkaa otsikkoriviltä Extensions: Wikidata -> Edit Wikidata schema
24. Klikkaa Add item
25. Raahaa otsikko Wikidata kohtaan type item or drag reconciled column here
26. Klikkaa Add term
27. Valitse ensimmäiseen terms-kentän sarakkeeseen Description
28. Kirjoita toiseen terms-kentän sarakkeeseen fi ja valitse Suomi avautuvasta valikosta
29. Kirjoita kolmanteen sarakkeeseen "Esimerkki"
    
    
30. Klikkaa Add statement
31. Kirjoita ensimmäiseen kenttään Family name (ja valitse se aukeavasta valikosta)
32. Raahaa toiseen kenttään Family name
    
    
33. Klikkaa Add statement
34. Kirjoita ensimmäiseen kenttään Given name (ja valitse se aukeavasta valikosta)
35. Raahaa toiseen kenttään First name 1
    
    
36. Ylärivillä olevasta Issues -välilehdestä näkee varoitukset ja virheilmoitukset. Tässä tapauksessa siinä pitäisi olla 6 varoitusta siitä, että lähteitä ei ole merkittynä lisätyille tiedoille.
37. Ylärivillä olevasta Preview -välilehdestä näkee mitä OpenRefine olisi kirjoittamassa Wikidataan
    
    
38. Kirjoittaaksesi muutokset Wikidataan
    1. valitse Extensions: Wikidata -valikosta ensin Manage Wikidata account ja aseta tiedot millä tunnuksella muokkaukset tehdään.
    2. valitse Extensions: Wikidata -valikosta Upload edits to Wikidata (ohjeessa muokataan Wikidatan hiekkalaatikkoa)

Katso myös

• Wikiprojekti:Oodi/28. tammikuuta 2019
• d:Wikidata:Recoin
• Cradle - työkalu jolla voi luoda uuden Wikidatakohteen lomakkeella.