opendata and data-driven-journalism

OPEN DATA AND DATA DRIVEN JOURNALISMDATA DRIVEN JOURNALISM

Möglichkeiten, Chancen und Tools

Robert Harmhttp://twitter com/RobertHarmhttp://twitter.com/RobertHarm

open3.at – Verein zur Förderung von openSociety, openGovernment und openData

Am Anfang war…

2Quelle: http://www.slideshare.net/parycek/opening-edem2010-fn

Definition Open Data

Alle nicht personenbezogenen Daten aus PolitikAlle nicht-personenbezogenen Daten aus Politik, öffentlicher Verwaltung und Wissenschaft werden der Allgemeinheit in vollem Umfang zeitnah in offenen FormatenAllgemeinheit in vollem Umfang zeitnah in offenen Formaten

über offene Schnittstellen maschinenlesbar ohne

Ei h ä k ö li h t k t f i V fü t lltEinschränkungen möglichst kostenfrei zur Verfügung gestellt.

8 Open Government Data Prinzipienhttp://opendata-network.org/2009/11/open-government-data-principles/

3

Um welche Daten geht es?

4Quelle: http://www.slideshare.net/opendata/open-data-network-warum-eine-freie-gesellschaft-offene-daten-braucht

Stufen der Wiederverwendbarkeit

1. Daten im Web verfügbar (egal welches Format)

2. Daten in strukturierten Formaten verfügbar (zB Excel statt eingescanntes Bild)

3. Daten in einem nicht-proprietären Format verfügbar (zB csv statt xls)

4. Verwendung von URLszur eindeutigen Identifizierungg g

5. Kontext durch Verlinkung zu anderen Daten

5

The Three Laws of Open Government Data[1]

If it can’t be spidered or indexed, it doesn’t existexist

If it isn’t available in open and machineIf it isn t available in open and machine readable format, it can’t engage

If a legal framework doesn’t allow it to be repurposed it doesn’t empowerrepurposed, it doesn t empower

[1] David Eaves, http://eaves.ca/2009/09/30/three-law-of-open-government-data/

6

Potential und der gesellschaftliche gNutzen von “offenen Regierungsdaten”

Politik und öffentliche Verwaltung werdenPolitik und öffentliche Verwaltung werdenoffen, transparent und bürgerorientiert

Gesellschaftliche Prozesse undMissstände werden sichtbar und soadressierbar

Individuelle qualifizierte Entscheidungen können getroffen werden

7Quelle: Donau-Uni Krems, Zentrum für E-Government

open data - neues Zugangsmodell zu Daten

8Quelle: Daniel Dietrich, http://www.slideshare.net/ddie/opendata-warum-eine-freie-gesellschaft-offene-daten-braucht

Wunsch nach mehr Transparenz?

Download der Studie unter http://www.sas.de/open

9

p p

Rolle von Journalisten und Bloggern

10

What is Data Driven Journalism?

11Quelle: http://www.slideshare.net/mirkolorenz/data-driven-adam

Journalisten und Entwickler früher

12Quelle: http://www.slideshare.net/amclean/data-driven-journalism-telling-stories-online

Journalisten und Entwickler heute

13Quelle: http://www.slideshare.net/amclean/data-driven-journalism-telling-stories-online

What does this mean for journalism?

Making the news:finding new stories from datasetsbigger picture by linking datasetsgg p y gmore pairs of eyes to spot patternsharnessing more external experienceharnessing more external experienceresponding to interest from publicputting stories into contextpublishing datasets with stories

14

p g

What does this mean for journalism?

spreading the news:visually respresenting informationdemand driven deliverydemand-driven deliverydatasets for others to reuseenabling users to comment/flagintegration with other servicesintegration with other servicesconnecting to stories

15

g

Beispiel NYT / Arbeitslose

16http://nyti.ms/9MdhtL

Beispiel www.offenerhaushalt.de

17

Datenquellen

- Weltbank (http://data.worldbank.org/)- UNO (http://data.un.org/)

Eurostat (http://bit ly/cBkW4o)- Eurostat (http://bit.ly/cBkW4o)- CKAN-Repository (http://www.ckan.net/)- DBpedia (http://dbpedia.org)- ....

18

Welchen Beitrag könnenWelchen Beitrag können Journalisten/Medienorganisationen leisten?

1. Eigene Daten unter einer offenen Lizenzveröffentlichenveröffentlichen

2. Zusammenarbeit mit existierenden Communities

Ei t d U t tüt b t h d3. Einsatz und Unterstützung von bestehenden Initiativen und Technologien

4. Innovationen, Innovationen, Innovationen

19

Toolsscraperwiki.com – Extraktion von Daten aus Webseitenoutwit.com – Firefox-Plugin für Extraktion von zB Tabellen

gephi.org - Visualisierung von Netzwerken & komplexen Systemenuuorld.com – mapping toolManyEyes Visualisierung (http://bit ly/atoEXj)ManyEyes – Visualisierung (http://bit.ly/atoEXj) swivel.com – see, understand and share numbersnodexl.codeplex.com – Netzwerkanalyse mit ExcelT t i i it A t (htt //bit l /bV 56)Textmining mit Automap (http://bit.ly/bVmn56)Visualisierungen mit Tableau Public (http://bit.ly/cw7oOB)getpivot.com – Visualisierungslösung von MicrosoftFreebase Gridworks - open data cleansing tool (http://bit.ly/aBbAZA)

20

ToolsDigital Method Initiative http://wiki.digitalmethods.net/Dmi/ToolDatabase

Bubble LinesBubble LinesCompare ListsDelicious ScraperExtract URLsExtract URLsGoogle News/Image/Blog Search ScraperIssue Discovery ToolL D t tiLanguage DetectionSignificant WordsTag Cloud GeneratorTree Map GeneratorTwitter ScraperWikipedia Scraper

21

p p….

Weiterführende Links

OpendataÖ: http://www.open3.atÖ: http://gov.opendata.atBRD: http://opendata-network.orgUK: http://okfn.org/UK: http://okfn.org/US: http://sunlightfoundation.com/Map of OpenData Initiatives: http://bit.ly/bZkZ7p

Datenjournalismushttp://onlinejournalismblog.com/category/databases/http://recherche info de/http://recherche-info.de/http://www.tobiaskut.de/tag/datenjournalismus/DDJ Mailingliste http://wiki.opendata-network.org/DDJ-Mailinglist

22

Weiterführende InformationenGrundlagentexte A fundamental way newspaper sites need to change | Adrian Holovaty | Sept, 2006 http://bit.ly/d0R2DuJournalism Needs Data in 21st Century | Zach Beauvais | Aug. 2009 http://rww.to/9ugsLhJournalism Needs Data in 21st Century | Zach Beauvais | Aug. 2009 http://rww.to/9ugsLh

Weitere TexteDatenjournalismus: Spannende Recherche im Netz (GER) | Christiane Schulzki-Haddouti | März 2010 http://bit.ly/cQ6aaFp y

Will journalists of the future need to know how to code? | Mercedes Bunz | January 2010 http://bit.ly/9h1XhS

The golden age of computer-assisted reporting is at hand | Mathew Ingram | Mai 2009 http://bit.ly/awS9Vj

Hacks and Hackers play with data-driven news | Judith Townend | Februar 2010 http://bit.ly/cthgY0

Using Data Visualization as a Reporting Tool Can Reveal Story's Shape | Steve Meyers | April 2009 http://bit.ly/aJkryj

23

D k fü di A f k k it!Danke für die Aufmerksamkeit!

Robert Harmhttp://twitter.com/RobertHarm

http://www.open3.athttp://www.open3.at

24