Ondřej Kokeš: Zpracování dat z veřejných zdrojů
•
0 likes•45 views
Český stát se v posledních letech otevírá občanům a nabízí víc a víc dat o své činnosti. Co s tim můžeme jako veřejnost dělat a co se v datech dá najít? Bohužel to není o stažení čistého CSV z jedné centrální databáze, cesta je poněkud trnitější. Ukážeme si, kde všude narazíme na problémy a jak se dostat do kýženého cíle, kdy budeme moci na základě dat odpovídat na otázky ohledně hospodaření státu.
Ondřej Kokeš: Zpracování dat z veřejných zdrojů
- 1. ZPRACOVÁNÍ DAT Z VEŘEJNÝCH ZDROJŮ ONDŘEJ KOKEŠ 1
- 2. STÁT SE OTEVÍRÁ ▸ víc než kdy dřív ▸ mění se přístup státu ▸ pomalu, ale jistě ▸ podílíme se na tom my všichni 2
- 3. CO S TÍM? KROK PRVNÍ: STÁHNU DATA 3
- 4. NE 4
- 6. KOLIK UTRATILA MOJE OBEC ZA LOŇSKÝ ROK? KOLIK UTRATILA MOJE OBEC ZA LOŇSKÝ ROK… ZA OPRAVY CHODNÍKŮ? 6
- 7. KDO KANDIDUJE POKAŽDÉ ZA JINOU PARTAJ? KDO SKONČIL POD ČAROU, NEBYL NÁSLEDNĚ DOSAZEN DO MĚSTSKÉ FIRMY? 7
- 8. O ČEM SE MLUVÍ VE SNĚMOVNĚ? NEŠLO BY TO NĚJAK STROJOVĚ ZPRACOVAT (NLP)? 8
- 9. KDO BERE EVROPSKÉ DOTACE? 9
- 10. KROK DRUHÝ: NAJÍT DATA 10
- 11. KDE NAJDU SEZNAM IČO? KDE NAJDU ADMINISTRATIVNÍ INFORMACE? KDE NAJDU DOTACE? KDE NAJDU ZAKÁZKY? 11
- 12. KROK TŘETÍ: TECHNICKY ZPRACOVAT DATA 12
- 13. 13
- 14. ▸ Co je to FoxPro? 13
- 15. ▸ Co je to FoxPro? ▸ Jak zpracovat milion XML souborů? 13
- 16. ▸ Co je to FoxPro? ▸ Jak zpracovat milion XML souborů? ▸ ... já chtěl prostě tabulku 13
- 17. KROK ČTVRTÝ: ANALYTICKY ZPRACOVAT DATA 14
- 18. 15
- 19. ▸ Proč tu chybí data? 15
- 20. ▸ Proč tu chybí data? ▸ Můžu bezhlavě agregovat? 15
- 21. ▸ Proč tu chybí data? ▸ Můžu bezhlavě agregovat? ▸ Kdy podepsali tuto smlouvu? 15
- 22. ▸ Proč tu chybí data? ▸ Můžu bezhlavě agregovat? ▸ Kdy podepsali tuto smlouvu? ▸ Kdy čerpali peníze? 15
- 23. A TO JE VŠE! 16
- 24. 17
- 26. 1. Definovat problém 2. Najít data 17
- 27. 1. Definovat problém 2. Najít data 3. Technicky zpracovat data 17
- 28. 1. Definovat problém 2. Najít data 3. Technicky zpracovat data 4. Analyticky zpracovat data 17
- 29. MÁME MÍSTY LUXUSNÍ ZDROJE ▸ administrativní informace ▸ smlouvy ▸ rozpočty 18
- 30. ALE STÁLE NARÁŽÍME ▸ je to o lidech ▸ je to o legislativě ▸ je to o nás všech 19
- 31. NEMÁ TOHLE VŠECHNO NĚKDO NA PRÁCI? 20
- 32. PROČ O TOM MLUVÍM ZROVNA JÁ? ▸ github.com/kokes/od ▸ github.com/kokes/knod nebo knod.cz ▸ video ukázka 21
- 33. DÍKY 22