More Related Content
Similar to UiPathFriends 2022-03-16 (14)
UiPathFriends 2022-03-16
- 2. 野口誠也 ? フリーランスRPAエンジニア ? 自動化歴は2017年から6年目 （Excel-VBA →WinActor →UiPath) ? 2019.6からフリーランス独立
- 6. サイト础
- 7. サイト叠
- 8. サイト颁
- 9. 正解……
- 10. 正解…… ? 完全対応は 件 ? 一部表抽出可能、取れない列あり ? 完全に表抽出対応は不可能
- 11. 表抽出機能で対応できる/できないの ? 行の入れ子パターン ? 原因 → 一部の列が、1行の中複数の行が入っている入れ子の状態 ? 対策 → 複数に分けてデータスクレイピングを行う ? 取得したい要素が存在しないパターン ? 原因 → 一覧サイトには必要なデータが存在せず、データスクレイピングができない。 ? 対策 → 表抽出を使わず、子要素を取得し、各要素をクリックしていく。
- 16. 1. データテーブルを構築
- 17. 2. 子要素を探す フィルターは"<webctrl tag='LI' />“ Output = 商品Children フィルタリングした子要素の複数形 を IEnumerable型で出力 セレクターの要素 Children(0) Children(1) Children(2) Children(3)
- 19. まとめ ? 表抽出機能が使えない前提で開発工数を考える ? ワンクリックで表抽出できるのは50%だと思って余裕をもって開発スケジュール を引く ? 表抽出を使わないデータスクレイピング方法を知る ? 子要素を探す / アプリのステートを確認 / 正規表現 ? クリップボードに貼り付けてエクセル加工はしない ? 改行やちょっとしたズレが大きな事故に ? データスクレイピング100本ノック教則を作りたい！ ? いつになることやら……。
Editor's Notes
- #3: 00:10