![[Oracle DBA & Developer Day 2016] しばちょう先生の特別講義！！ストレージ管理のベストプラクティス ～ASMからExada...](https://cdn.slidesharecdn.com/ss_thumbnails/mktgdd2-3stragemanagementfordl2-200702092359-thumbnail.jpg?width=560&fit=bounds)
More Related Content
What's hot (20)
Similar to Qlik TECH TALK 組織のメタデータを一元管理「Talend Data Catalog」のご紹介 (20)
More from QlikPresalesJapan (20)
Qlik TECH TALK 組織のメタデータを一元管理「Talend Data Catalog」のご紹介
- 1. Talend Data Catalogのご紹介 Qlik TECH TALK SHO NAKAJIMA シニア?ソリューション?アーキテクト 2024年4月23日
- 3. ? 質問はZoom画面下のQ&Aアイコンをクリックして入力してください。 ? 質問に対してQlikパネラーが随時Q&Aパネルで回答します。 ? 質問と回答については、セミナーの最後に他の参加者に共有させていただきま す。 Q&Aについて
- 4. ? Talend Data Catalog概要 ? Talend Data Catalog概要 ? Talend Data Catalogの主な機能と導入メリット ? Talend Data Catalogのユースケース ? メタデータと用語集をカタログ化 ? データカタログ構築の流れ ? カタログ利用 ? データの検索 ? カタログページの例 ? データリネージ/インパクト分析 ? モデル（メタデータ）から用語集を確認 ? セマンティック来歴 ? ソーシャルカタログ ? ダッシュボード ? ワークシート ? コレクション ? エンタープライズアーキテクチャ図の可視化 ? カタログ構築?運用 ? メタデータの収集（ハーベスト） ? ハーベストの自動化（スケジューリング） ? メタデータ間の接続（スティッチ） ? データマッピング ? モデルの公開 ? ドキュメントの追加 ? コメント ? 添付ファイル ? リレーションシップ（関係） ? データマスキング ? ビジネス用語集 ? 用語集ワークフロー ? 用語集ワークフローロール ? セマンティックマッピング ? セマンティックタイプ（データ分類） ? データモデリング ? モデルのバージョニング ? 新バージョン設定の公開 ? セキュリティロール ? ユーザーとグループ ? 責任（ロール）の付与 ? ロールの継承（階層構造） ? 通知機能 ? Q & A ? その他の情報 4
- 6. ? シングルインターフェー ス ? 検索と可視化 ? メタデータ＋ビジネス用 語 ? 来歴/インパクト分析 ? プロファイリング 6 Talend Data Catalog概要 多様なシステムのメタデータをカタログ化、データ利用ユーザーを強力にサポート データ所在、来歴、サンプル、ビジネス用語などへの簡単なアクセスを提供
- 7. 多種多様なシステム対応 データリネージ 自動クローリング 7 Talend Data Catalogの主な機能と導入メリット カタログ構築 ? DBだけでなく、ETLやBIなど多種多様なシステムからメタデータを収 集するコネクタを標準装備 ? 複数システムを連結させデータの流れを容易に把握 ? 接続設定のみで関連メタデータすべてを一括インポート、さらに、ス ケジュール機能による自動化 多用途/多部門展開 バージョン管理 高度な検索と可視化 ソーシャル機能 画面カスタマイズ ? 用途や参照ユーザーグループ別に複数のカタログを管理可能。カタロ グ情報のセキュリティを管理 ? 過去履歴を自動保存することにより、バージョン間での差異を確認可 能 ? 異なるシステムを横断的に検索。キーワードはメタデータだけでなく ビジネス用語などの要素も対象 ? いいねや認証などのコメントをカタログに付与することにより、ユー ザーの知見を見える化 ? カタログ画面はGUI操作で簡単にカスタマイズ可能 カタログ利用 カタログ運用
- 9. 9 メタデータと用語集をカタログ化 散在する多種多様なシステムのメタデータとビジネス用語集を一元管理 ブラウザを使用した簡易な操作でカタログ情報を参照/検索 テクニカルメタデータ Excel ETL BI ビジネス用語集 クラウド ERP/CRM 各種DBMS 人手による入力 ディクショナリ Talend Data Catalog テクニカル メタデータ ビジネス 用語集 インポート インポート ISO 11179-base ユーザー ? カタログの参照/検索 ? リネージ ? インパクト分析 ? データプロファイリング ? ディクショナリ ? メタデータ履歴 ? コメント ? 利用ログ
- 10. 10 データカタログ構築の流れ メタデータ収集＞用語集整備＞ソーシャル共有によるカタログの強化 ステップ１ IT部門によるカタログのベース構築 ? カタログ設計 ? ユーザー/ロール設定 ? システムメタデータの インポートと接続 ステップ２ ビジネス部門によるカタログの エンリッチメント ? 用語集のインポートと接続 ? 検索/分類を容易にするための ビジネスルール適用 ? セキュリティ設定 ステップ3 ソーシャル機能を使ったカタログの強化 ? コメント/いいね ? パーソナル設定 （ワークシート/コレクション） ? ダッシュボードによるビジュアライズ
- 11. カタログ利用
- 12. ? キーワード検索 o 部分一致/完全一致 o システム横断 o AND/OR検索 ? カテゴリー検索 o 用語集/DB/ETL/BI ? フィルター検索 o 最終更新日 o コメントの有無 12 データの検索 カタログに登録された多種多様なメタデータを横断的に検索 物理名だけでなく論理名なども検索対象とし、目的とする情報へのアクセスを迅速化
- 14. ? データリネージ o 今参照しているシステムのメタデータ がどこから来ているか（来歴）を確認 ? インパクト分析 o あるシステムのメンテナンスや改修に よって、他のどのシステムが影響をう けるのかを確認 ※データリネージとインパクト分析は同一のUIで提供 14 データリネージ/インパクト分析 カタログ化された各種システムの関係性を把握する機能 データリネージ
- 22. カタログ構築?運用 22
- 23. 23 メタデータの収集（ハーベスト） ファイル、データベース、データ統合ジョブ、BIレポートといった散在する多様なシステムのメタデータを 収集することができます。 メタデータの収集はTalend Data Catalogブリッジを使って行います。ブリッジはプラットフォーム専用のコ ネクターです。特定のドライバーを使ってデータソースシステムに接続し、メタデータを収集します。 ファイル データベース ETLジョブ BIレポート クラウド ERP/CRM 各種ソース テクニカルメタデータ ブリッジを介した ハーベスト Talend Data Catalog
- 24. 24 ハーベストの自動化（スケジューリング） モデルの収集をスケジューリングし自動化することで、より正確な現実をカタログに反映し続けることがで きます。 日単位、時間単位、 CRON式で設定可能
- 31. 31 リレーションシップ（関係） ひとつのデータストアにおける複数のテーブル間?ビュー間のリレーションシップを特定し、管理すること でカタログ化やキュレーションに利用できます。 複数のリレーションシップ登録方法を提供 ? 手動追加（ユーザー定義） ? データフローから推測 ? 一方のテーブルやカラムから自動検出 リレーションシップの可視化 リレーションシップリスト
- 34. 34 用語集ワークフロー 用語集の変更はすぐにカタログ上に反映されます。このシンプルさは実装フェーズにおいては便利です。 一方で、複数ユーザーによる完全かつセキュアな変更管理が必要な場合は、用語集ワークフローの機能をお 使いいただけます。 ワークフローなし (e.g. 実装時) 変更 即時反映 変更提案 レビュー 承認 公開 ワークフローあり
- 37. 37 セマンティックタイプ（データ分類） データプロファイリング中に、Talend Data Catalogはデータ値を辞書内のセマンティックタイプと比較しま す。一致する場合、セマンティックタイプが適用されます。 セマンティックタイプは既存で用意されている辞書を使用することも、独自のタイプを作成して使用するこ とも可能です。 辞書内のセマンティックタイプ モデル データ分類を 自動で検出
- 41. 41 セキュリティロール 詳細なアクセスコントロールを目的として、Talend Data Catalogはセキュリティロールを提供します。 いくつかのロールは事前定義済みのグローバルロールまたはオブジェクトロールとして提供されます。 グローバルロール オブジェクトロール ? Global Administrator ? Security Administrator ? Application Administrator ? API User ? Application Designer ? Worksheet Author ? Collection Custodian ? Data User ? Data Analyst ? Manager ? Steward ? Subject Matter Expert ? Data Owner ? Stake Holder 事前定義済みロール（一例）
- 45. 45 通知機能 ユーザーはカタログに変更やエラーが生じた際にメール通知を受け取ることが可能です。 モデルの変更 設定の変更 インポートの失敗 インポートサーバーダウン 設定のビルドの失敗 インポート済みモデルの ストラクチャー変更 通知内容（一例） ? ユーザーのプロパティに設定するメールアドレスに送信 ? 通知間隔は「毎日」または「準リアルタイム」
- 46. 46 Q & A
- 48. 48 その他の情報
- 52. 52 Webセミナー過去動画?資料 /QlikPresalesJapan/presentations https://youtube.com/playlist?list=PLTGfcjhh8Hh5aTTk-PDzg-dEhCtvh5IJ0 YouTube プレイリスト TECH TALK 狠狠撸share QlikPresalesJapan
- 53. 53 Qlik Tips プレイリスト Qlik 使用のちょっとした技術やコツを短い動画でご紹介しています。 https://www.youtube.com/playlist?list=PLTGfcjhh8Hh5a6vjjOlBa7mAtL2H0hw7K
- 54. Qlik Sense Business 入門ハンズオンWebセミナー ハンズオンWebセミナー Qlik Sense Business のセットアップから分析?コラボレーションま で一通りの分析ワークロードを 1時間ほどで体験いただき、基本的 な機能や操作について理解いただける内容となっています。 ※Qlik Sense Business と Qlik Sense Enterprise Client-Managed では基本的な操作は ほぼ同じですが、一部画面や手順が異なる場合もあります。 https://pages.qlik.com/JPN_QSBeginner_Webinar.html?utm_medium=internal&ut m_source=QlikWeb&utm_team=Web Qlik Sense アプリ開発アドバンスト Qlik Sense 売上管理ダッシュボードの作成 架空の会社のCEOとセールスマネージャーの要件をもとに、 Qlik Sense で売上管理のアプリを作成します。ビジネスアナ リスト向けの実践的なアプリ開発の実習として、データは 既にデータアーキテクトにより整理されているものとし、 ロードスクリプトによる加工は行いません。 ?要件の理解 ?KPI、軸、メジャーの決定 ?データマネージャーによるデータ準備 ?ダッシュボード画面の作成（画面設計、チャートの選択、 マスターアイテムの登録、数式の記述など） Qlik Senseのアプリ開発における基本的な操作を学習した 方に向けて、より実践的なアプリ開発のスキルを学習でき るハンズオンセミナーを実施します。 ?ロードスクリプトによるデータ取込 ?データモデリング ?基本的な集計関数 ?自由な集計を実現するSET分析 ?頻出のチャート関数 ?QVDファイル https://pages.qlik.com/QlikHandsonWebinarSeries_Registration.html
- 55. セミナー動画?事例紹介 ?デモ?新機能紹介 Qlik Japan Youtube Qlik Community Japan 製品?技術Q&A、製品関連資料 Qlik Showcase 日本語アプリの公開 Qlik Japan Blog 製品?技術情報の公開 その他の情報もご利用ください。
- 56. 「Qlik Sense 参考書」好評発売中 Qlik Sense ユーザーのためのデータ分析実践バイブル ?判型：B5 変 ?総ページ数：～480 ページ程度 ?予価本体：4,200円 (+税) ? QlikSpaceの記事をベースに、書籍用に大幅に カスタマイズ＆加筆 ? 1 冊でQlik Sense の基本をマスターし（＝基本 編）、ニーズの高い分析例（＝応用編）をで きるだけ丁寧に紹介
- 57. Thank you ! 57