プロダクト分析のデータフロー

プロダクト分析のデータフロー Archify で生成されたデータフロー図です。 01 / ソース 02 / 取り込み 03 / 処理 04 / 保存 05 / 利用 Webアプリ · ブラウザーSDK · 01 / ソース · イベント Webアプリ ブラウザーSDK イベント モバイル · iOS / Android · 01 / ソース · イベント モバイル iOS / Android イベント エッジAPI · コレクター · 02 / 取り込み · TLS エッジAPI コレクター TLS 同意ゲート · ポリシーフィルター · 03 / 処理 · PII保護 同意ゲート ポリシーフィルター PII保護 イベントストリーム · Kafka Topic · 03 / 処理 · 順序保証 イベントストリーム Kafka Topic 順序保証 PII保管庫 · 暗号化 · 04 / 保存 · 制限付き PII保管庫 暗号化 制限付き ウェアハウス · 分析テーブル · 04 / 保存 · 整備済み ウェアハウス 分析テーブル 整備済み 特徴量ストア · 日次バッチ · 04 / 保存 · 派生 特徴量ストア 日次バッチ 派生 ダッシュボード · プロダクト指標 · 05 / 利用 · SQL ダッシュボード プロダクト指標 SQL MLモデル · ランキングジョブ · 05 / 利用 · 特徴量 MLモデル ランキングジョブ 特徴量 クリックデータ ユーザーイベント アプリイベント デバイスイベント ID + 同意 PIIへの接触 受付済みイベント 追記専用 IDマップ 暗号化PII 正規化済みデータ 非PII 日次集計 バッチ 指標SQL 読み取り専用 特徴ベクトル 派生 制限付き結合 承認時のみ 凡例 主要データ ポリシー/PII 非同期バッチ データストア データフロー

主要なデータ経路

  • • イベントはソース、取り込み、処理、保存、利用の各ステージを左から右へ進みます
  • • 副次的なバッチフローがあっても主要経路は視覚的に明確です
  • • ラベルには一般的なAPI動詞ではなくデータ資産名を使用します

機密データの境界

  • • 同意とPIIの経路はセキュリティフローとして表示されます
  • • PIIは分析ウェアハウスとは別のアクセス制限された保管庫に格納されます
  • • 制限付き結合を、標準アクセスが可能であるかのように示さず可視化します

派生データの利用者

  • • ダッシュボードはウェアハウスから整備済みデータを読み取ります
  • • 特徴ベクトルは分析テーブルからバッチ処理で生成されます
  • • 利用経路は収集や同意処理とは分けて示します