← すべての使用例使用事例 / データ操作

地球観測データの運用パイプライン

探査ノートから追跡可能な 維持可能な観察作業流に移動する

運用地球観測パイプラインの概念図

状況

分析は小さなサンプルで動作しますが,新しい観測が到着するにつれて繰り返し実行する必要があります.運用設計は,不完全な入力,処理障害,バージョンの変更,以前の製品を再現する能力を処理しなければならない.

疑問から証拠へ

実践的なアプローチです

  1. 01

    データ契約を定義する

    ソース,予想される到着,品質チェック,輸出と責任ある担当者を指定する.

  2. 02

    設計処理

    断片的に再試し,再再生経路を伴う摂取,検証,変換,出版を別々にする.

  3. 03

    製品操作

    フレッシュさと完全性を監視し,失敗した入力または修正された入力から回復を練習する.

検証すべきもの

  • バージョンソース参照,処理構成および出力系.
  • 完全な製品と変化がない完全な製品から区別できる不完全な製品を保持します.

典型的な出力

  • 管道・配列アーキテクチャ
  • データ品質と新鮮性のチェック
  • 回収および再加工の手続き

例の措置

  • 合意された期間内に配達された製品
  • 完全でない観測が検出された
  • 過去の出力の成功複製

具体プロジェクトのためのベースラインと受け入れ基準を合意する.

図示的なシナリオと概念的なイメージ各取り組みの範囲,成果物,受け入れ証拠は合意される.例の措置は成果を出すものではない.

次のステップ

文脈を教えて下さい
可能性を探求する