2024年版、GCP資格 PDE試験の「BigQuery, Dataflow, Dataprocを活用した監視システム構築」に関する練習問題を勉強していきましょう。平易な問題文 → 実践的な問題文 → 問題の解き方・解説 → 用語説明の順番で効率的に学べます。
なお、GCP資格のPDE練習問題を一気に勉強したい方は、下記リンクでまとめて学習できます。
「2024年版【GCP資格 PDE試験の練習問題】なんと5時間で学べる！」
GCP PDE問題文
「BigQuery、Cloud Dataflow、Cloud Dataprocで運用するデータパイプラインのヘルスチェックと監視を行い、障害が発生した場合は担当チームに通知したいと考えています。このシステムは複数のプロジェクトにまたがって機能し、マネージドサービスを使用することが望まれています。この要件を満たすためにはどのような手順を踏むべきですか？」
難解な表現での再記述
（GCPのPDE試験問題のような難解な表現での出題文。内容は上記問題文と同じ）
「BigQuery、Cloud Dataflow、Cloud Dataprocを使用して実行されるデータパイプラインにおいて、システムの健全性を監視し、障害発生時に管理チームへの通知を自動化する方法は何ですか？このシステムは複数のGCPプロジェクトにわたって機能する必要があり、マネージドサービスの使用が推奨されています。」
問題の解説
- Cloud Monitoringアラートは、障害が発生した場合に通知を送るのに適切なソリューションです。
- Cloud Monitoringは、アプリケーションやインフラの多様なメトリクスを指定して監視することが可能なGoogle Cloudの代表的な監視サービスです。
- これは「ヘルスチェックや動作の監視」、「複数のプロジェクトにまたがる」という要件にも合致します。
解決手順の説明
- Cloud Monitoringに情報をエクスポートし、Alertポリシーを設定します。
- これにより、BigQuery、Cloud Dataflow、Cloud Dataprocの各システムからのメトリクスを監視し、特定の条件が満たされた場合に担当チームに通知を送ることができます。
各用語の説明
- BigQuery: Google Cloud上で提供されるフルマネージドなビッグデータ分析ツール。
- Cloud Dataflow: ストリーミングおよびバッチデータ処理を行うためのフルマネージドサービス。
- Cloud Dataproc: Google Cloud上で提供されるマネージドHadoopおよびSparkクラスタを提供するサービス。
- Cloud Monitoring: Google Cloudのリソースとアプリケーションのパフォーマンスを監視するためのサービス。
IT起業家
▼IT人材は2030年に国内で79万人, 全世界で「8,500万人」以上不足！
▼世界の平均年収はなんと「1,000万円」以上！
▼自宅 + パソコン + 無料翻訳ツールで「全世界が仕事場！」
AIエンジニア
