Google Cloud Professional Data Engineer Practice Test 1-1

25問 • 4ヶ月前

問題一覧

質問01：分散システムを開発しており、2つのサービスを分離したいと考えています。メッセージは標準形式を使用し、Cloud Pub/Subを使用する予定です。Cloud Pub/Subでサポートされているスキーマタイプは何ですか？（2つ選択してください）

Avro, Protocol Buffer

質問02：GPU が接続された Compute Engine インスタンスを作成しましたが、Tensorflow モデルのトレーニング時に GPU が使用されていません。モデルのトレーニングに GPU を使用できるようにするには、どうすればよいでしょうか。（2 つ選択してください）

GPUドライバーをインストールする, ディープラーニングVMイメージを使用する

質問03：御社のCTOは、データパイプライン、特に大規模なバッチ処理ジョブの実行コストを懸念しています。これらのジョブは固定スケジュールで実行する必要はなく、コスト削減につながるのであれば、ジョブの完了まで少し長く待つことも厭いません。現在、ほとんどのパイプラインにCloud Dataflowを使用しており、コスト削減は実現しつつも、必要以上の変更は避けたいと考えています。どのような提案をされますか？

Dataflow FlexRSを使用する

質問04：Bigtable スキーマを設計しており、頻繁に一緒に使用される複数の列グループがあります。読み取りパフォーマンスを最適化し、Google Cloud が推奨するベストプラクティスに従うことを希望しています。これらの列グループをどのように扱いますか？

関連する列を列ファミリーに配置する

質問05：業界規制に準拠するには、IAMロールとIDに加えられたすべての変更のログを取得する必要があります。ログは3年間保存する必要があります。この要件をどのように満たしますか？

Cloud Audit Logs を使用し、Cloud Storage にエクスポートします。ログが 3 年経過する前に削除されないように、保持ポリシーと保持ポリシーロックを作成します。3 年経過後にログを削除するライフサイクルポリシーを定義します。

質問06：ある多国籍金融サービス企業が、複数通貨間の取引を容易にする新しいサービスを構築しています。データベースは、あらゆる顧客が開始する可能性のある取引に対して、強整合性を提供する必要があります。当初の顧客はヨーロッパに拠点を置いていますが、同社は1年以内にアジア、アフリカ、北米、南米に拡大する予定です。データベースは正規化されたデータモデルをサポートする必要があります。Google Cloud のマネージドデータベースサービスで、どのサービスが適していますか？

Cloud Spanner

質問07：アナリストはデータセットの分析にCloud Data Studioを使用しています。彼らは、データ操作時に表やグラフを更新する際のパフォーマンスを改善したいと考えています。パフォーマンスを向上させるために、どのような対策をお勧めしますか？

抽出したデータソースを使用する

質問08：大都市圏の公共交通機関のアナリストとして、あなたは機関が提供するあらゆる交通手段の乗客に関するデータを監視する任務を負っています。SQLの知識があるので、Cloud Dataflowを使用してSQLクエリを実行したいと考えています。SQLクエリを実行し、結果をBigQueryテーブルに書き込むには、どのコマンドを使用すればよいでしょうか？（必要なパラメータはすべて指定すると仮定します。）

gcloud dataflow sql query

質問09：保険金請求審査会社は、争訟となった保険金請求について専門家の意見を提供しています。同社はデータ分析パイプラインにGoogle Cloudを利用しています。同社の顧客はCloud Storageにドキュメントをアップロードします。ファイルがアップロードされた際に、個人を特定できる情報が含まれている場合は、直ちに機密データバケットに移動したいと考えています。これを実現するには、どのような方法をお勧めしますか？

アップロード用の検疫バケットを作成し、ファイルがアップロードされると、Cloud Functions 関数をトリガーして Data Loss Prevention API を呼び出し、インフォタイプを適用して PII を検出します。PII が検出された場合は、ファイルを Classified Data バケットに移動します。

質問10：Cloud Firestore を使用しているゲーム開発会社で働いており、定期的にバックアップを作成する必要があります。バックグラウンドでバックアップを実行しながら、コマンドを発行し、すぐに結果を返してもらいたいと思っています。バックアップファイルは、game-ds-backup という Cloud Storage バケットに保存したいと考えています。どのようなコマンドを使用すればよいでしょうか？

gcloud datastore export gs://game-ds-backup --async

質問11：開発者が Cloud SQL データベースを本番環境にデプロイし、Google Cloud が推奨するベストプラクティスに従うことを希望しています。認証には何を使用すればよいでしょうか。

Cloud SQL Auth proxy

質問12：グローバルな運送会社が、出荷注文の管理にCloud Spannerを使用しています。Oracleデータベースを最小限の変更でCloud Spannerに移行しましたが、結合において同様のパフォーマンス問題が発生しています。特に、注文テーブルと注文商品テーブル間の1対多結合が期待どおりに機能していません。どのような対策を講じればよいでしょうか？

インターリーブテーブルを使用する

質問13：Compute Engine 仮想マシン上で複数のデータ変換プログラムを実行するデータパイプラインを開発しています。これらのプログラムの認証と承認に認証情報を使用したくありません。Google Cloud の推奨プラクティスに従う場合、データ変換プログラムをどのように認証および承認すればよいでしょうか？

サービスアカウントを作成し、データ変換プログラムの実行に必要なロールを割り当てます。Google マネージドキーを使用して、サービスアカウントキーの公開部分と秘密部分の両方を保存します。

質問14：業界規制に準拠するため、Cloud Dataproc を使用してデータを分析する際には、顧客管理キーを使用する必要があります。Cloud Dataproc クラスタの管理はコマンドラインツールで行います。クラスタで使用する Cloud KMS リソース ID を指定するには、--gce-pd-kms-key パラメータを使用してどのコマンドを実行すればよいですか？

gcloud dataproc clusters create

質問15：オンプレミスのデータストアから Cloud Storage に大量のデータを移行する必要があります。個人を特定できる情報を含むオブジェクトにメタデータタグを追加したいと考えています。これを実現するために、どの 2 つの Google Cloud マネージドサービスを利用できますか？

データ損失防止とデータカタログ

質問16：データサイエンティストのチームがオンプレミスのクラスタでHadoopとHBaseを使用しています。彼らはGoogle Cloudのマネージドサービスへの移行を考えています。また、HBase APIを多用するプログラムへの変更を最小限に抑えたいと考えています。おすすめのGCPサービスはありますか？

Bigtable

質問17：あるオンラインゲーム会社は、プレイヤーのゲーム内所持品を管理するために正規化されたデータベースを使用していますが、新しいゲーム機能や所持品の種類に対応するためにスキーマを頻繁に変更する必要があるため、メンテナンスが困難です。正規化されたデータモデルの代わりに、どのようなデータモデルをお勧めしますか？

ドキュメントモデル

質問18：ある開発者が、Cloud Pub/Sub を使用するサービスを監視するためのダッシュボードを作成しています。Cloud Pub/Sub の pull サブスクリプションからデータを読み取るアプリケーションが、取り込まれるメッセージに対応できていない状況を把握したいと考えています。どのような指標を監視することをお勧めしますか？

subscription/num_undelivered_messages

質問19：疫学および感染症の研究者は、複数の病原体のゲノム配列に関するデータを収集しています。データはバイオインフォマティクス特有のフォーマットであるFASTQで保存されており、そのサイズは数十ギガバイトに及びます。最終的には数テラバイトのFASTQデータが保存される予定です。データはCloud Dataflowによって処理され、結果はBigQueryに書き込まれます。FASTQデータの保存に適した方法は何でしょうか？

Cloud Storage

質問20：多国籍企業のコンサルタントとして、強整合性を備え、SQLをサポートし、北米、アジア、ヨーロッパの数百人のユーザーに対応できるスケーラビリティを備えた在庫管理システムをサポートするサービスの設計を支援するという任務を負っています。このサービスに推奨されるGoogle Cloudサービスはどれですか？

Cloud Spanner

質問21：アナリストチームが機械学習モデルを構築しています。彼らは可能な限りマネージドサービスを利用したいと考えていますが、同時にモデルのカスタマイズとチューニング機能も必要としています。特に、ハイパーパラメータを自ら調整したいと考えています。どのようなマネージドAIサービスをお勧めでしょうか？

Vertex AI カスタムトレーニング

質問22：Cloud Dataflow ワークフロー用の DoFn 関数を開発しました。PCollection には、必要な計算を実行するために必要なすべてのデータが含まれていないことがわかりました。PCollection の要素が処理されるたびに、追加の入力を提供したいと考えています。どのような Apache Beam 構造を使用すればよいでしょうか？

Side input

質問23：データウェアハウスチームは、一部のデータソースの品質管理が不十分なのではないかと懸念しています。不正確なデータや無効なデータをデータウェアハウスに持ち込みたくないと考えています。ETLコードの作成を始める前に、問題の範囲を把握するために何ができるでしょうか？

ソースシステムから抽出されたソースデータに対して、データ品質評価を実施します。これには、各属性の値の範囲、各属性の値の分布、無効な値と欠損値の数、その他ソースデータに関するチェックが含まれます。

質問24：データエンジニアは、Cloud Storage の Avro ファイルに保存されているデータを Bigtable にロードする必要があります。データのコピーには、信頼性が高く、簡単に監視できるプロセスが必要です。データのコピーにはどのような方法をお勧めしますか？

Cloud Storage Avro から Bigtable へのテンプレートから始まる Cloud Dataflow。

質問25：Bigtableクラスタのホットスポットを回避するために、UUIDプレフィックスを使用する行キーを設計しました。しかし、これは期待通りに動作せず、Bigtableへのデータ書き込み時にホットスポットが発生します。ホットスポットの原因は何でしょうか？

順番に並べられた文字列を持つ UUID のタイプを選択しました。

Alibaba01

YUSUKE · 60問 · 1年前

Alibaba01