計算リソース

計算リソースを使用すると、データパイプラインを対話的に作成し、スケジュール設定されたタスクからデータパイプラインジョブを実行するための処理能力が得られます。計算リソースでは、データパイプラインの実行、データセットスキーマの推測、データプレビューの生成、入力のキャッシュ、エラーメッセージと警告メッセージの生成などの機能がサポートされます。

ステータス

処理能力を上げるために Data Pipelines エディターを専用の計算リソースに接続します。計算リソースのステータスは、アプリケーションの上部にある接続の詳細ダイアログボックスに表示されます。計算リソースのステータスタイプを次に示します。

[接続中] - データパイプラインの計算リソースがプロビジョニング中であり、接続を開始しています。
[接続] - 計算リソースがすでに開始しており、現在アクティブになっています。計算リソースを停止するには、接続の詳細ダイアログボックスにある [すべて切断] ボタンをクリックします。これにより、すべてのエディターが切断されます。
[切断] - 計算リソースがすでに停止しており、現在非アクティブになっています。エディターが切断されると、非接続のモーダルで次のオプションを使用できます。
- [移動] - データパイプラインに加えられた変更を保存せずにエディターを終了します。 Data Pipelines ギャラリーページに戻ります。
- [保存して移動] - データパイプラインに加えられた変更を保存して移動します。 Data Pipelines ギャラリーページに戻ります。
- [再接続] - 再接続してデータパイプラインエディターでの作業を続けます。
[再接続しています] - 計算リソースがすでに停止しており、アプリケーションが再接続を試行しています。

ジョブが、スケジュール設定されたデータパイプラインタスクを使用して実行されるか、Data Pipelines ギャラリーページで実行オプションを使用して実行される場合、計算リソースは、そのジョブの実行中にアクティブになり、ジョブが完了すると非アクティブになります。

検討事項

対話的編集を使用するときは、以下の点を考慮します。

各ユーザーは、データパイプラインエディターが開いた状態のすべてのブラウザータブの能力を上げる計算リソースを最大で 1 つしか利用できません。
スケジュール設定されたデータパイプラインタスクを介して実行されているジョブの場合、ジョブの実行ごとに専用の計算リソースが使用されます。
エディターは、入力データセット、ツール、出力が構成されていない場合でも接続できます。
エディターでステータスが切断と表示されると、次のデータが失われます。
- キャッシュされたソースおよびデータセット
- 長時間実行されているデータパイプラインジョブと関連するメッセージ (警告、エラー、結果)
タブを閉じた後でデータパイプラインエディターに戻ると、警告、エラー、前回の実行結果にアクセスできなくなります。