ジョブ

ジョブ

お知らせ:当社は、お客様により充実したサポート情報を迅速に提供するため、本ページのコンテンツは機械翻訳を用いて日本語に翻訳しています。正確かつ最新のサポート情報をご覧いただくには、本内容の英語版を参照してください。

パイプラインの実行は「処理」と呼ばれます。処理では、パイプライン内のインポート、加工、エクスポートの進行状況や、その他の統計情報を確認できます。

処理ページ]に移動するには、上部のバーメニューにある[処理]タブをクリックします。




[処理]タブには、組織内のすべてのワークスペースで実行された処理が一覧表示されます。各処理の処理ID、関連するパイプライン、開始日時、実行時間、ステータス、実行したユーザー、使用中の容量、処理した行も確認できます。

処理のリストでは、失敗したパイプラインの処理を特定し、再試行できます。




フィルター

フィルターのドロップダウンを使用すると、処理を種類別に一覧表示できます。[手動での実行]、[手動での実行(データあり)](更新したデータを使用した手動での実行)、[スケジュール実行]、[バックフィルの実行]、[セクション実行]、[Zoho Flow]、[Webhook]、[データの再読み込み]、[コードの実行]。セクションの処理を表示するには、[セクションの処理を含める]切り替えボタンを有効にします。




実行したユーザー、パイプライン、ワークスペース、ステータス、実行時間などのフィルター項目を使用して、処理を絞り込んだり検索したりすることもできます。詳細はこちら。

 

テーブルの見出し上部にある各並べ替えアイコンを使用すると、パイプライン、開始日時、ステータスに基づいて処理をすばやく並べ替えることもできます。

 

 


DataPrepのパイプラインやその他の要素について詳しくは、こちらをクリックしてください

  

処理の概要

[処理]ページで処理をクリックすると、[処理の概要]に移動します。[処理の概要]ページには、パイプライン名、処理のステータス、実行期間、実行したユーザー、使用中の容量、処理した行の合計、データの範囲、処理の開始日時と終了日時など、処理の主な実行情報が表示されます。


Notesメモ:パイプラインの作成画面で[処理の履歴]オプションを選択して、[処理の概要]ページに移動することもできます。



ここでは、特定の処理の詳細情報に加え、全体のステータス、各ステージの結果、エクスポート結果など、パイプラインの開始から完了までの実行状況を確認できます。これにより、問題のトラブルシューティング、パフォーマンスの分析、出力内容の品質確認を行えます。

処理が失敗した場合や変更が必要な場合は、[パイプラインを編集する]をクリックしてパイプラインを変更できます。パイプラインで実行されたすべての処理を表示するには、[処理の履歴]オプションをクリックします。

処理の概要]では、処理の詳細を次の3つのタブで確認できます。[イプラインフロー]、[ステージ]、[出力内容]。 

パイプラインフロー

パイプラインフロー]タブには、選択した処理でパイプラインがどのように実行されたかが視覚的に表示されます。パイプライン内のデータの流れを最初から最後まで把握し、各手順が正常に完了したかどうかをすばやく確認できます。

このタブには、インポート元から、適用済みの加工処理、最終的なエクスポート先まで、パイプラインのステージが順番に表示されます。フロー内の各ステージには実行ステータスが表示されるため、完了、失敗、スキップ済みの手順を簡単に特定できます。[すべての出力データをダウンロードする]オプションを使用して、すべての出力データを1つのZIPファイルとしてダウンロードすることもできます。





パイプラインフロー内のステージをクリックすると、そのステージに適用されたルールを確認できます。


 

ステージ 

[処理の概要]ページの[ステージ]セクションでは、パイプラインの各ステージで処理がどのように実行されたかを包括的に確認できます。実行内容は[インポート]、[加工]、[エクスポート]に分けられ、各ステージの概要と詳細が表示されます。インポート、適用済みの加工処理、エクスポートについて、ステータス、処理した行、使用中の容量、開始日時、終了日時などの詳細を確認できます。




インポート

[インポート]ステージには、処理に含まれるすべてのデータソースの詳細が表示されます。インポート全体のステータスと、成功したインポートと失敗したインポートの件数を確認できます。元データごとに、インポートのステータス、インポートしたファイル数、インポートした行数、使用中の容量、インポートの完了までにかかった時間などの情報が表示されます。


[情報]アイコンをクリックすると、データソースの詳細を確認できます。入力データの元データに関する必要な詳細(元データの種類、解析の詳細など)が表示されます。

[インポート設定を表示]オプションでは、データソースのインポート設定の概要を確認できます。



ファイル名の横にある[インポート済みファイル]リンクをクリックすると、バッチファイルのポップアップが開きます。このポップアップには、そのバッチでインポートされたすべてのファイルが、ファイル名、使用中の容量、ファイルごとにインポートされた行数とともに表示されます。[ダウンロード]アイコンを使用して、このポップアップから個別のファイルを直接ダウンロードすることもできます。

Notes
メモ:このオプションは、ファイル、FTP、クラウドストレージのデータソースでのみ使用できます。


加工

加工処理セクションには、処理の実行中に行われたすべての加工処理の概要が表示されます。加工処理の概要に加え、データの品質指標、処理した行数、容量の使用状況、処理時間などの詳細を確認できます。このセクションを使用すると、加工処理の進捗状況をすばやく確認し、対応が必要な失敗したステップを特定できます。



[情報]アイコンをクリックすると、データに適用済みのすべてのルールを確認できます。[プレビュー]アイコンを使用すると、そのステージの出力データをすばやく確認できます。また、すべての出力データをまとめてダウンロードしなくても、[ダウンロード]アイコンをクリックして、特定のステージの出力データを直接ダウンロードできます。



エクスポート

エクスポートステージでは、処理によって生成された最終的な出力内容の詳細を確認できます。すべてのエクスポート先について、実行ステータス、データの品質指標、エクスポートされた行数、使用した容量、各エクスポートにかかった時間が表示されます。このステージでは、処理済みデータが目的のエクスポート先に正常に送信されたことを確認できます。



[情報]アイコンをクリックすると、エクスポート先の詳細を確認できます。また、[プレビュー]アイコンを使用して各ステージの出力内容をすばやく確認し、必要に応じて任意のステージからデータをダウンロードできます。

ステージのステータス

処理の実行中に表示されるステータスは次のとおりです。



成功:ステージがエラーなく実行された場合に、このステータスが表示されます。

未実行:手動実行(既存データ)やセクション実行の場合、または依存関係にある上流ノードではない場合、一部のインポートやステージは実行されないことがあります。たとえば、セクション実行では、上流の変更内容が下流に読み込まれますが、新しいインポートは行われません。そのため、インポートステージは実行されません。

Notes
メモ:これらのステージの行は、処理した行数の計算には含まれません。

キャッシュ:前回の実行ですでにデータが処理されている場合、または今回の実行で依存関係にある上流ノードではない場合、一部のステージはキャッシュされます。たとえば、独立した2つのステージAとBを含むパイプラインについて考えます。Aにのみ加工処理を適用してパイプラインを実行した場合、Bは更新されず、既存のデータを引き続き使用します。この場合、Bはキャッシュされます。

Notes
メモ:キャッシュされたステージの行は、処理した行数の計算には含まれません。

待機中:パイプラインの実行中に、次の一連の処理ステージが待機キューに追加されます。

失敗:エラーが発生したステージが失敗すると、このステータスが表示されます。

出力内容 

[出力内容]タブでは、処理のすべての出力内容を、追加されたエクスポート先、データの品質、出力ステージ、エクスポートされた行数、使用中の容量、エクスポートにかかった時間とともに確認できます。 



各出力内容の [情報]アイコンをクリックすると、出力内容の詳細を確認できます。また、出力データをプレビューしたり、出力内容をダウンロードしたりできます。

よくある質問

1. データ内の無効な値など、データセットの品質に関する問題が原因でエクスポートに失敗した場合は、どうすればよいですか?

次のようなエラーが原因でエクスポートに失敗した場合は、データ内の無効な値を修正する必要があります。

1. データセットの品質100が、設定済みの最小品質100を下回っているため、エクスポートが中止されました。
2. データセットにエクスポート先で受け付けられない無効なデータが含まれているため、エクスポートに失敗しました。




データ内の無効な値を特定するには、次の手順を実行します。

1. [処理の概要]→[出力内容]タブに移動します。



2. 無効な列を確認するには、[データの品質]アイコンをクリックします。



3. 無効な列を特定したら、[処理の概要]ページで[パイプラインを編集]オプションをクリックし、Studioページに移動します。適切な加工処理を使用して無効な値を修正し、パイプラインを再実行します。

4. サンプルに無効な値が含まれていなくても、データ全体には含まれている場合があります。この場合、最後のデータ準備ステージに移動し、→右側のペインで[サンプルの作成方法]の横にある[編集]アイコンをクリックし、→[エラーサンプル]を選択して[適用]をクリックします。



これにより、サンプルデータ内の無効な値が表示されます。これらの無効な値を修正してから、処理を再試行してください。

2. ファイルがないことをパイプラインの実行前に確認し、処理の失敗を回避できますか?

Zoho DataPrep 2.0では、増分取得時に入力ファイルの有無にかかわらず、パイプラインの処理が開始されます。ファイルがない場合、インポートステージで処理が失敗します。DataPrepではこのような状況が自動的に処理されるため、事前に手動で確認する必要はありません。これらの失敗は、処理の概要で確認できます。




3. ダウンロードした出力ファイルのサイズが、[ステージ]タブに表示されるサイズより大きいのはなぜですか?

Zoho DataPrepでは、保存容量を最適化するため、ファイルが圧縮形式で保存されます。そのため、DataPrep内に表示されるファイルサイズは小さくなります。出力データをダウンロードすると、ファイルサイズは大幅に増加します。たとえば、DataPrepで1GBの容量を使用するファイルでも、出力としてダウンロードすると、より多くのスペースを占有する場合があります。

関連情報

新しいパイプラインを作成するには

テンプレートライブラリーからパイプラインを作成するには

手動での実行について

スケジュール実行について

バックフィルの実行について