ジョブ

ジョブ

お知らせ:当社は、お客様により充実したサポート情報を迅速に提供するため、本ページのコンテンツは機械翻訳を用いて日本語に翻訳しています。正確かつ最新のサポート情報をご覧いただくには、本内容の英語版を参照してください。

パイプラインの実行は「処理」と呼ばれます。処理では、パイプライン内のインポート、加工処理、エクスポートの進捗状況や、その他の統計情報を確認できます。

処理ページ]に移動するには、上部のメニューにある[処理]タブをクリックします。




[処理]タブには、組織内のすべてのワークスペースで実行された処理が一覧表示されます。処理ID、関連付けられているパイプライン、開始日時、実行時間、ステータス、実行したユーザー、使用中の容量、処理した行も確認できます。

処理のリストでは、失敗したパイプラインの処理を特定し、再試行できます。




フィルター

フィルターのドロップダウンを使用すると、処理を種類別に一覧表示できます:[手動での実行]、[手動での実行(データあり)](更新したデータを使用した手動での実行)、[予約実行]、[バックフィルの実行]、[セクションの実行]、[Zoho Flow]、[Webhook]、[データの再読み込み]、[コードの実行]。セクションの処理を表示するには、[セクションの処理を含める]切り替えボタンを有効にします。




実行したユーザー、パイプライン、ワークスペース、ステータス、実行時間などのフィルター属性を使用して、処理を絞り込んだり検索したりすることもできます。詳細はこちら。

 

テーブルの見出し上部にある各並べ替えアイコンを使用すると、パイプライン、開始日時、ステータスに基づいて処理をすばやく並べ替えることもできます。

 

 


DataPrepのパイプラインやその他の要素については、こちらをクリックしてください

  

処理の概要

[処理]ページで処理をクリックすると、[処理の概要]に移動します。[処理の概要]ページには、パイプライン名、処理のステータス、実行時間、実行したユーザー、使用中の容量、処理した行の合計、データの範囲、処理の開始日時と終了日時など、処理の主な実行情報が表示されます。


Notesメモ:パイプラインの作成画面で[処理の履歴]を選択して、[処理の概要]ページに移動することもできます。



特定の処理に関する詳細情報に加え、全体のステータス、各ステージの結果、エクスポート結果など、パイプラインの開始から完了までの実行状況を確認できます。これにより、問題のトラブルシューティング、パフォーマンスの分析、出力内容の品質確認を行うことができます。

処理が失敗した場合や変更が必要な場合は、[パイプラインを編集する]をクリックしてパイプラインを変更できます。パイプラインで実行されたすべての処理を表示するには、[処理の履歴]をクリックします。

処理の概要]では、処理の詳細が次の3つのタブに表示されます:[イプラインフロー]、[ステージ]、[出力内容]。 

パイプラインフロー

パイプラインフロー]タブには、選択した処理でパイプラインがどのように実行されたかが視覚的に表示されます。パイプラインを通じたデータの一連の流れを把握し、各手順が正常に完了したかどうかをすばやく確認できます。

このタブには、インポート元データから、適用済みの加工処理、最終的なエクスポート先まで、パイプラインのステージが順に表示されます。フロー内の各ステージには実行ステータスが表示されるため、完了、失敗、スキップ済みの各手順を簡単に特定できます。[すべての出力データをダウンロードする]を使用すると、すべての出力データを1つのZIPファイルとしてダウンロードすることもできます。





パイプラインフロー内のステージをクリックすると、そのステージに適用されているルールを確認できます。


 

ステージ 

[処理の概要]ページの[ステージ]セクションでは、パイプラインの各ステージで処理がどのように実行されたかを包括的に確認できます。実行内容が[インポート]、[加工]、[エクスポート]に分けられ、各ステージの概要と詳細が表示されます。インポート、適用済みの加工処理、エクスポートについて、ステータス、処理した行、使用中の容量、開始日時、終了日時などの詳細を確認できます。




インポート

インポートステージには、処理に含まれるすべてのデータソースの詳細が表示されます。インポート全体のステータスと、成功または失敗したインポートの件数を確認できます。元データごとに、インポートのステータス、インポートしたファイル数、インポートした行数、使用中の容量、インポートの完了にかかった時間などの情報が表示されます。


[情報アイコン]をクリックすると、データソースの詳細を表示できます。ここには、取得元の種類や解析の詳細など、入力データの取得元に関する必要な情報が表示されます。

[インポート設定を表示]オプションでは、データソースのインポート設定の概要を確認できます。



ファイル名の横にある[インポート済みファイル]リンクをクリックすると、バッチファイルのポップアップが開きます。ここには、そのバッチでインポートされたすべてのファイルが、ファイル名、使用中の容量、ファイルごとのインポート行数とともに一覧表示されます。[ダウンロードアイコン]を使用して、このポップアップから個別のファイルを直接ダウンロードすることもできます。

Notes
メモ:このオプションは、ファイル、FTP、クラウドストレージのデータソースでのみ使用できます。


加工

[加工処理]セクションには、処理の実行時に行われたすべての加工処理の概要が表示されます。加工処理の概要に加え、データの品質指標、処理した行、使用容量、処理時間などの詳細を確認できます。このセクションでは、加工処理の進捗状況をすばやく確認し、対応が必要な失敗したステップを特定できます。



[情報アイコン]をクリックすると、データに適用済みのすべてのルールを表示できます。[プレビューアイコン]を使用すると、そのステージの出力データをすばやく確認できます。また、すべての出力データをまとめてダウンロードすることなく、[ダウンロードアイコン]をクリックして、特定のステージの出力データを直接ダウンロードできます。



エクスポート

エクスポートステージには、処理によって生成された最終的な出力内容の詳細が表示されます。すべてのエクスポート先について、実行ステータス、データの品質指標、エクスポートした行数、使用容量、各エクスポートにかかった時間が一覧表示されます。このステージでは、処理済みデータが目的のエクスポート先に正常に送信されたことを確認できます。



[情報アイコン]をクリックすると、エクスポート先の詳細を表示できます。また、[プレビューアイコン]を使用して各ステージの出力内容をすばやく確認し、必要に応じて任意のステージからデータをダウンロードできます。

ステージのステータス

処理の実行中に表示されるステータスは次のとおりです。



成功 - ステージがエラーなしで実行されると、このステータスが表示されます。

未実行 - 手動(既存データ)実行やセクション実行の場合、または対象が依存関係にある上流ノードではない場合、一部のインポートやステージは実行されないことがあります。たとえば、セクション実行では、上流からの変更が下流に読み込まれますが、新規インポートは行われません。そのため、インポートステージは実行されません。

Notes
メモ:これらのステージの行は、処理行数の計算には含まれません。

キャッシュ - データが前回の実行ですでに処理されている場合、または今回の実行で依存関係にある上流ノードではない場合、一部のステージはキャッシュされます。たとえば、相互に独立したAとBの2つのステージを含むパイプラインがあるとします。Aにのみ加工処理を適用してパイプラインを実行した場合、Bは更新されず、既存のデータを引き続き使用します。この場合、Bはキャッシュされます。

Notes
メモ:キャッシュされたステージの行は、処理行数の計算には含まれません。

待機中 - パイプラインの実行中、次の一連の処理ステージが待機キューに追加されます。

失敗 - ステージがエラーで失敗すると、このステータスが表示されます。

出力内容 

[出力内容]タブでは、処理のすべての出力内容を、追加されたエクスポート先、データの品質、出力ステージ、エクスポートした行、使用中の容量、エクスポートにかかった時間とともに一覧で確認できます。 



各出力内容の [情報アイコン]をクリックすると、出力内容の詳細を表示できます。また、出力データをプレビューし、出力内容をダウンロードすることもできます。

よくある質問

1. データ内の無効な値など、データセットの品質に関する問題によってエクスポートに失敗した場合、どうすればよいですか?

次のようなエラーによってエクスポートに失敗した場合は、データ内の無効な値を修正する必要があります。

1. データセットの品質100が、設定済みの最低品質100を下回っているため、エクスポートが中止されました。
2. データセットにエクスポート先で受け付けられない無効なデータが含まれているため、エクスポートに失敗しました。




データ内の無効な値を特定するには、次の手順に従います。

1. 処理の[概要]→[出力内容]タブに移動します。



2. 無効な列を表示するには、[データの品質]アイコンをクリックします。



3. 無効な列を特定したら、処理の概要ページで[パイプラインを編集]オプションをクリックし、スタジオページに移動します。適切な加工処理を使用して無効な値を修正し、パイプラインを再実行します。

4. サンプルに無効な値が含まれていなくても、データ全体には含まれている場合があります。この場合、最後のデータ準備ステージに移動します→右側のペインで、[サンプルの作成方法]の横にある[編集アイコン]をクリックします→[エラーサンプル]を選択し、[適用]をクリックします。



これにより、サンプルデータ内の無効な値が表示されます。これらの無効な値を修正し、処理を再試行してください。

2. 処理の失敗を回避するため、パイプラインの実行前にファイルがないかどうかを確認できますか?

Zoho DataPrep 2.0では、増分取得時に入力ファイルが存在するかどうかにかかわらず、パイプライン処理が開始されます。ファイルが存在しない場合、処理はインポートステージで失敗します。DataPrepではこのような状況が自動的に処理されるため、事前に手動で確認する必要はありません。これらの失敗は処理の概要で確認できます。




3. ダウンロードした出力ファイルのサイズが、[ステージ]タブに表示されるサイズより大きいのはなぜですか?

Zoho DataPrepでは、保存用のスペースを最適化して容量を抑えるため、ファイルを圧縮形式で保存します。そのため、DataPrep内に表示されるファイルサイズは小さくなります。出力データをダウンロードすると、ファイルサイズは大幅に大きくなります。たとえば、DataPrepで1GBの容量を使用するファイルでも、出力内容としてダウンロードすると、より多くのスペースを占めることがあります。

関連情報

新しいパイプラインを作成するには

テンプレートライブラリーからパイプラインを作成するには

手動での実行について

スケジュール実行について

バックフィルの実行について