全面的に刷新されたパイプラインキャンバスでは、エンドツーエンドのデータフローをスムーズに設計できます。以前は一度に1つのデータセットしか扱えませんでしたが、2.0では複数のソースからデータを取得し、複数のデータセットを同時に準備して使用できるほか、複数のエクスポート先にデータをエクスポートできます。これにより、データをより分かりやすく可視化し、複雑なワークフローやデータ連携を簡素化して、安心してデータを扱うことができます。詳細はこちら

DataPrep 1.0では、元データとエクスポート先に別々の予約が設定されており、予約時間をずらして手動で管理する必要があったため、管理が困難でした。2.0では、パイプライン単位で予約を設定できるようになりました。1件の予約で、パイプライン内のすべての元データとエクスポート先について、インポート、処理、エクスポートを一括管理できます。詳細はこちら

パイプラインを実行するたびに増分取得オプションを選択すると、元データから新規および更新済みのデータのみが取得され、処理のためにDataPrepに送信されます。新たに追加された行のみが処理されるようになったため、増分取得をより短時間で実行できます。これにより、処理をより効率的かつ費用対効果の高い形で実行できます。詳細はこちら

データモデルやデータ準備ワークフローの変更により、前回までの予約で処理されなかったデータを処理できます。特にファイルベースのデータパイプラインでは、すべてのデータ処理を1件ずつ実行する必要はありません。詳細はこちら

作成したデータパイプラインをパイプラインテンプレートとして保存できるようになり、データパイプラインを簡単に再利用、複製できます。詳細はこちら

データの準備やクレンジングに関するさまざまな用途に対応できるよう、各種パイプラインやルールセットをあらかじめ作成されたテンプレートとしてギャラリーで公開しています。ユーザーはこれらのテンプレートを利用して、データ準備をすぐに開始できます。詳細はこちら

ルールセット全体を保存する代わりに、選択したルールのみをテンプレートとして保存できるようになりました。また、特定の機能を持つマクロも柔軟に保存できます。

自動データパイプラインを構築できるかどうかは、さまざまなデータソースやエクスポート先と連携できるプラットフォームの機能に大きく左右されます。この点を踏まえ、Zoho DataPrepに多数のコネクターを追加します。Zoho Creator用コネクターに続き、DataPrep 2.0の正式リリースまでに、以下のコネクターを順次提供する予定です。

• DataPrep用Salesforceコネクター
• DataPrep用Zoho Biginコネクター
• DataPrep用Zoho Formsコネクター

DataPrepがOpenAIのChatGPT APIと連携し、より高度なデータ加工や拡充が可能になりました。この連携により、サンプルデータを基にした加工処理、数式の作成、データセット検索などの機能を利用できます。

データをエクスポート先に送信する際、データモデルの不一致によりエクスポートの一部が失敗し、データのエクスポートを再開したり、データの整合性を維持したりすることが困難になる場合があります。これを防ぐため、データベースやアプリケーションなど、データ型に対応しているすべてのエクスポート先でスキーマが自動的に検証されます。

新しい監視機能と操作履歴機能により、Zoho DataPrepプラットフォームの可観測性が大幅に向上しました。改善点を1つずつ見ていきましょう。

各パイプラインの実行がジョブとして追跡されるようになり、各ステージのステータスも個別に追跡されます。ジョブのリストはパイプラインごとに表示され、手動での実行、スケジュール実行、バックフィル実行など、実行方法別に分類されます。詳細はこちら

各ジョブには3つのセクションがあります。最初のセクションには、各ステージのステータスが視覚的に表示されるほか、処理した行数、容量、所要時間、対象のジョブにおけるデータの範囲などの全体的な統計情報と、パイプライン実行の概要が表示されます。

2番目のセクションには、すべての処理ステージがリスト形式で表示されます。また、処理した行数やデータ処理の所要時間など、各ステージの詳細なステータスも確認できます。詳細はこちら

Zoho DataPrepのすべての処理を、新しいホームページである監視ダッシュボードから監視できるようになりました。新しいダッシュボードでは、システム内で成功または失敗したデータパイプラインの情報を確認できます。詳細はこちら

データパイプラインでのデータ準備中に行ったすべての変更は追跡され、バージョンとして保存されます。いつでも任意のバージョンに移動し、パイプラインをそのバージョンに戻すことができます。つまり、データパイプラインのライフサイクル全体を通じて、無制限に元に戻す/redoことができます。詳細はこちら
 

パイプラインでの作業が一定の段階に達し、パイプラインを予約する準備ができたら、パイプラインを準備完了として設定できます。準備完了として設定すると、そのパイプラインのバージョンが有効なバージョンとして設定されます。その後の変更はすべて下書きバージョンとして追跡され、予約済みの処理には影響しません。変更が完了したら、パイプラインを再度準備完了として設定することで、予約済みの処理に変更を反映できます。これにより、本番環境のパイプラインに影響を与えることなく、データのテストや検証を継続できます。詳細はこちら

組織のデータを複数の関係者が利用できる場合、誰がどのデータにアクセスしたかを把握することが重要です。この機能では、Zoho DataPrep内のデータワークフローのどの部分にどのユーザーがアクセスしたかを監視できます。これにより、アクセスと操作の監査ログを通じて、データのセキュリティと説明責任を向上できます。詳細はこちら

Zoho Flowとの緊密な連携により、Zoho DataPrepをさまざまなソフトウェアやソリューションと連携し、コードを記述せずにデータワークフローを自動化できます。これは、Zoho Flowからデータパイプラインを制御できるシンプルな連携機能です。Zoho Flow内の処理としてデータパイプラインを実行できるほか、処理の成功、失敗、完了などのDataPrepトリガーを使用してフローを開始できます。
 

独自ブランドとして全面的に刷新したZoho DataPrepを活用し、データ関連サービスを効果的に強化できます。DataPrepのホワイトラベル版を利用すれば、わずかなコストでプロフェッショナルなデータサービスを提供できます。ITの専門家やデータアナリストがいなくても、データを簡単に分析して準備できます。

連携機能をより迅速に構築できるよう、Zoho DataPrepのREST APIエンドポイントを公開します。近日中に、すべてのユーザーが利用できるようになります。Zoho DataPrep内で構築したデータパイプラインを、他のアプリケーションやプロセスと連携したREST APIを通じて管理できるようになりました。データパイプラインの開始や停止、処理のステータス情報の取得が可能になります。