9. データのインポートが完了すると、 Pipeline builder ページが開き、変換処理を開始できます。また、ステージを右クリックしてPrepare dataオプションを選択し、 DataPrep Studioページでデータの準備を行うことも可能です。こちらをクリック すると、変換処理の詳細をご覧いただけます。

10. データフローの作成と各ステージで必要な変換の適用が完了したら、ステージを右クリックして宛先を追加し、データフローを完了できます。

メモ: パイプラインに宛先を追加した後、まず手動実行でパイプラインを実行してみてください。手動実行が正常に動作することを確認できたら、スケジュールを設定し、パイプラインの自動化が可能です。さまざまな実行タイプの詳細はこちらをご参照ください。

詳細選択

詳細選択を使用してファイルをインポートするには、

1. 詳細選択リンクをクリックします。

重要：詳細選択は増分取得だけでなく、ファイルパターンに基づく一括インポートにも利用できます。

2. 以下の詳細を入力してください：

• バケット名 : データをインポートするバケット名を指定します。
  

• フォルダパス : ファイルを検索する際に指定するフォルダのパスです。 例: 2023/
  
  ファイルがバケット内のフォルダに格納されていない場合は、この項目を空欄のままにできます。
  

  

  「フォルダパス」はディレクトリパス項目であり、正規表現パターンはサポートされていません。

  情報: フォルダパスは大文字と小文字が区別されます。

• ファイルパターン : バケット内のファイル名を照合する際に使用するパターンです。正規表現によるマッチングがサポートされています。' .* ' をパターンとして指定することで、指定したパス内のすべてのファイルを照合できます。
  

情報: ファイルパターンは大文字と小文字が区別されます。

メモ: ファイルパターン照合はシンプルな正規表現によるマッチングです。例えば、Sales_2022.csv、Sales_2023.csv、Sales_2024.csv というファイルを取得する場合は、Sales_.* と入力してください。

同様に、PublicData1.csv、PublicData2.csv、PublicData3.csv などのファイルを取得する場合は、公開する.* を使用します。

単一ファイルをインポートする場合は、正確なファイル名でパターンを指定してください。
例: leads_jan_2022.*

• 含める subfolders : ファイル検索時に subfolders も対象とする場合は、含める subfolders チェックボックスを選択してください。
  

• File パスワード : ファイルがパスワード保護されている場合は、パスワードを入力してください。
• Merge files and インポートする - 指定したパターンに一致するすべてのファイルを結合し、1つのデータセットとしてインポートします。
  

  
  

  インポート時にこのオプションを利用することで、インポート後にユニオン処理を行うことなくファイルを結合できます。

  Info:このオプションでは、一度に最大5ファイルまで結合できます。
  メモ: このチェックボックスがオフの場合、一度に取得できるファイルは1件のみとなります。
  

  
  
  例. S3アカウントに10ファイルある場合、最初の5ファイルが1つのデータセットとして結合されインポートされます。次回の更新時に残りの5ファイルが結合・インポートされます。
  
  
  
  同様に、S3アカウントに8ファイルある場合は、最初の5ファイルが結合・取得された後、残り3ファイルが次に処理されます。 
  

• ファイルの種類 : 必須のファイル形式を選択します。利用可能な形式はCSV、TSV、JSON、XLS、XLSX、XML、TXTです。
• Sheet pattern : このオプションはXLSおよびXLSX形式でのみ利用できます。パターンはファイル内のシート名を照合するために使用されます。正規表現によるマッチングをサポートしています。ファイル内の任意のシートを照合したい場合は、パターン「.*」も利用できます。

  
  

  

  シートパターンによる照合もシンプルな正規表現ベースのマッチングです。例えば、Sales_2022、Sales_2023、Sales_2024のような名前の表計算シートを取得するには、パターン「Sales_.*」と入力します。
  

  
  

  同様に、PublicData1、PublicData2、PublicData3のような表計算シートを取得したい場合は、「公開する.*」を使用します。

  
  

  1つのシートのみインポートしたい場合は、正確なシート名でパターンを指定してください。

  例: Leads_Jan_2022.*

• 情報：シートパターンは大文字・小文字を区別します。
  
  
• Sheet パスワード : このオプションはXLSおよびXLSX形式でのみ利用できます。シートがパスワードで保護されている場合は、パスワードを入力してください。
  
• 表計算シートをマージしてインポート : 指定したパターンに一致するすべての表計算シートをマージし、1つのデータセットとしてインポートします。

メモ: このチェックボックスがオフの場合、1度に取得できるシートは1つのみとなります。

メモ : 対応形式はCSV、TSV、JSON、XML、TXT、XLS、XLSXです。ファイルはzip形式でもインポートできます。メモ : 郵便番号ファイルの場合、サポートされるのは1ファイルのみです。.郵便番号ファイル内には、必ず1つのファイルのみを圧縮またはzipしてください。