26:: 情報:パイプラインビルダー上部の27:: [データをインポート]
36:: メモ:以前に37:: Amazon S338:: の接続を追加している場合は、左側の欄から39:: [保存済みの接続]40:: カテゴリーをクリックし、インポートを続行します。保存済みの接続についての詳細は、41:: こちら42:: をクリックしてください。
60:: 新しいAmazon S3アカウントを追加するには、61:: [新規追加]62:: リンクをクリックします。必要な数だけAmazon S3接続を作成できます。
90:: 10. 91:: インポートが完了したら、ETLパイプラインに変換を適用できます。92:: ステージを右クリックして93:: [データの準備]94:: オプションを選択し、 95:: DataPrep Studioページでデータを準備することもできます。96:: こちらをクリック 97:: して、変換の詳細を確認してください。
101:: メモ:パイプラインに出力先を追加した後は、102:: まず手動実行でパイプラインの実行を試すことができます。手動実行が動作することを確認したら、103:: スケジュール104:: を設定してパイプラインを自動化できます。各種実行については105:: こちら106:: をご確認ください。
108:: 高度な選択を使用してファイルをインポートするには、
116:: 2. 次の詳細を入力します。
117:: [バケット名] 118:: :データのインポート元となるバケット名。
125:: 情報:126:: フォルダーのパスでは、大文字と小文字が区別されます。
127:: [ファイルパターン]128:: :バケット内のファイル名との照合に使用するパターンです。正規表現による照合に対応しています。また、指定したパス内のすべてのファイルに一致させるには、「.*」パターンを使用できます。
129:: 情報:130:: ファイルパターンでは、大文字と小文字が区別されます。
131:: メモ:ファイルパターンの照合には、単純な正規表現が使用されます。たとえば、Sales_2022.csv、Sales_2023.csv、Sales_2024.csvなどのファイル名を持つファイルを取得するには、パターンとして132:: Sales_.*を入力します。
133:: 同様に、PublicData1.csv、PublicData2.csv、PublicData3.csvなどのファイルを取得するには、134:: Public.*を使用します。
135:: 1件のファイルのみをインポートする場合は、正確なファイル名を使用してパターンを指定します。
136:: 例:leads_jan_2022.*
137:: [サブフォルダーを含める]138:: :ファイルの検索時にサブフォルダーも対象にする場合は、[139:: サブフォルダーを含める140:: ]チェックボックスを選択します。
146:: 情報:147:: この設定で一度に統合できるファイルは、最大5件です。
148:: メモ:このチェックボックスを選択しない場合、一度に取得されるファイルは1件のみです。
168:: メモ:このチェックボックスを選択しない場合、一度に取得されるシートは1件のみです。
175:: メモ:対応している形式は、CSV、TSV、JSON、XML、TXT、XLS、XLSXです。圧縮ファイルもインポートできます。178:: ファイル解析179:: とは、インポート時にファイルを解釈して構造化し、処理できるようにデータを行と列に正しく整理する処理です。
180:: 181:: ファイル解析182:: には、183:: 自動解析184:: と185:: カスタム解析186:: の2つの設定があります。
191:: カスタム解析192:: には、次の設定があります。
193:: [ファイルの文字コード]:194:: [ファイルの文字コード]オプションでは、UTF-8などの195:: 文字コード196::を使用してファイルをエンコードできます。
197:: [テキスト修飾子]:198:: 単一引用符(')や二重引用符(')など、テキスト項目の開始位置と終了位置を示す文字を指定できます。
199:: [区切り文字]:200:: コンマ(,)、セミコロン(;)、スペース、タブ、パイプ(|)などの区切り文字を使用して、データを分割できます。また、独自の区切り文字を指定できる201:: [カスタム区切り文字]202::オプションもあります。
203:: [先頭行のスキップ]:204:: ファイルの先頭から指定した行数を解析対象から除外します。
205:: [コメント文字]:206:: コメント行の先頭文字を指定します。コメント行はインポート時にスキップされます。
207:: [エスケープ文字]:208:: 区切り文字や引用符を書式なしテキストとして処理するために使用するエスケープ文字を指定します。使用可能なオプションは、二重引用符(')、バックスラッシュ()、パイプ(|)、キャレット(^)、チルダ(~)です。
209:: [スペースの自動削除]:210:: データのインポート時に、すべての列の先頭と末尾にある空白を削除します。
211:: [データに見出しを含む]:212:: 列見出しとして使用する行番号を指定します。