言語の検出

言語の検出

お知らせ:当社は、お客様により充実したサポート情報を迅速に提供するため、本ページのコンテンツは機械翻訳を用いて日本語に翻訳しています。正確かつ最新のサポート情報をご覧いただくには、本内容の英語版を参照してください。




選択したテキスト列のテキストは、[言語を検出]処理(DataPrep独自の機械学習エンジンを使用)で言語を検出できます。例として、選択した列のテキスト値が「Hello, World!」の場合、言語を検出の加工では「English」と返されます。

 

この加工では、合計178以上の言語がサポートされています。サポートされている言語のリストは次のとおりです。


番号 言語 言語コード
1 アフリカーンス語 af
2 トスク・アルバニア語 als
3 アムハラ語 am
4 アラゴン語 an
5 アラビア語 ar
6 エジプト・アラビア語 arz
7 アッサム語 as
8 アストゥリアス語 ast
9 アヴァル語 av
10 アゼルバイジャン語 az
11 南アゼルバイジャン語 azb
12 バシキール語 ba
13 バイエルン語 bar
14 中央ビコール語 bcl
15 ベラルーシ語 be
16 ブルガリア語 bg
17 ビハール諸語 bh
18 ベンガル語 bn
19 チベット語 bo
20 ビシュヌプリヤ語 bpy
21 ブルトン語 br
22 ボスニア語 bs
23 ロシア・ブリヤート語 bxr
24 カタルーニャ語 ca
25 チャバカノ語 cbk
26 チェチェン語 ce
27 セブアノ語 ceb
28 中央クルド語 ckb
29 コルシカ語 co
30 チェコ語 cs
31 チュヴァシ語 cv
32 ウェールズ語 cy
33 デンマーク語 da
34 ドイツ語 de
35 ディムリ語(個別言語) diq
36 低地ソルブ語 dsb
37 ドテリ語 dty
38 ディベヒ語 dv
39 ギリシャ語 el
40 不明な言語[eml] eml
41 英語 en
42 エスペラント語 eo
43 スペイン語 es
44 エストニア語 et
45 バスク語 eu
46 ペルシャ語 fa
47 フィンランド語 fi
48 フランス語 fr
49 北フリジア語 frr
50 西フリジア語 fy
51 アイルランド語 ga
52 スコットランド・ゲール語 gd
53 ガリシア語 gl
54 グアラニー語 gn
55 ゴア・コンカニ語 gom
56 グジャラート語 gu
57 マン島語 gv
58 ヘブライ語 he
59 ヒンディー語 hi
60 フィジー・ヒンディー語 hif
61 クロアチア語 hr
62 高地ソルブ語 hsb
63 ハイチ・クレオール語 ht
64 ハンガリー語 hu
65 アルメニア語 hy
66 インターリングア ia
67 インドネシア語 id
68 インターリング ie
69 イロカノ語 ilo
70 イド語 io
71 アイスランド語 is
72 イタリア語 it
73 日本語 ja
74 ロジバン jbo
75 ジャワ語 jv
76 ジョージア語 ka
77 カザフ語 kk
78 クメール語 km
79 カンナダ語 kn
80 韓国語 ko
81 カラチャイ・バルカル語 krc
82 クルド語 ku
83 コミ語 kv
84 コーンウォール語 kw
85 キルギス語 ky
86 ラテン語 la
87 ルクセンブルク語 lb
88 レズギ語 lez
89 リンブルフ語 li
90 ロンバルド語 lmo
91 ラオ語 lo
92 北ロル語 lrc
93 リトアニア語 lt
94 ラトビア語 lv
95 マイティリー語 mai
96 マダガスカル語 mg
97 東部マリ語 mhr
98 ミナンカバウ語 min
99 マケドニア語 mk
100 マラヤーラム語 ml
101 モンゴル語 mn
102 マラーティー語 mr
103 西部マリ語 mrj
104 マレー語 ms
105 マルタ語 mt
106 ミランダ語 mwl
107 ビルマ語 my
108 エルジャ語 myv
109 マーザンダラーン語 mzn
110 ナワトル諸語 nah
111 ナポリ語 nap
112 低地ドイツ語 nds
113 ネパール語 ne
114 ネワール語 new
115 オランダ語 nl
116 ノルウェー語(ニーノシュク) nn
117 ノルウェー語(ブークモール) no
118 オック語 oc
119 オディア語 or
120 オセット語 os
121 パンジャブ語 pa
122 パンパンガ語 pam
123 プファルツドイツ語 pfl
124 ポーランド語 pl
125 ピエモンテ語 pms
126 西パンジャブ語 pnb
127 パシュトー語 ps
128 ポルトガル語 pt
129 ケチュア語 qu
130 ロマンシュ語 rm
131 ルーマニア語 ro
132 ロシア語 ru
133 ルシン語 rue
134 サンスクリット語 sa
135 サハ語 sah
136 サルデーニャ語 sc
137 シチリア語 scn
138 スコットランド語 sco
139 シンド語 sd
140 セルビア語(ラテン文字) sh
141 シンハラ語 si
142 スロバキア語 sk
143 スロベニア語 sl
144 ソマリ語 so
145 アルバニア語 sq
146 セルビア語 sr
147 スンダ語 su
148 スウェーデン語 sv
149 スワヒリ語 sw
150 タミル語 ta
151 テルグ語 te
152 タジク語 tg
153 タイ語 th
154 トルクメン語 tk
155 フィリピン語 tl
156 トルコ語 tr
157 タタール語 tt
158 トゥバ語 tyv
159 ウイグル語 ug
160 ウクライナ語 uk
161 ウルドゥー語 ur
162 ウズベク語 uz
163 ヴェネト語 vec
164 ヴェプス語 vep
165 ベトナム語 vi
166 西フラマン語 vls
167 ヴォラピュク語 vo
168 ワロン語 wa
169 ワライ語 war
170 呉語 wuu
171 カルムイク語 xal
172 メグレル語 xmf
173 イディッシュ語 yi
174 ヨルバ語 yo
175 広東語 yue
176 中国語 zh
177 中国語(簡体字) zh-CN
178 中国語(繁体字) zh-TW

列の言語を検出するには

1. 列を右クリックし、操作メニューから[言語を検出]の加工を選択します。



2. [新しい列名]欄に、結果を出力する列の名前を入力します。


3. 必要な出力内容の種類を選択します。設定名が示すように、[言語名]を選択すると言語の名前が出力され、[言語コード]を選択すると言語のコードが出力されます。


4. たとえば、英語のテキストに対して[言語名]を選択すると、「English」と出力され[言語コード]を選択すると、「en」と出力されます。


5. 加工中、DataPrepには列のリアルタイムのプレビューが表示されます。出力列をプレビューするには、サイドパネルの下部にある[プレビュー]ボタンをクリックします。


6. この加工は1つの列にのみ適用できます。この加工を適用するには、[適用]ボタンをクリックします。


メモ:言語を検出する加工では、テキストの長さが50文字以上の場合に、正確な結果が得られます。

フィルターを適用するには

この加工と併せてフィルターを適用する場合は、フィルター機能を使用できます。

1. [フィルター]タブをクリックします。

2. アイコンをクリックし、[フィルター]欄に必要な列を追加します。ドラッグ&ドロップでフィルターの順序を変更することもできます。



3. 追加した各列について、ドロップダウンから次のいずれかの設定を選択できます。
  1. [実際]:列内の実際の値に基づいて行をフィルターできます。詳細については、[こちら]をクリックしてください。
  2. [データの品質]:列内のデータの品質に基づいて行をフィルターできます。詳細については、[こちら]をクリックしてください。
  3. [パターン]:選択した列のデータパターンに基づいて行をフィルターできます。詳細については、[こちら]をクリックしてください。
  4. [周期]:四半期、月、週などの周期パラメーターに基づいて行をフィルターできます。詳細については、[こちら]をクリックしてください。
  5. [異常値]:選択した列のデータに含まれる異常値に基づいて行をフィルターできます。詳細については、[こちら]をクリックしてください。
メモ:フィルター設定は、フィルターに追加した列のデータ型に応じて表示されます。

4. [フィルター]欄に複数のフィルターを追加すると、フィルターの横に論理演算子[AND]または[OR]が表示されます。クリックすると、論理演算子を[AND]と[OR]で切り替えられます。
  1. 論理演算子を使用して条件を結合し、優先順位のルールを決定できます。最終的な式は、[条件式]欄に表示されます。[編集する]をクリックすると、論理演算子と括弧を使用して標準の式を変更し、優先順位や、どの条件を最初に評価するかという実行順序を指定できます。必要な変更を行った後、[保存する]をクリックします。
  1. たとえば、式「((1 OR 2) AND (3 OR 4))」では、最初に条件「(1 OR 2)」が実行され、次に条件「(3 OR 4)」が実行されます。その後、AND演算子が使用されているため、両方の条件が真の場合にフィルターが適用されます。
5. 次の欄では、各フィルターで選択したフィルター設定に基づいて、指定した値をさらに絞り込んで選択できます。



たとえば、上の画像では、[フィルター]欄の「すべての列」フィルターに対して、[データの品質]設定が選択されています。この選択に基づき、[すべての列(データの品質)]欄に、指定した値をフィルターするための詳細設定が表示されます。

6. 最後の欄では、選択した項目を含めるか除外するかを選択できます。

7. すべてのフィルターを削除する場合は、[クリアする]ボタンを使用できます。

8. 変更を加えると、フィルター加工のリアルタイムのプレビューが表示されます。

9. フィルターと併せて加工を適用するには、[適用]ボタンをクリックします。

データを並べ替えるには

[並べ替え]タブでは、任意の列に基づいてデータを昇順または降順に並べ替えることができます。[並べ替えに使用する列]ドロップダウンで列を選択し、並べ替え順序を選択できます。

この機能は加工と組み合わせた場合にのみ使用でき、単独の機能としては使用できません。データの並べ替えのみを行う場合は、並べ替え加工を使用できます。



関連情報
キーワードを抽出する機能について
感情分析について