Avro Amazon S3ファイルデータ型とトランスフォーメーションデータ型

Avro Amazon S3のファイルデータ型は、Secure Agentがプラットフォーム間でデータを移動するために使用するトランスフォーメーションデータ型にマップされます。

次の表に、Secure AgentがサポートしているAvro Amazon S3ファイルのデータ型と、対応するトランスフォーメーションデータ型の一覧を示します。

Avro Amazon S3ファイルデータ型	トランスフォーメーションデータ型	範囲と内容
Array¹	Array	文字数に制限はありません
Boolean	Integer	TRUE（1）またはFALSE（0）
Date	Date/Time	0001年1月1日～9999年12月31日。
Decimal	Decimal	マッピングの場合: 精度18桁および28桁。0から28までのスケール。 18桁または28桁未満の精度を指定した場合、18桁または28桁が精度と見なされます。詳細モードのマッピングの場合、精度は18、28、および38桁となります。0から38までのスケール。
Double	Double	精度15
Float	Double	精度15
Int	Integer	-2,147,483,648～2,147,483,647精度10、位取り0
Long	Bigint	-9,223,372,036,854,775,808 to 9,223,372,036,854,775,807 精度19、位取り0
Map¹	Map	文字数に制限はありません
Null	Integer	-2,147,483,648～2,147,483,647 精度 10、位取り 0
Record¹	Struct	文字数に制限はありません
String	String	-1～104,857,600文字
Union¹	["primitive_type\|complex_type", "null"]または["null", "primitive_type\|complex_type"]の共有体で表される対応するデータ型。	プリミティブデータ型または複合データ型に依存します。
¹詳細モードのマッピングにのみ適用されます。

次の表に、Avroファイル形式のタイムスタンプデータ型のサポート状況を示します。

Avroデータ型のルールとガイドライン

Avro Amazon S3ファイルデータ型とトランスフォーメーションデータ型を使用する場合は、次のルールとガイドラインを考慮してください。

•マッピングを実行してAmazon S3ターゲットにデータを書き込む場合、Avroデータ型の固定された型を使用することはできません。

•ソースファイルで正しい精度とスケールを指定します。指定しない場合、ソースデータをターゲットに書き込む際に小数点の位置が変わります。

•ソースファイルには、1900-01-01T00:00:00Z以降のタイムスタンプ値が必要です。ない場合、マッピングはエラーで失敗します。

•［ターゲットの作成］オプションを使用しており、アップストリームトランスフォーメーションでAvroデータ型の精度を変更した場合、精度は適用されません。

精度に関する問題を解決するには、デフォルトの精度でターゲットオブジェクトを作成してから、精度を編集します。

Date、Decimal、およびTimestamp型の有効化

Avroデータ型にDate、Decimal、およびTimestamp型を使用するには、マッピングを実行する前に次の手順を実行します。

1Administratorで、［ランタイム環境］タブにリストされているSecure Agentを選択します。

2［編集］をクリックします。

3［システム構成の詳細］セクションで、サービスとして［データ統合サービス］を選択します。

4INFA_DEBUGプロパティを編集し、-DEnableNewAvroDataTypes=trueと入力します。

注: 複数のフラグを入力するには、フラグをスペースで区切ります。

5［保存］をクリックします。

6Secure Agentを再起動します。