Amazon S3 V2コネクタのトラブルシューティング
Javaヒープサイズの設定
このセクションでは、Secure AgentのJVMオプションが多数のファイルを読み取るように設定されていない場合に発生する可能性があるエラーについて説明します。
- マッピングタスクを実行して多数のレコードを書き込むと、「ERROR java.lang.OutOfMemoryError: GC overhead limit exceeded.(エラーjava.lang.OutOfMemoryError: GCオーバーヘッド制限を超過しました。)」というエラーが発生します。
- この問題を解決するには、以下のタスクを実行してSecure AgentのJVMオプションを設定し、Javaヒープサイズのメモリを増やします。
- 1[Administrator] > [ランタイム環境]を選択します。
- 2[ランタイム環境]ページで、利用可能なSecure Agentのリストからメモリを増加するSecure Agentを選択します。
- 3右上隅の[編集]をクリックします。
- 4[システム構成の詳細]セクションで、データ統合サーバーの[タイプ]に[DTM]を選択します。
- 5[JVMOption1]を[-Xms2048m]に編集します。
注: 処理するデータに基づいて最大ヒープサイズと最小ヒープサイズを指定します。
- 6Secure Agentを手動で再起動します。
- サイズが1.4 GB以上のファイルを書き込むマッピングを実行して、暗号化タイプに[Informatica Encryption]を選択している場合、「[ERROR] java.lang.OutOfMemoryError: Java heap space([エラー] java.lang.OutOfMemoryError: Javaヒープ領域)」が発生します。
- この問題を解決するには、以下のタスクを実行してSecure AgentのJVMオプションを設定し、Javaヒープサイズのメモリを増やします。
- 1[Administrator] > [ランタイム環境]を選択します。
- 2[ランタイム環境]ページで、利用可能なSecure Agentのリストからメモリを増加するSecure Agentを選択します。
- 3右上隅の[編集]をクリックします。
- 4[システム構成の詳細]セクションで、データ統合サーバーの[タイプ]に[DTM]を選択します。
- 5[JVMOption1]を[-Xmx8046m]に編集します。
- 6Secure Agentを手動で再起動します。
FFParserRetainNullStringカスタムプロパティ
nullという名前の文字列を含むcsvファイルから読み取る場合、タスクはターゲットにデータを書き込みません。この問題を解決するには、次のタスクを実行し、カスタムプロパティFFParserRetainNullStringを設定します。
- 1[Administrator] > [ランタイム環境]を選択します。
- 2[ランタイム環境]ページで、Secure Agentを選択します。
- 3右上隅の[編集]をクリックします。
- 4[カスタム構成の詳細]セクションで、データ統合サーバーの[タイプ]に[Tomcat JRE]を選択します。
- 5[名前]を[FFParserRetainNullString]と入力し、[値]を[true]と入力します。
- 6[保存]をクリックします。
RedirectToSessionLogカスタムプロパティ
ソースまたはターゲットのAmazon S3 V2ファイルを選択し、Parquetファイル形式オプションを設定すると、多数のログファイルが生成される場合があります。この問題を解決してログを無効にするには、次のタスクを実行し、カスタムプロパティRedirectToSessionLogを設定します。
- 1[Administrator] > [ランタイム環境]を選択します。
- 2[ランタイム環境]ページで、Secure Agentを選択します。
- 3右上隅の[編集]をクリックします。
- 4[カスタム構成の詳細]セクションで、データ統合サーバーの[タイプ]に[DTM]を選択します。
- 5[名前]を[RedirectToSessionLog]と入力し、[値]を[なし]と入力します。
- 6[保存]をクリックします。
JSONファイルの空の構造データ
JSONファイルに空の構造データを含むフィールドがある場合、Secure Agentはそのフィールドを無視し、メタデータの読み取り中に残りのフィールドを読み取ります。
例えば、JSONファイルの最初の行にデータ{"id":123,"address":{}}がある場合、addressフィールドは無視され、[フィールド]タブには表示されません。JSONファイルで連続する行のaddressフィールドに値がある場合、[サンプリングするデータ要素]プロパティを使用してこのフィールドを取得できます。
Amazon S3バケットが存在しないか、ユーザーにバケットにアクセスする権限がありません。
Secure Agentをホストするマシンの時刻を変更しないでください。Secure Agentの時刻は、タイムゾーンに従って正確である必要があります。正確でない場合、マッピングは例外で失敗します。