IICS（Informatica Intelligent Cloud Services）のデータ統合機能で、S3から複数ファイルを読み込む必要があったので、その際に調べた方法をまとめたものです。また後でわかったことですが、有償版であれば「一括取り込み」機能でもっと簡単に実装できるよ…

ETLツールとして有名なTalendですが、ELT処理を実施するためのコンポーネントが用意されています。データベース側の挙動もあわせて使用感を確認してみました。 前提条件 Snowflake側の準備 Talend側の処理 作成したジョブ Snowflakeとの接続 tELTInputコンポ…

Talend StudioでS3上にある，同スキーマではあるものの，ファイル自体が分割されたデータを統合する必要があったのでその際のメモになります． 前提条件 作成したジョブ サンプルデータ ジョブの構成 S3への接続 S3からのファイル取得 取得したファイルの統…

オープンソースのETLツールとして有名なTalend の無償試用版である Talend Open Studio を使用しようとしたところ，実行するまでにはまったので，インストール手順も含め記事にしました．結論からいうと，Talend側の言語設定が日本語だったことが問題で，英…