前回の記事で，HugoとNetlifyによるブログ環境を構築してみました．Hugoでは，様々なブログのテーマを利用でき，Tranquilpeakを使用しました．ブログの細々した設定にあたり，色々と調べる必要があったので，参考とした記事とあわせてまとめてた記事になりま…

いまのところ，はてなブログにてブログを作成していますが，静的サイトジェネレーターであるHugoというサービスを使えば，下記のような利点があることから，将来の移行を見据えつつ，環境構築をした際のメモになります．ホスティングサービスには，Netlifyを…

業務にて脆弱性診断について知る必要が出てきたので，基本的な内容を整理しておきたく，記事としました． 脆弱性とは 脆弱性診断とは 脆弱性診断の種類 クラウド診断 さいごに 引用 脆弱性とは まずは脆弱性という言葉の定義から． IPAの資料では，次のよう…

業務でAWSのVPCフローログを扱う場面があったので，その基礎とCLIでのログ取得までを記事としました． 概要 VPCフローログは，VPCとネットワークインターフェース間を行き来するIPトラフィックに関する情報を取得できる機能です．下記に，公式ドキュメントよ…

AWS IAMにおける，AssumeRole・PassRoleの利用についての備忘録的な記事になります． AWS IAM AssumeRole PassRole 今回やりたいこと AssumeRole 作業用のIAMユーザーを作成 IAMロールを作成 AssumeRoleの実施 PassRole PassRole可能なIAMロールを作成 PassR…

IICS（Informatica Intelligent Cloud Services）のデータ統合機能で、S3から複数ファイルを読み込む必要があったので、その際に調べた方法をまとめたものです。また後でわかったことですが、有償版であれば「一括取り込み」機能でもっと簡単に実装できるよ…

ETLツールとして有名なTalendですが、ELT処理を実施するためのコンポーネントが用意されています。データベース側の挙動もあわせて使用感を確認してみました。 前提条件 Snowflake側の準備 Talend側の処理 作成したジョブ Snowflakeとの接続 tELTInputコンポ…

Talend StudioでS3上にある，同スキーマではあるものの，ファイル自体が分割されたデータを統合する必要があったのでその際のメモになります． 前提条件 作成したジョブ サンプルデータ ジョブの構成 S3への接続 S3からのファイル取得 取得したファイルの統…

オープンソースのETLツールとして有名なTalend の無償試用版である Talend Open Studio を使用しようとしたところ，実行するまでにはまったので，インストール手順も含め記事にしました．結論からいうと，Talend側の言語設定が日本語だったことが問題で，英…

業務にてawsを使用することになりました．環境構築には，AWS CLI（Command Line Interface）を使用することにもなったので、awsとCLIの操作に慣れるために，簡単な構成作成の手順を残しておきます． 作成対象 前提条件 CLIでの作業 VPCの作成 インターネット…

本記事は，「Alteryx Write Data In-DB Toolを用いた新規テーブル作成①（Redshift環境構築～Alteryxからの接続）」の続きにあたります．Write Data In-DB ToolをRedshiftで使用する際に，AWSコンソール側での見え方やこのツールの挙動自体を記した記事は中々…

AlteryxのIn-DB機能にて使用可能なWrite Data In-DB Tool（データ書き込みIn-DBツール）を用いて，データベース上にテーブルを作成する機会がありました．ツールの使用に際して，いくつか確認・調査の必要があり，検証用の環境を用意する必要があったので，…

2021年6月にTableau Desktop Certified Associate（CA：旧 Qualified Associate）に（ギリギリで）一発合格することができました．業務経験は無かったので，試験のことを色々と調べる際に，日本語の最新記事があれば嬉しかったので，記事にしようと思いまし…

Rで地図上にプロットをする必要があったのでその方法のメモです． ggplot2のmap_data()を使えば地図データをggplotで扱いやすい形式に 変換して返してくれるので， あとはプロットすれば簡単にきれいな地図を描画できます． パッケージの読み込み library(gg…