クラウド上のログ転送の仕組み（ETL）の構築

背景

大規模なシステムでは、日々さまざまな場所でログが生まれます。ログは、障害の調査や利用状況の把握に欠かせない情報です。こうしたログを確実に集めて必要な場所へ届けるには、途中で欠けたり滞ったりしない転送の仕組みが必要です。

あわせて、利用しているクラウドの環境に合わせて処理を組み立てることも求められます。

取り組んだこと

RGは、お客様の開発チームの一員としてプロジェクトに参加しました。担当したのは、クラウド上でのログ転送のETL（データの抽出・変換・取り込み）の構築です。

チームの方針や既存の構成に合わせて、ログを取り込み、必要な形に整えて転送する処理を組み立てました。

結果

2022年に開発チームへ参画し、ログ転送のETLの構築を担当しました。このときの経験を、その後のクラウド・データ基盤の仕事に生かしています。