#データ基盤 に関する記事一覧

社内データ基盤のワークフローエンジンをBlue-green deploymentで無停止バージョンアップする

この記事は🎄GMOペパボ エンジニア Advent Calendar 2024の11日目の記事です。 技術部データ基盤チームの@zaimyで...

Cloud Composer環境における信頼性向上のためのトラブルシュート事例、あるいはOSSにコントリビュートしたらそのOSSを壊してしまった経験について

技術部の染矢です。 最近は社内のデータ基盤「Bigfoot」の信頼性向上や機能開発をおこなっています。 Bigfootは、Google Cloud...

astronomer-cosmosでdbtモデルの実行条件を柔軟に制御する

技術部データ基盤チームの@tosh2230です。この記事では、astronomer-cosmosでdbtのモデル実行条件をタグで柔軟に制御する方法...

Airbyte実行環境をKubernetesとTerraformで再構築して得たもの

技術部データ基盤チームに所属している@tosh2230です。 2023年後半から、ELTツールであるAirbyte Self-Managed(Community...

データを最大限に活用する：カラーミーショップにおける行動ログ取得の進め方

13 期の@donokunと@yumuです。9 月は EC 事業で働いておりランチタイムには渋谷のカレーを食べ歩いています。ランチタイム以外ではカ...

データ基盤チームでサイクルOJTを実施しました

ペパボでは、「サイクルOJT」と呼ばれる独自の研修プログラムが実施されています。 このプログラムでは、新入社員が毎月異なる事業部に所属し、幅広いス...

ワークフロー管理プラットフォームのCI環境をクラウドネイティブへ

　こんにちは。あなただけの彦星になりたい、鹿児島が生んだ三大Hikoの一人、和彦こと、P山 です。 今日はデータ基盤チームで利用しているワークフ...

データ基盤のワークフローエンジンをGoogle Cloud Composer 2へバージョンアップしました

技術部データ基盤チームに所属しているまつもとです。 ペパボのデータ基盤では、ワークフローエンジンとしてGoogle Cloud Composer...

プロダクト担当者とデータサイエンティストで Prophet を使って EC サービスの注文額を予測する

技術部データ基盤チームのデータサイエンティストの @zaimy です。今回は、ハンドメイド作品を対象とする EC サービスである minne の注...

ディレクターが学ぶデータエンジニアリング

技術部データ基盤チームの@yrarchiです。2022年1月に現所属に異動してから約5カ月が経過しました。 異動前はホスティング事業部でディレク...

1 2
次へ
次へ

1 / 2 ページ