#データエンジニアリング に関する記事一覧

astronomer-cosmosでdbtモデルの実行条件を柔軟に制御する

技術部データ基盤チームの@tosh2230です。この記事では、astronomer-cosmosでdbtのモデル実行条件をタグで柔軟に制御する方法...

Airbyte実行環境をKubernetesとTerraformで再構築して得たもの

技術部データ基盤チームに所属している@tosh2230です。 2023年後半から、ELTツールであるAirbyte Self-Managed(Community...

データ基盤チームでサイクルOJTを実施しました

ペパボでは、「サイクルOJT」と呼ばれる独自の研修プログラムが実施されています。 このプログラムでは、新入社員が毎月異なる事業部に所属し、幅広いス...

株式会社primeNumberとのデータエンジニアリング合同勉強会を開催しました

技術部 データ基盤チームの@komatunと@tosh2230です。 2023/06/05に、株式会社primeNumberと合同でデータエンジニ...

Vertex AI Matching Engine と CLIP を使って 2 週間で EC サービスの類似画像推薦機能を作る

技術部データ基盤チームの @zaimy です。今回は、Google Cloud のベクトル近似近傍探索サービスである Vertex AI Matching...

Debezium ServerによるChange Data Captureの事例紹介

技術部データ基盤チームの@tosh2230です。 2023/04/11(火)に、ファインディ株式会社主催のLTとパネルで学ぶ データ基盤アーキテ...

データエンジニアリングが今熱い2002夏

こんにちは、先日SREを引退しました、pyama です。 今日は、自分自身がペパボのデータ基盤チームに参入して、2週間ほど経ったので、やったことと...

1

1 / 1 ページ