2022-10-01から1ヶ月間の記事一覧

【dbt小ネタ】 ログの集計 : incremental モデルの実運用 (upsert, リカバリ手法や自動復旧の実現)

dbt

日本のデータエンジニアリング界隈で盛り上がってきているdbtに関しての小ネタ記事です。この記事では、使い慣れてきた人向けに、incrementalモデルの実運用時に起こる問題とその解決方法を紹介します。

Terraform管理されたステージング環境・本番環境の差異を検出したくて頑張っている話

sre

ステージング環境はインフラ面でも本番環境と一致しているのが望ましいものの、実際にそうとは限りません。そこで今回はPoC的な段階ではありますが、Terraform管理された2つの環境の差分を自動で検出する試みについて。