2025-05-01から1ヶ月間の記事一覧
◾️はじめに 少し作業に余裕が出てきて、docker での警告を見てみたら 勉強になったのでメモ。 学べたこと * Orphan containers（孤立したコンテナ）および「--remove-orphans」オプション * Dockerのプロジェクト名 * 「to avoid potential confusion」って…
◾️はじめに https://dk521123.hatenablog.com/entry/2025/05/26/132317 の続き。 dbtのsnapshot機能の座学はわかったので 今回は、dbt snapshotコマンドを実行して Hello world的なことをやってみる 目次 【１】前提条件 １）開発環境 【２】Hello world ０…
◾️はじめに 病院の待ち時間で、暇だったので 前から気になっていた「dbt snapshot」について調べていたら、 自分がイメージしている機能とは違っていた。 また、結構知らないこと（例えば、SCD(Slowly Change Dimensions)など） があったので、メモしておく …
◾️はじめに https://dk521123.hatenablog.com/entry/2025/05/22/143541 の続き。 チャット形式でのGitHub Copilotを試せたので、 今回は、よくある「IDE での使用」VS codeを試してみる 目次 【１】サポートIDE 【２】サポート言語 【３】環境設定 【４】使…
◾️はじめに https://dk521123.hatenablog.com/entry/2025/05/22/143541 で、GitHub Copilotについて扱ったが、 早速、GitHub Copilot chat で、 以前から発生していたエラー「Cross-db references not allowed in postgres」 について聞いてみたら、素晴らし…
◾️はじめに 現場で、GitHub Copilot を使えるようになったので、 調べてみた 目次 【１】GitHub Copilot １）類似サービス 【２】機能 １）補足：簡単に試してみたい場合 【３】使用場所 【４】料金 １）個人向け ２）Organization ３）Enterprise 【５】実…
◾️はじめに 小ネタ。 友人と飲みに行った時にSQLの質問されて 試しにやってみたら、思ったより勉強になった。 そのついでに出てきた、ゼロ埋めをメモっておく 目次 【１】ゼロ埋め 方法１：TO_CHAR＋FM 接頭辞 を使う 方法２：LPAD を使う 【２】サンプル 例…
◾️はじめに 小ネタ。 前から気になっていた dbt の「+ prefix (e.g. +materialized)」 について、メモっておく 目次 【１】+ prefix 【２】目的１：設定とリソースパスを明確するため １）補足：必須ではなく推奨レベル 【３】目的２：辞書型入力時 例１： p…
◾️はじめに https://dk521123.hatenablog.com/entry/2021/11/16/231010 でやっていたアクセス制御だが、 DACとかRBACとか色々整理できていなかったので 整理していく 目次 【０】Snowflakeアクセス制御の種類 【１】DAC (Discretionary Access Control) 【２…
◾️はじめに 今回は、dbt の config について扱う 目次 【１】config １）profiles.yml との住み分け 【２】configの設定方法 １）config() での設定 ２）models/properties.yml での設定 ３）dbt_project.yml での設定 【３】configの設定内容 １）Snowflake…
◾️はじめに dbt の target について取り扱う 目次 【１】target １）Common ２）Snowflake ３）Postgres/Redshift 【２】profiles.yml との関係 １）サンプル 【３】サンプル 例１：config.enabled + target.type でDBごとで切り替える 【１】target * ウェ…
◾️はじめに dbtの変数 var についてトラブルがあって 調べてみたのでまとめておく。 その中で、env_var()ってのも知ったので ついでにメモっておく 目次 【１】変数 - var() １）参照方法 ２）設定方法１ - dbt_project.ymlで設定 ３）設定方法２ - コマンド…
◾️はじめに https://dk521123.hatenablog.com/entry/2023/06/13/000000 の続き。 SnowflakeのAUTO_SUSPENDってのを知ったのでメモ。 目次 【１】AUTO_SUSPEND １）公式ドキュメント 【２】Snowflakeのコスト改善案：AUTO_SUSPENDを下げる 【３】AUTO_SUSPEND…
◾️はじめに https://dk521123.hatenablog.com/entry/2025/04/30/223554 の続き。 networkingMode=bridgedを設定したら、非推奨って言われたので 対象方法も含めて調べてみた 目次 【１】エラー「ブリッジ ネットワーク モードは非推奨になりました」が表示 …
