FLINTERS Engineer's Blog

FLINTERSのエンジニアによる技術ブログ

Digdag

DigdagからBigQueryを動かす - ChatGPTを使用してエラーを解決した話

こんにちは、植村です。今回は弊チームで使用しているワークフローエンジンのdigdag(AWS, EC2)からGCPへアクセスしてBigQueryを動かした時のお話を書きます。やりたいこと:DigdagからBigQueryのExport機能を使用してGCSにデータを格納するGCPの環境は既にで…

新宿Geek Lounge#3 分析基盤 Meetupを開催しました

こんばんは、@kimutyamです。 弊社で開催した新宿Geek Lounge#3 分析基盤 Meetupのレポート記事です。 第1~2回とScalaネタのイベントでしたが、 今回は分析基盤をテーマにイベントを開催致しました。 20:00~20:05 オープニングトーク 弊社、河内の軽快なオ…