がく＠ちゅらデータエンジニアです。こんばんわ！ずいぶん涼しくなって過ごしやすくなってきましたね！ご飯も美味しくて・・・あれ、また0.1トンになｒ・・・・（ぎゃーーー 概要以前、S3互換ストレージの検証で、Cloudflare R2について行いました。https://zenn.dev/churadata/articles/c5de5bd35f9b05今回は、S3互換ストレージのWasabiについて検証をしてみたいと思います。単純な外部Stageとして外部ボリュームとして、Icebergテーブルが作成などのオペレーションができるか？を確認してみます。 wasab...

がく＠ちゅらデータエンジニアです。こんにちわっ！※ちょっと昔の状態のZenn記事を上書きしてしまって、後半消えてますorzdbt Meetup #16 ： dbt Tokyo crew就任＆トリスタンCEO＆東條Anthropic新社長にあう→ Snowflake World Tour Tokyo 2025 Day 1 生FrostyFridayやったった→ Snowflake World Tour Tokyo 2025 Day 2→ （土曜日）1日中くたばってた→ （日曜日）ほぼくたばってた→ （祝日）子どもの体調があやしくて、外出せず。レポブログを結構書いたってこと...

がく＠ちゅらデータエンジニアです。Snowflake World Tour Tokyo 2025のセッションレポートです。今回は昨年対比2倍以上の機能追加を実現するデータ基盤プロジェクトでのAI活用についてということで、Kubell（旧Chatwork）のDSHのみっつさんのセッションです。資料はこちらにアップロードされてます はじめに最初に、みっつさんEXPO会場奥のシアターセッションでの発表でした。AIエージェントを活用して、昨年比で2倍の機能をリリースしたぜ！！っていうセッションです。（CursorとDevinを使ってるってお話） アジェンダ k...

がく＠ちゅらデータエンジニアですこんにちわっ！三連休の夕方、皆様はどうお過ごしでしょうか？私はグダってます、とことんグダってます！先ほど、1週間分の買い出しをしてきたました！山岡家さんの前を通りましたが、まじ入りたかった・・・・さて、SWTTokyo25のセッションレポ第3弾デス 概要今回は、DataSuperHeroのharryさんのシアターセッション「Snowflake Intelligenceにはこうやって立ち向かう！クラシルが考えるAI Readyなデータ基盤と活用のためのDataOps」です。資料はこちらではセッションの様子です。登壇はharryさ...

がく＠ちゅらデータエンジニアです。こんにちわっ！！怒涛のSWTTokyo25が終わり、三連休の昼下がり、皆様如何お過ごしでしょうかはい、私はくたばってます！まだ疲れが抜けません！！！！！！年は取りたくないものです（主に、連夜の飲み会で胃腸の酷使が原因） ラーメン山岡家さんのシアターセッション「データ活用の現在地」SWTTokyo25のDay2で私が必ず出たかったセッションがラーメン山岡家さんのシアターセッションAWS Summit Japan 2025 でのブログで一部ラーメン好きのデータ界隈が大変騒然としておりました。https://aws.amazon.com/jp/...

がく＠ちゅらデータエンジニアです。こんばんわ！！Snowflake World Tour Tokyo 2025 は、とてもとても盛況でしたね！つーでいず！！！めちゃくちゃ熱いセッションばかりでした！私がSWTTokyo25への参加はこのセッションを聞くためだ！！といっても過言ではないセッションがありましたSnowflakeの神エンジニア（Co-Founderにアジアナンバーワンエンジニアと言われた）yoshiさんのセッションです。毎年、本当に質の高いセッション内容で、内容は正直「地味」かもしれませんが、Snowflakeでいかにパフォーマンスを出すか？を説明いただいたセッショ...

はじめにSnowflakeの新しい認証方式として「Workload Identity Federation」がGAになりました。https://docs.snowflake.com/en/user-guide/workload-identity-federationこれを使うと、AWS LambdaやEC2インスタンス、k8sのpodなどのワークロードでシークレットを保管することなく有効期限の短いトークンを使ってSnowflakeへの疎通ができます。シークレット管理の手間がなくなる万が一トークンが漏洩した場合のリスクは永続的な鍵よりも低いといった利点がありそうです。...

がく＠ちゅらデータエンジニアです。先日、SnowflakeのWebUIであるSnowsightの大幅な組み換えがありました。あの機能どこに行ったーーーってあたふたしてしまったので、対比表を作りました 変更点サマリ 新設と廃止新UI:Manage/Governance & security/Tags & policies が新設旧UI:Monitoring/Governanceが廃止旧UI:Admin/Billingが廃止旧UI:Admin/Termが廃止 名称変更旧UI:Data/Databaseが 新UI:Discovery collab...

はじめにこんにちは。kayoです。最近は主に、SnowflakeやAWSを扱っています。Snowflake歴はもうで少し約1年となります。Snowflakeユーザー会は女子会しか参加したことないかもしれません。（記憶があいまいですが、多分そう）そんな私が、初めてSnowflake金融ユーザー会にに参加してきましたのでレポートしたいと思います。データ基盤、データ分析のことはまだまだ勉強中なので至らない部分があるかと思います。間違った表現をしていたらご指摘いただけると幸いです。では早速行ってみましょ～！！！ 第四回 Snowflake金融ユーザー会 ~ Snowflake ...

がく＠ちゅらデータエンジニアです。先日、東京虎ノ門のCARTA HOLDINGS様のオフィスにて、Tokyo dbt Meetup #15 に参加してきましたので、そちらのイベントレポートhttps://www.meetup.com/tokyo-dbt-meetup/events/307976885/今回のテーマは「dbt x LLM」発表の内容はUbie由川さん「dbt民主化とLLMによる開発ブースト ~ AI Readyな分析サイクルを目指して ~」ちゅらデータ菱沼CTO「dbtモデルをLLMに作らせたい」NTTデータグループ長塚さん「LLMで育てるメタデータ〜dbt...

概要この記事の対象者： AmazonQについて知りたい人。和の心を学びたい人。この記事を読むとわかること:AmazonQでどこまでできて、どこが苦戦するか。この記事を読むとできること: AmazonQの導入とゲームの作り方。 序章最近、Amazon Qでゲームを作った記事をよく見かけませんか？「なんでみんな作ってるんだ…」と不思議に思って調べてみたら、 Amazon Qでゲームを作るとTシャツがもらえるキャンペーンを発見しました！AWS公式キャンペーンページはこちらTシャツにつられて、私もAmazon Qを使ってゲーム作りにチャレンジしてみました！今回作ったゲ...

がく＠ちゅらデータエンジニアです。随分前、2022年にですが、下記のような記事を書きました。https://zenn.dev/gak_t12/articles/f52750f9e07bbd色々アップデートしているので、それを踏まえて、記事も書き直してみ用途思います。 やりたいことアラートをSlackの#alert-${ENV(dev,stg,prd} チャンネルに投げるCHURA_ALERTみたいな監視用ユーザを作る。ログインは基本できないユーザにするアカウントレベルの監視をまずしたいウェアハウス単位での監視もしたい（本記事ではオプション・・・） 通知用Slac...

がく＠ちゅらデータエンジニアです。梅雨はどこにいったんでしょう・・・と思ったらめっちゃジメジメしてて湿度が半端ないですね＞＜ 概要さて、先日、dbt showcase（英語）が開催されましたhttps://www.youtube.com/watch?v=8TRvtUx6q-Y6月26日に上記のイベントの日本語でのウェビナーが開催されました。https://www.getdbt.com/resources/webinars/2025-dbt-product-showcase-jpに参加してきました。※後日、録画が公開されるそうです。dbt LabsのAsanoさんが紹介...

こんにちは！がく＠ちゅらデータエンジニアです。※結構前に書いて下書きにしていたのを放出します・・・https://stable.co.jp/blog/dbt-osmosis-vs-sdf先日（もうだいぶ前になるのですが・・・）、stableの三角さん（myshmeh）がすごくすごく素敵な記事を書いてらっしゃいました。そこでSDFはすごいぞ！！とあったので、実際に触ってみよう！触ってみないとわからないよね！ってことで、myshmehさんの記事を参考にSDFを触っていこうと思いました。https://docs.sdf.com/introduction/welcome 導入...

がく＠ちゅらデータエンジニアです。こんにちわっ！先日、Snowflakeの東京オフィスにて、「Snowflake Summit 2025でみた最新情報をお届け！〜参加者からの体験談も」に参加してきましたhttps://techplay.jp/event/982227 概要2025年6月2日～6月5日で開催された年次カンファレンスであるSnowflake Summit 2025の最新情報をお届けします！今年のサミットは数々のアップデートに加え、複数の機能が組み合わさって「できる！」が増えたことが特徴的でした。丸4日間、こうした情報に肌で触れてきた現地参加者と交流することで、皆...

がく＠ちゅらデータエンジニアです。ご無沙汰しております。すっかりサボっておりました（屍いやさーー、ブログ書こうと思ってもさぁ、生成AIがすごくてさぁ、書いててもなんか意義というかそのあたりどうしたらいいんかな・・・・・なんて思ったり・・・・・ってのは書かない言い訳ですね（ダメちょっと書くモチベが上がってきたので、やりたい技術検証や記事をやっていきたいなと思っています。※データエンジニアリング通信も再開しないとね・・・下書き書いてみたけど、没にしたんだorz 概要先日、2025年6月4日に「Snowsightに新機能「Workspaces」が追加」というリリースがありました...

概要この記事の対象者：LLMの内部処理をコードレベルで具体的に理解し、自分で簡易的なモデルを動かしてみたいエンジニアや研究者。この記事の内容：Raschka著『作りながら学ぶLLM入門』第2章をベースに、トークン化からサブワード分割、特殊トークン付与、データローダー作成、埋め込みまでの前処理工程をPythonコード付きで解説。この記事を読んでできること：前処理の各ステップを自力で実装し、英語・日本語を問わずLLMの学習データを準備するパイプラインを構築できる。 序説(長いので、お急ぎの方はスキップしてください)MCP、AIエージェント等盛り上がりを見せてますが、そ...

概要この記事の対象者マーケ・営業・CS部門での業務効率化やAI活用に関心があるビジネスパーソンや企業のデジタル推進担当者。この記事の内容RevOps（収益オペレーション）の概要と、生成AIを活用した業務改善・データ基盤・ガバナンス強化の実践例を紹介。この記事を読むとできること自社の収益プロセスにAIを効果的に組み込み、部門横断の業務最適化と再現性のある成長戦略を描けるようになる。 序章みなさん、RevOpsが大事だと聞いたことはありますでしょうか？(私は、ないです)しかし、今後どうなるかわからない世の中、１つや２つ知って損はないと思います。この機会にRevOp...

(2025/05/08)uv venvの手順に誤りがあり修正しました。 概要対象者：エージェント連携やA2Aに興味のあるAIエンジニアや開発者内容：Google製のA2Aプロトコルを用いた複数エージェント連携チュートリアルの実践解説できること：複数のAIエージェントをA2Aで接続し、統合チャットUIから対話・実行できるようになる 序説本日、A2Aチュートリアルを触りました。１回目構築: 1時間30分(エラーで２回ハマる)２回目構築: 10分くらい !? ※個人差ありという感じでちょっと詰まった部分がありましたので、共有したいと思います！ A2Aとはエージェント...

概要この記事を読む対象者GitHubリポジトリのドキュメント自動生成に興味がある開発者・エンジニア。この記事の内容DeepWikiの仕組み・使い方・セキュリティ上の注意点を検証付きで紹介します。この記事を読むとできることDeepWikiを安全に活用し、リポジトリから自動で高品質なドキュメントを生成できるようになります。 序説私「A先輩見てください！DeepWikiで、一瞬でドキュメント作成できるんですよ！」A先輩「それセキュリティ的に大丈夫なん？」私「え・・・」 DeepWikiとはみなさん、ソースコード書いて、それをドキュメントするの大変じゃないですか...