BigQuery
この記事は dbt Advent Calendar 4日目&Yappli Advent Calendar 4日目の記事です。 こんにちは! データサイエンス室の山本(@__Y4M4MOTO__)です。 ヤプリではdbtを用いて分析用データ基盤を構築しています。過去の記事で、UDFはdbtで管理せずBigQuery上に…
この記事は Yappli Advent Calendar 2024(2枚目) 、 TROCCO® Advent Calendar 2024 の12/3の記事です。 こんにちは!データサイエンス室(以下、DS室)の山本です(@__Y4M4MOTO__)です。 内定者インターン時代に全社横断のSlackデータ基盤を構築しました…
はじめに こんにちは。プロダクト開発本部・データサイエンス室の阿部昌利(@abe_masatoshi)です。 Yappli Tech Conference 2024 にて「全社横断データ活用推進のコツとその負債とのつき合い方」というテーマで登壇しました。今回はそのアーカイブ動画とスラ…
こんにちは!データサイエンスグループの山本です( @__Y4M4MOTO__ )です。 BigQuery に対して dbt Core を利用している場合、 profiles.yml の project: ( target variables の target.project )に設定した GC プロジェクトが dbt run した際のdbtモデル…
こんにちは!データサイエンスグループの山本( @__Y4M4MOTO__ )です。 さて、ヤプリのデータサイエンスグループ(以下、DSグループ)では2023年から分析用データ基盤の dbt 移行に取り組んでいます。 dbt 移行に至った経緯などについては昨年開催された Ya…
こんにちは!データサイエンスグループの山本です( @__Y4M4MOTO__ )です。今年の4月で入社して1年が経ちました。あっという間ですね…。 さて、ヤプリのデータサイエンスグループ(以下、DSグループ)では2023年から分析用データ基盤の dbt 移行に取り組ん…
このブログでわかること Looker Studio でユーザーごとにデータを出し分ける方法、および実サービスへの適用例 はじめに こんにちは、ヤプリのデータサイエンティストの阿部です。今年からデータサイエンスグループが誕生して、私を含めてメンバー4名となり…
はじめに はじめまして! 2023年12月の1ヶ月間、ヤプリのデータサイエンティストのインターンに参加しました、京都大学大学院1回生の鍋岡 (@nabeshinabe) です!私は京都に住んでいるため、インターンは基本リモートで参加していましたが、最後は実際に東京…
こんにちは!プロダクト開発本部・データサイエンティストの山本(@__Y4M4MOTO__ )です。 先日開催された Yappli Tech Conference 2023 にて、 「次の10年を戦える分析用データ基盤構築の第一歩 - dbtによる基盤刷新とクエリ費用90%削減への取り組み -」と…
はじめに はじめまして!2023年9月に1ヶ月間ヤプリでインターンとして働かせていただきました、北海道大学情報科学院1年生の山田航生 (@koki-algebra) です!私は札幌市に住んでいるのでフルリモートでの業務でした。 大学では機械学習の理論に関する研究を…
こんにちは!データサイエンティストの山本です( @__Y4M4MOTO__ )です。 今回は、ヤプリのデータ基盤内にあるウェブビューURLのデコードに取り組んでみました。この記事では、その際につまづいたポイントやその解決策について記します。 ウェブビューURLの…
こんにちは。サーバーサイドエンジニアの柴田です。 皆さんはBigQueryにCSVファイルをインポートしたくなったことはありますか? 私はあります。そしてエラーの原因特定ができず軽く躓いたことがあるので、簡単にですが備忘録的にその時の対処法を残しておこ…
爽やかなOGP 皆さんこんにちは。データサイエンティストの阿部です。 Yappli Tech Conference 2022にて、表題のテーマで登壇しましたので、発表した動画とスライドを紹介します。また、今回のテックカンファレンスには運営メンバーとしても関わったので、そ…
データサイエンティストの阿部です。今年は大河ドラマを毎週見ています。三谷幸喜の代表作として長く語り継がれるのではないかと思っています。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第13話を配信しました。Big…
データサイエンティストの阿部です。妻に誘われて俳句を始めました。『プレバト!!』でお馴染みの夏井いつき先生が評価してくれるおウチde俳句クラブに加入して楽しんでます。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You"…
データサイエンティストの阿部です。この1年間、毎週土曜日に8時間副業していました。結果、週休二日制のありがたみがわかりました。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第11話を配信しました。例えばDAUとMA…
データサイエンティストの阿部です。今さらながら『劇場版 少女☆歌劇 レヴュースタァライト』を映画館で観たのですが衝撃的でした。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第10話を配信しました。僕は「とりあえ…
データサイエンティストの阿部です。本記事は Looker Advent Calendar 2021の12日目に捧げます。弊社は今年からLookerを契約し、自分にとって2021年はLooker元年でした。お世話になりました。 表題について、明日から使いたくなるデータハンドリング術を紹介…
データサイエンティストの阿部です。本記事は BigQuery Advent Calendar 2021の7日目に捧げます。 今年はYoutubeを主戦場に、BigQueryの技術発信をしてみましたので、その振り返りです。動画を用いて技術発信したい方や、技術広報の方の参考になれば幸いで…
データサイエンティストの阿部です。30㎡の貸し農園で野菜を育てていますが、まさに収穫の秋です。ブロッコリーやキャベツの、一株の大きさには驚きました。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第8話を配信し…
データサイエンティストの阿部です。読書の秋ですね。今年読んだ教養書では『統計学を哲学する』、『サピエンスの未来』の2冊が印象深いです。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第7話を配信しました。魂を…
データサイエンティストの阿部です。最近、職場でオッドタクシーが話題です。シルバーウィークに一気見したいと思います。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第6話を配信しました。データ活用推進に際して、…
データサイエンティストの阿部です。最近のマイブームは、COTEN RADIOです。高校で世界史を勉強したとき一緒に聞いてたら、何倍も身になっていたろうなと思えるコンテンツです。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for Y…
データサイエンティストの阿部です。先日、会社の仲間たちとAmong Usをプレイして盛り上がりました。ある種の極限状況をロールプレイできるのが面白かったです。リモートワークにおける懇親コンテンツとして便利そうだと感じました。 さて、明日から使いたく…
データサイエンティストの阿部です。東京五輪開会式の選手入場を何度か見返してしまいました。冒頭とカザフスタン入場のシーンは胸が高鳴りました。 さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第3話を配信しました。…
データサイエンティストの阿部です。最近来てくれたインターン生と10歳違いなことに驚きました。光陰矢の如し! さて、明日から使いたくなるデータハンドリング術を紹介する "Sexy Tech for You" の第2話を配信しました。動画中に記載したクエリや補足事項を…
データサイエンティストの阿部です。今後不定期に、データ分析のためのデータハンドリングTipsを、Youtubeで発信します。各回3分でBigQueryに関する話題が中心です。"Sexy Tech for You" と題して、思わず使いたくなるような魅力的なTipsを紹介していきたい…