BigQuery

みなさんこんにちは、システム部の岡崎です。今回はBigQueryのSQLだけでRAGを作ってみようと思います。目次1. RAG(Retrieval-Augmented Generation)とは... Read more

データの縦列変換を行いたい方に向けてサンプルを用いて方法を説明しています。続きはこちらから。 Read more

新しくEnterprise版がリリースされたGooogle Colabをプランごとの違いを詳しく調査・比較しました。ここではBigQueryとの統合、他のプラン・VertexAI Workben... Read more

PythonからpandasデータをBigQueryにアップする際の列名とデータ型の指定が煩わしい点への解決策を出しました！コード例を交えながら、効率的に解決する方法を紹介します。BigQuer... Read more

本記事ではBigqueryで実際にスケジューリング設定を行う際に出てきた壁3つとその解決方法をお伝えします。続きはこちらから。 Read more

dbt (data build tool) はデータサイエンティストやデータエンジニアがSQLを用いてデータ変換処理（Transformation）をより効率的に行うためのツールです。この記事で... Read more

今回はBigQuery上のデータから同時に購入される商品について分析を行うバスケット分析を行ってみたので、その実装方法をまとめたいと思います。データサイズが大きく使用するメモリを削減した実装を行... Read more

BigQueryのSQL言語は、データ分析や処理の際に強力なツールです。中でもQUALIFY句は、ウィンドウ関数とともに使われ、特定の条件を満たす行を簡潔に抽出するための重要な機能です。QUAL... Read more

この記事では、BigQueryとdbt(Data Build Tool)Cloudを使用してデータモデリングにおけるディメンショナルモデリングの基本について解説しています続きはこちらから。 Read more

FiveTranはデータ統合ツールであり、ELTプロセスの「E」、つまり抽出（Extraction）の部分を担当しています。今回はBigQueryを例にその接続方法の基本的な手順を解説していきま... Read more

概要:この記事では、BigQueryを使用してデータ分析を行う方法を紹介します。顧客ごとに、最初の注文日から1年間の間に発生した購入金額の合計を算出します。1年LTVを算出することで優良顧客のセ... Read more

この記事では、BigQueryを使用してデータ分析を行う方法を紹介します。RFM分析はPythonなどで行うケースが多いですが、SQLでも非常なシンプルなクエリで算出することができます。RFM分... Read more

この記事では、BigQueryを使用してデータ分析を行う方法を紹介します。別記事でご紹介した年別RFM分析を利用して、優良顧客数推移を算出します。時間経過ごとに顧客属性の変化を追うことで、顧客ニ... Read more

今回はBigQuery上で行われるアンネスト(UNNEST)処理についてご紹介します。続きはこちら… Read more

BigQueryは、クラウドベースのデータウェアハウスプラットフォームであり、高速なデータ処理と分析を提供します。統計情報は、データセットやテーブルに関する重要な洞察を提供し、クエリパフォーマン... Read more