BigQuery

SQLクエリを書く際、サブクエリやWITH句（Common Table Expressions、CTE）を使う場面に直面することがよくあります。どちらを選ぶか迷った時に、それぞれの特徴と利点を理... Read more

BigQueryでは、事前に計算されたデータを保存し複雑なクエリを効率的に実行できる「マテリアライズドビュー」の利用でクエリの実行速度向上ができます。テーブルを結合・集計しマテリアライズドビュー... Read more

はじめに新田こんにちは。今回はBigQueryのテーブルの外部データとしてスプレッドシートを利用する方法をまとめたいと思います。特にマスタ系のデータを扱うような場合はデータの更新が面倒ですが、こ... Read more

この記事では、GCPについての基本的な役割とその主要なサービスであるBigQuery、GCS、Cloud AutoMLについて初心者向けにわかりやすく説明します。続きはこちらから。 Read more

データ分析において、大規模なデータセットを効率的にクエリすることは非常に重要。Google BigQueryは、データウェアハウスとして広く利用されており、データセットに対する高速クエリを可能に... Read more

近年、データ分析の重要性がますます高まっていますが、膨大なデータを収集・分析するには適切なツールが必要。今回はGoogle Cloud Platform上のデータパイプラインサービスDatafo... Read more

近年、データ分析はビジネスにおいて必須のスキル。しかし複雑なSQLクエリの記述スキルがないため、分析を諦めてしまう人も多いのではないでしょうか。そこで今回は、Google Cloud Platf... Read more

今回はBigQueryにスプレッドシートのデータを取り込む際の方法と注意点についてまとめてみたいと思います。続きはこちらから。 Read more

弊社エンジニアの記事になります。はじめにこんにちは！今回は高速データ処理を行えるBIG QUERYを調べ、実際に使ってみるところまでやっていきたいと思います！調べるきっかけ業務でBIG QUER... Read more

みなさんこんにちは、システム部の岡崎です。今回はBigQueryのSQLだけでRAGを作ってみようと思います。目次1. RAG(Retrieval-Augmented Generation)とは... Read more

データの縦列変換を行いたい方に向けてサンプルを用いて方法を説明しています。続きはこちらから。 Read more

新しくEnterprise版がリリースされたGooogle Colabをプランごとの違いを詳しく調査・比較しました。ここではBigQueryとの統合、他のプラン・VertexAI Workben... Read more

PythonからpandasデータをBigQueryにアップする際の列名とデータ型の指定が煩わしい点への解決策を出しました！コード例を交えながら、効率的に解決する方法を紹介します。BigQuer... Read more

本記事ではBigqueryで実際にスケジューリング設定を行う際に出てきた壁3つとその解決方法をお伝えします。続きはこちらから。 Read more

dbt (data build tool) はデータサイエンティストやデータエンジニアがSQLを用いてデータ変換処理（Transformation）をより効率的に行うためのツールです。この記事で... Read more