-
【GA4】GA4のローデータをunnestしてさらにデータ整形する
GA4とは次世代のGoogle AnalyticsというWebとアプリが統合されたアクセス解析ツールのことで、このユーザーのアクセスデータをBigQueryに吐き出すことができます。 この吐き出された ...
-
GCPのさまざまなAPI認証方法
2022/9/29 GCP
GoogleではさまざまなAPIでソリューション提供をしています。 そしてAPIを使用するには、もちろんAPIの中身やレスポンスデータの中身によって、 キーや認証方法の厳しさなどがあります。 一般的な ...
-
グローバルIPアドレスとプライベートIPアドレスの変換について
2022/9/19
GCPやAWSなどクラウドで簡単にサーバなどが立てられるようになった反面、ネットワークの整備であったりが重要になってきました。 簡単にGCPではGUIでもポチポチ5分以内にはVPCが構築 ...
-
【GCP】BigQueryのメモリオーバーの件
2023/3/2 GCP
BigQueryでは、世界のユーザーと共有してBigQueryのリソースを使用します。 なので、自分がある時間で使うとき使用できるメモリが少なかったりすることもあります。 そして、そうい ...
-
【GCP】BigQueryのARRAY_AGG関数
BigQuerでデータ整形をするとなったら、SQLだけではなくユーザー定義関数と呼ばれるUDF。 UDFを用いることでデータの変換処理などより細かく行うことができます。 そしてそんなUDFを用いるとき ...
-
【GCP】BigQueryのinformation schema
BigQueryを使ったシステム開発を行うとなった場合、気になるのはBigQueryのスペック。 グローバルリソースなので、みんなでリソースを共有するため、使う時間によってはスロットがな ...
-
【GCP】AppEngineについて
2022/5/10 GCP
App engineは基本的には、デプロイするとアクセスURLが発行されるのでそこにアクセスすることでapp engine内のプログラムが実行する。 そしてメモリは2Gなので、大容量データを用いての処 ...
-
【GCP】MonitoringでLoggingに溜まっているログデータからメッセージを通知する
2022/5/19 GCP
GCP上で何か処理をしている場合、エラーになったり、何か定期実行していて完了したかどうかの通知を自動的にしたい場合があるとします。 そのログデータを監視するという意味で、GCPには通知などを行う「Mo ...
-
【GCP】Google Cloud Platformの組織/フォルダ/プロジェクト/リソースについて
2022/5/7 GCP
Google Cloud Platformへのアクセス方法 Google Cloud Platformのリソースを操作するには、上のように、 管理画面にアクセスをして、GUIでぽちぽち操作する。 Go ...
-
windowsでバッチファイルを作成する
2021/12/25 GCP
バッチファイルとは、 macでいうシェルスクリプトファイルと同じで、 コマンドで様々な処理を一括(バッチ)で処理する方法を記載したファイルのことです。 要はコマンドがまとめて記載されたファイルのことで ...