-
-
GCPのLoggingで使用できるクエリについて
2023/5/22 GCP
監査ログ Cloud Loggingでは監査ログ(Audit Log)以外のログも収集されています。 なので、以下の監査ログを取得したい場合は、ログ名でCloud Auditsを選択してフィルタしまし ...
-
-
BigQueryのパーティショニング
https://cloud.google.com/bigquery/docs/creating-partitioned-tables?hl=ja パーティショニングの検証用環境。文字列をパーティショニ ...
-
-
BigQueryのさまざまな機能 #1
BigQuery Data Transfer Service BigQuery Omni BigQuery ML マテリアライズドビュー BigQuery Data Transfer S ...
-
-
GCPのさまざまなAPI認証方法
2022/9/29 GCP
GoogleではさまざまなAPIでソリューション提供をしています。 そしてAPIを使用するには、もちろんAPIの中身やレスポンスデータの中身によって、 キーや認証方法の厳しさなどがあります。 一般的な ...
-
-
【GCP】BigQueryのメモリオーバーの件
2023/3/2 GCP
BigQueryでは、世界のユーザーと共有してBigQueryのリソースを使用します。 なので、自分がある時間で使うとき使用できるメモリが少なかったりすることもあります。 そして、そうい ...
-
-
【GCP】BigQueryのARRAY_AGG関数
BigQuerでデータ整形をするとなったら、SQLだけではなくユーザー定義関数と呼ばれるUDF。 UDFを用いることでデータの変換処理などより細かく行うことができます。 そしてそんなUDFを用いるとき ...
-
-
【GCP】BigQueryのinformation schema
BigQueryを使ったシステム開発を行うとなった場合、気になるのはBigQueryのスペック。 グローバルリソースなので、みんなでリソースを共有するため、使う時間によってはスロットがな ...
-
-
【GCP】AppEngineについて
2022/5/10 GCP
App engineは基本的には、デプロイするとアクセスURLが発行されるのでそこにアクセスすることでapp engine内のプログラムが実行する。 そしてメモリは2Gなので、大容量データを用いての処 ...
-
-
【GCP】MonitoringでLoggingに溜まっているログデータからメッセージを通知する
2022/5/19 GCP
GCP上で何か処理をしている場合、エラーになったり、何か定期実行していて完了したかどうかの通知を自動的にしたい場合があるとします。 そのログデータを監視するという意味で、GCPには通知などを行う「Mo ...
-
-
【GCP】Google Cloud Platformの組織/フォルダ/プロジェクト/リソースについて
2022/5/7 GCP
Google Cloud Platformへのアクセス方法 Google Cloud Platformのリソースを操作するには、上のように、 管理画面にアクセスをして、GUIでぽちぽち操作する。 Go ...