Cloud FunctionsとCloud Workflowsを使ってDataprocを動かしてみよう
みなさんこんにちは、GMOアドマーケティングのM.H.です。 日に日に溜まっていく膨大なデータを解析したり、機械学習モデルに投げるデータの前処理をしたりするための大規模データの分散処理フレームワークは幾つかありますが、そ...
みなさんこんにちは、GMOアドマーケティングのM.H.です。 日に日に溜まっていく膨大なデータを解析したり、機械学習モデルに投げるデータの前処理をしたりするための大規模データの分散処理フレームワークは幾つかありますが、そ...
GMO NIKKOのS.Tです。 社内システムをクラウド化(移行中)する機会があったので共有します。 今回はその第二回目として下記を説明します。 ・Cloud Functions ・Cloud SQL ・App Engi...
GMO NIKKOのS.Tです。 社内システムをクラウド化(移行中)する機会があったので共有します。 長いので今回はその第ー回目として下記を説明します。 ・Compute Engine ・Cloud Storage ・B...
こんにちは。GMO NIKKO エンジニアのN.I.です。 今回は検証環境のCloudSQLをインスタンスを平日の9:30~21:00に自動起動して自動停止する仕組みを作成したのでこちらを紹介したいと思います。 前回Co...
こんにちは。GMO NIKKO エンジニアのN.I.です。 今回は検証環境のCompute Engine インスタンスを平日の9:30~21:00に自動起動して自動停止する仕組みを作成したのでこちらを紹介したいと思います...
この記事は GMOアドマーケティング Advent Calendar 2021 2日目の記事です。 こんにちは。GMOアドマーケティングの@zakisanbaimanです。業務でGoogle Cloud Function...
こんにちは。GMO NIKKO エンジニアのN.I.です。 今回はCloud Storage(GCS)から自動でBigQueryにCSVデータを取り込む仕組みを作成したので紹介します。 BigQueryにCSVデータを取...
こんにちは。GMOアドマーケティングのH.Tと申します。 目新しいネタではないのですが、Cloud Pub/SubでBigQueryの「スケジュールされたクエリ」の結果をSlack通知してみたのでご紹介いたします。 きっ...