AWS Glueを使ってみた 第2回

渡邊です。 前回(https://recipe.kc-cloud.jp/archives/11724)に引き続き、AWS Glueを動かすこと自体を目的とし、なるべく簡単な構成と処理内容で試してみようと思います。サンプルデータは、機械学習でよく用いられるアヤメのデータを使用しています。 構成 構築する構成を下図に再掲します。 S3バケットからデータをインプットし、同じS3バケットへアウトプッ... 続きを読む

AWS Glueを使ってみた 第1回

渡邊です。 データ分析や機械学習などにおいて、単一または複数のデータソースからデータを集約し、必要に応じて変換・加工した上で、データベースやデータウェアハウスなどに格納することがあります。これをETL(Extract, Transform and Load)処理と呼びます。 AWS GlueはこのETL処理を『分散処理』かつ『サーバレス』で提供するサービスです。 今回はこのAWS Glueを動... 続きを読む
1 / 11