AWSデータベース紹介編~AWSの様々なDBサービス編⑥~

こんにちは!HEROです。 前回はEMR導入編として、Hadoopについてご説明しました。 今回はいよいよ、EMRの特徴や料金体系についてみていきましょう。 ▼ 前回の記事はこちら AWSデータベース紹介編~AWSの様々なDBサービス編⑤~ ◯EMRの特徴 まずはEMRの特徴からです。 ・伸縮自在!! AWSといったらまずはこれですね! EMRのイメージは大量のPCを... 続きを読む

AWSデータベース紹介編~AWSの様々なDBサービス編⑤~

こんにちは!HEROです。 さて、前回までAWS DB編と題してDynamoDBやRedShiftについてご紹介させてただきましたが、今回はそれらと関係の深いサービスのEMRについてご紹介していきます。 ▼ これまでの記事はこちら AWSデータベース紹介編~AWSの様々なDBサービス編~ AWSデータベース紹介編~AWSの様々なDBサービス編②~ AWSデータベース紹介編~AWS... 続きを読む

Amazon DynamoDB編~データをエクスポートしよう~

こんにちは!Narimasaです! 以前、「Amazon DynamoDB編~DynamoDBをはじめてみよう!」というタイトルで記事を掲載していますが、その頃から約1年が経ちDynamoDBも進化してきました! 今回は「Amazon DynamoDB編~データをエクスポートしよう~」と題して、AWSコンソールを使ってDynamoDBからデータをエクスポートする手順を紹介します。 ▼... 続きを読む

ELB編~ELBのアクセスログをEMRで解析~

こんにちは! JQです。 前回は『ELB編~ELBのアクセスログ機能~』と題して、ELBの新機能であるアクセスログ機能を試してみました。 今回は『EMR編~ELBのアクセスログをEMRで解析~』と題して、ELBの新機能であるアクセスログ機能で取得したデータをEMRで解析してみたいと思います。 クラスターの起動 1. クラスターの起動 「Create Cluster」でクラスターを... 続きを読む

Amazon EMR編~ElasticMapReduceの使い方パート④~

こんにちは! JQです。 前回のレシピでは『Amazon Redshift編~Redshiftをはじめてみよう!パート②~』ということでお話しました。  今回は既に以前のレシピで記述したAmazon EMR編に一旦、戻りまして『Amazon EMR編~ElasticMapReduceの使い方パート④~』と題して、Amazon EMRにて、デバッグを利用した場合を確認していきたいと思います。... 続きを読む

Amazon EMR編~ElasticMapReduceの使い方パート③~

こんにちは! JQです。 前回は『Amazon EMR編~ElasticMapReduceの使い方パート②~』ということで、実際にJob Flowを立ち上げるところまでをお話しました。  今回も引き続き、『Amazon EMR編~ElasticMapReduce使い方パート③~』と題して、出力した結果などを確認していきたいと思います。 前回起動したJob FlowのStateを確... 続きを読む

Amazon EMR編~ElasticMapReduceの使い方パート②~

こんにちは! JQです。 前回は『Amazon EMR編~ElasticMapReduceの使い方パート①~』ということで、EMRを利用する準備までをお話しました。  今回も『Amazon EMR編~ElasticMapReduceの使い方パート②~』と題して、引き続きEMRの使い方に関してお話していきたいと思います。 前回のパート①でS3バケットやスクリプトの準備が完了している為、... 続きを読む

Amazon EMR編~ElasticMapReduceの使い方パート①~

こんにちは! JQです。 前回は『Amazon VPC編~Natインスタンスパート④~』ということで、RouteTableによるNatインスタンスの切替をお話しました。  今回は『Amazon EMR編~ElasticMapReduceの使い方パート①~』と題して、EMR(ElasticMapReduce)の使い方に関してお話していきたいと思います。 っと、その前にAWSの更新情報を... 続きを読む