Amazon Redshift編~パフォーマンスチューニング 圧縮編~

こんにちは!中の人です。 前回の『Amazon Redshift編~パフォーマンスチューニング sortkey編~』『Amazon Redshift編~パフォーマンスチューニング distkey編~』のレシピでは、Redshiftのパフォーマンスチューニングとしてsortkey/distkeyの設定方法と、設定によるパフォーマンスの違いを紹介しました。 今回は『Amazon Redsh... 続きを読む

Amazon Redshift編~パフォーマンスチューニング distkey編~

こんにちは!中の人です。 前回の『Amazon Redshift編~パフォーマンスチューニング sortkey編~』では、Redshiftのパフォーマンスチューニングとしてsortkeyの設定方法と、設定によるパフォーマンスの違いを紹介しました。 今回は『Amazon Redshift編~パフォーマンスチューニング distkey編~』と題して、Redshiftに対してdistribu... 続きを読む

Amazon Redshift編~パフォーマンスチューニング sortkey編~

こんにちは!中の人です。 前回までのレシピでは、Redshiftに対して様々な環境下でのパフォーマンス比較をおこなってきました。 ■ Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(シングル)~ ■ Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(マルチ)~ ■ Amazon Redshift編~複数クエリ同時実行時パフォーマンス... 続きを読む

Amazon Redshift編~Unloadパート③~

こんにちは! JQです。 前回は『Amazon Redshift編~Unloadパート②~』ということで、Redshiftから暗号化してS3に外部出力してみました。 今回は『Amazon Redshift編~Unloadパート③~』と題して、RedshiftからS3に出力するフォーマットを変更してみたいと思います。 フォーマットを変更してS3へ外部出力 1. フォーマットを... 続きを読む

Amazon Redshift編~Unloadパート②~

こんにちは! JQです。 前回は『Amazon Redshift編~Unloadパート①~』ということで、RedshiftからS3に外部出力してみました。 今回は『Amazon Redshift編~Unloadパート②~』と題して、Redshiftから暗号化してS3に外部出力してみたいと思います。 暗号化してS3へ外部出力 暗号化してS3に外部出力 1. S3へ暗号化して... 続きを読む

Amazon Redshift編~パフォーマンス比較(MySQL vs Redshift) 後編~

こんにちは!中の人です。 前回までのレシピでは、『Amazon Redshift編~パフォーマンス比較(MySQL vs Redshift) 前編~』ということで、RDSとRedshiftに対して通常のselect文でのパフォーマンス比較を行いました。 後編ではカラムナー型であるRedshiftが得意とする方法でのパフォーマンスを検証します。 では実際に、検証結果を見ていきましょ... 続きを読む

Amazon Redshift編~パフォーマンス比較(MySQL vs Redshift) 前編~

こんにちは! 中の人です。 前回までのレシピでは、RedshiftのXLノード1~数台に対して様々なSQLを実行してパフォーマンス比較およびまとめを行いました。 ※ 下記、過去記事参照 ■ Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(シングル)~ ■ Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(マルチ)~ ■ Amazo... 続きを読む

Amazon Redshift編~Unloadパート①~

こんにちは! JQです。 前回は『Amazon Redshift編~RubySDKパート③~』ということで、RubyからRedshiftを操作してみました。 今回は『Amazon Redshift編~Unloadパート①~』と題して、RedshiftからS3に外部出力してみたいと思います。 データの準備 ※Redshiftの作成には以前のレシピ『Amazon Redshift編~R... 続きを読む

Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(まとめ)~

こんにちは!中の人です。 前回までのレシピでは、下記の3回にわたってRedshiftに対して負荷をかけるテストを行って来ました。 ■Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(シングル)~ ■Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(マルチ)~ ■Amazon Redshift編~複数クエリ同時実行時パフォーマンス比較(... 続きを読む

Amazon Redshift編~RubySDKパート③~

こんにちは! JQです。 前回は『Amazon Redshift編~RubySDKパート②~』ということで、RedshiftをRubySDKから削除しました。 今回は『Amazon Redshift編~RubySDKパート③~』と題して、RubyからRedshiftを操作してみたいと思います。 DBIとdbd-pgのインストール 今回はDBIとdbd-pgを利用してReds... 続きを読む
2 / 41234