AWS 〜アナリティクス〜

Amazon Kinesis

ストリーミングデータをリアルタイムで処理するには、Kinesisを利用する必要があります。Kinesisには以下があります。どの機能もニアリアルタイム（なるべくすぐ）にデータが発生するごと行っていくストリーミング処理のためのサービスです。デフォルトでは、Amazon Kinesisのストリームのレコードは、ストリームに追加された時点から最大24時間アクセス可能。拡張データ保持を有効にすることで、この制限を最大7日間まで引き上げることができる。

Kinesis Data Streams

秒あたりの数GBのデータをリアルタイムにストリーミング処理する

Kinesis Data Firehose

最低60秒のバッファでデータをS3などへ容易に格納する

Kinesis Data Analytics

ストリーミングデータをSQLなどを使い慣れた言語を使いリアルタイムに抽出検索する。

Kinesis Video Streams

監視カメラなどからリアルタイム検知のために動画データをストリーミングアップロードする。

Amazon EMR（Elastic MapReduce）

AmazonEMRは、膨大な量のデータを処理・分析するために、Apache HadoopやApache SparkなどのビッグデータフレームワークをAWS上で実行することを簡素化するマネージドクラスタープラットフォームのこと。ビッグデータ処理フレームワークを活用するには、Amazon EMRを使用する必要がある。このクラスタは、データ変換（ETL）を実行し、分析およびビジネスインテリジェンスアプリケーションのために、処理されたデータをAmazon Redshiftにロードする。

AWS X-Ray

X-RayはユーザーのリクエストがAmazon API GatewayAPIを経由して基礎となるサービスに移動する際にトレースし、分析することができます。API Gatewayは、リージョナル、エッジオプティマイズ、プライベートのすべてのAPI Gatewayエンドポイントタイプに対してAWS X-Rayのトレースをサポートします。X-Rayが利用可能なすべての地域で、Amazon API GatewayとともにAWS X-Rayを使用できます。X-Rayは、リクエスト全体のエンドツーエンドのビューを提供するので、APIとそのバックエンドサービスのレイテンシーを分析することができます。X-Rayは、セグメントドキュメントをコンパイルおよび処理し、GetTraceSummaries APIおよびBatchGetTraces APIを通じてアクセス可能なトレースサマリを生成します。

X-Rayトレースにインデックスを設定する方法はAnnotation（注釈）を使用してインデックスを追加する。