Amazon ElastiCache Redis ULM アプリケーションのログとメトリクスの収集

ステップ 1.Source Category の計画

Amazon ElastiCache Redis ULM 用の Sumo Logic アプリケーションのログ Source とメトリクス Source を設定する前に、それぞれに割り当てる Source Category を決める必要があります。次に示すように、階層的なアプローチを採用すると、検索の実行時にワイルドカードを使用できるのでお勧めです。

• CloudTrail イベント用の AWS CloudTrail Source には、Source Category として AWS/CloudTrail を使用します。
• CloudWatch メトリクスを収集するための AWS CloudWatch メトリクス Source には、Source Category として AWS/ElastiCache/Metric を使用します。
• SNS 経由の AWS ElastiCache には、Source Category として AWS/ElastiCache/Events/Notifications を使用します。

ステップ 2.AWS CloudTrail Source を使用した AWS CloudTrail イベントの収集

このセクションでは、Hosted Collector を設定して CloudTrail イベントを収集するための AWS CloudTrail Source を追加する方法を説明します。

ステップ 3.AWS CloudWatch メトリクス Source を使用した Amazon ElastiCache メトリクスの収集

このセクションでは、Hosted Collector を設定して、CloudWatch メトリクスを収集するための Amazon CloudWatch メトリクス Source を追加する方法を説明します。

ステップ 4: AWS SNS を使用した Amazon ElastiCache イベントの収集

このセクションでは、Amazon Simple Notification Service (Amazon SNS) を使用して重要なクラスタ イベントに関する通知を Sumo に送信するように ElastiCache を設定する方法を説明します。

ログ メッセージのサンプル

Elasticache Redis 用の Amazon CloudTrail イベント のサンプル ログ ファイルを次に示します。

{"eventVersion":"1.05","userIdentity":{"type":"IAMUser","principalId":"A12345678904QEWUABG5Q","arn":
"arn:aws:iam::123456789038:user/Nitin","accountId":"123456789038","accessKeyId":"A1234567890FHCUQYQRM","userName":"Nitin",
"sessionContext":{"attributes":{"mfaAuthenticated":"true","creationDate":"2018-10-29T07:08:50Z"}},"invokedBy":
"signin.amazonaws.com"},"eventTime":"2018-10-29T08:38:13Z","eventSource":"elasticache.amazonaws.com","eventName":
"CreateCacheSubnetGroup","awsRegion":"us-west-1","sourceIPAddress":"49.48.90.17","userAgent":"signin.amazonaws.com",
"requestParameters":{"cacheSubnetGroupName":"nitin-redis-subnet-grp1","subnetIds":["subnet-b33fc55e"]},"responseElements":
{"cacheSubnetGroupDescription":" ","vpcId":"vpc-b12fc345","subnets":[{"subnetAvailabilityZone":{"name":"us-west-1a"},
"subnetIdentifier":"subnet-b33fc55e"}],"cacheSubnetGroupName":"nitin-redis-subnet-grp1"},"requestID":
"c6a79737-1234-5678-bb74-9f27f56e6306","eventID":"70c2c865-1234-4567-893c-9800b91e2502","eventType":"AwsApiCall",
"recipientAccountId":"123456789038"}

SNS 通知としての Amazon ElastiCache イベント のサンプル ログ ファイルを次に示します。

{"ElastiCache:ReplicationGroupScalingInStarted":"nitin-redis-cluster1"}

クエリのサンプル

次のログ クエリは、[Amazon ElastiCache Redis ULM - CloudTrail Event - Overview (Amazon ElastiCache Redis ULM - CloudTrail イベント - 概要)] ダッシュボードの [Event Status Trend (イベント ステータスの傾向)] パネルから引用されたものです。

(_sourceCategory=*cloudtrail* or _sourceCategory=*AWS_EAGLE*) "\"eventSource\":\"elasticache.amazonaws.com\""
| json "userIdentity", "eventSource", "eventName", "awsRegion", "sourceIPAddress", "userAgent", "eventType", "recipientAccountId", "requestParameters", "responseElements", "requestID", "errorCode", "errorMessage" nodrop
| json field=userIdentity "type", "principalId", "arn", "userName", "accountId" nodrop
| json field=userIdentity "sessionContext.attributes.mfaAuthenticated" as mfaAuthenticated nodrop
| json field=requestParameters "replicationGroupId", "engine", "engineVersion" as req_replicationGroupId, req_engine, req_engineVersion nodrop
| json field=responseElements "replicationGroupId", "engine", "engineVersion", "status" as res_replicationGroupId, res_engine, res_engineVersion, res_status nodrop
| parse field=arn ":assumed-role/*" as user nodrop  
| parse field=arn "arn:aws:iam::*:*" as accountId, user nodrop
| if (isEmpty(errorCode), "Success", "Failure") as eventStatus
| if (isEmpty(userName), user, userName) as user
| if (isEmpty(req_replicationGroupId), res_replicationGroupId, req_replicationGroupId) as replicationGroupId
| if (isEmpty(req_engine), res_engine, req_engine) as engine
| if (isEmpty(req_engineVersion), res_engineVersion, req_engineVersion) as engineVersion
| where eventSource = "elasticache.amazonaws.com"
| timeslice 6h
| count by _timeslice, eventStatus, eventName
| transpose row _timeslice column eventStatus, eventName

次のクエリ例は、[Amazon ElastiCache Redis ULM - Metric - Overview (Amazon ElastiCache Redis ULM - メトリクス - 概要)] ダッシュボードの [Cache Hit Rate (キャッシュヒット率)] パネルから引用されたものサンプルです。

_sourceCategory=AWS/ElastiCache/Metric Namespace=AWS/ElastiCache metric=CacheHits Statistic=Average !CacheClusterId=* !CacheNodeId=* | avg
_sourceCategory=AWS/ElastiCache/Metric Namespace=AWS/ElastiCache metric=CacheMisses Statistic=Average !CacheClusterId=* !CacheNodeId=* | avg
(#A / (#A + #B) * 100)

次のログ クエリは、[Amazon ElastiCache Redis ULM - Notifications Dashboard (Amazon ElastiCache Redis ULM - 通知ダッシュボード)] の [Recent Events (最近のイベント)] パネルから引用されたものです。

_sourceCategory=AWS/ElastiCache/SNSNotifications* Elasticache
| json "Message" as msg nodrop
| if (!isEmpty(msg), msg, _raw) as msg
| parse field=msg "\"ElastiCache:*\":\"*\"" as event, clusterId nodrop
| parse field=msg "\"Elasticache:*\":\"*\"" as event, clusterId nodrop
| json field=msg "Total Slots Moved" as TotalSlotsMoved nodrop
| json field=msg "Amount Of Node Groups That Will Be Removed" as AmountOfNodeGroupsThatWillBeRemoved nodrop
| if (event matches "*Failed", "Failure", "Success") as status
| timeslice 1s
| count by _timeslice, event, clusterId, status
| sort by _timeslice