代码之家 › 专栏 › 技术社区 › Brian

如何统计CloudWatch日志中IP地址的出现次数

amazon-cloudwatch amazon-web-services

Brian · 技术社区 · 6 年前

假设我有一个云表日志,如下所示:

最左边的IP表示请求的来源。

是否可以列出在我指定的时间范围内每个IP的出现次数?

我是说我想创建如下数据:

time range: 2019-06-02 00:00:00 - 2019-06-04 13:00:00
number of occurrences of `172.31.13.80`: 130
number of occurrences of `172.31.25.110`: 112
number of occurrences of `172.31.8.124`: 99
number of occurrences of `172.31.8.121`: 86

看来 CloudWatch Logs Insights 能做一些我想做的事但我还没想好如何用真知灼见做到这一点。

有人知道如何计算每个IP的出现次数吗?

0 回复 | 直到 6 年前

guest 6 年前

如果您的目标是分析实际的远程IP地址并使用ELB,那么远的最好是抓住 ELB access logs 分析这些这将提供以下好处:

访问源请求数据,包括客户端IP和SSL参数。
计时信息,包括失败请求的计时。
不需要编写公开请求头的自定义日志格式。

AWS Athena 有预先建立的查询来访问这些日志,而自由神弥涅尔瓦的SQL类查询语言比云计算日志提供了更大的灵活性。您还可以将日志发送到CloudWatch并使用Insights(它可以识别ELB日志格式),但这似乎是不必要的工作。

Darren Reddick 6 年前

“弹性负载平衡在最大努力的基础上记录请求我们建议您使用访问日志来了解请求的性质,而不是作为所有请求的完整记帐。”

https://docs.aws.amazon.com/elasticloadbalancing/latest/application/load-balancer-access-logs.html

如果精度很重要并且使用ELB日志,则值得记住我在过去做过一些分析HTTP访问日志和ELB日志的工作,发现它们之间的请求计数有相当大的差异(HTTP日志是准确的)

推荐文章

hallibut · Lambda功能不工作的SST热重新加载

1 年前

Tim · 在java中,有没有更快的方法将字节数组写入文件?

1 年前

Tom McLean · 如何使用证书管理器制作的证书在AWS上创建到mongodb实例的TLS/SSL连接?健康检查失败

1 年前

Nuñito Calzada · AWS SDK 1.12.780 Java版的凭据

1 年前

Sampgun · CDN调用与lambda调用的巨大差异

1 年前

Mario MateaÈ · 无法从Elastic Beanstalk的EC2实例访问外部MongoDB Atlas数据库

1 年前

Tiago · 如何允许从一个安全组到另一个组的所有流量?

1 年前

Ercan Koc · 使用EKS和RDS Aurora在My VPC中努力切换到IPv6

1 年前

Andrew · CloudWatch错误:规则JobFailureRule应在堆栈范围内创建,但找不到堆栈

1 年前

explorer · AWS SageMaker项目模板创建失败

1 年前