代码之家  ›  专栏  ›  技术社区  ›  Fedor

从CloudWatch到ELK的AWS流式多行日志文件

  •  0
  • Fedor  · 技术社区  · 8 年前

    我们正在将应用程序日志从CloudWatch流到AWS ELK。我们的微服务是用Java编写的,所以我只关注这些。记录时,典型的java异常堆栈跟踪如下所示:

    Exception in thread "main" java.lang.NullPointerException
        at com.example.myproject.Book.getTitle(Book.java:16)
        at com.example.myproject.Author.getBookTitles(Author.java:25)
        at com.example.myproject.Bootstrap.main(Bootstrap.java:14)
    

    正常情况下,这将被逐行摄入麋鹿堆栈中,从而中断整个消息。

    通常,要将整个堆栈跟踪作为单个消息接收,可以配置 多行 Logstash或Filebeat中的插件。

    你知道如何在AWS lambda将CloudWatch的日志文件流式传输到ELK时启用多行吗?

    1 回复  |  直到 8 年前
        1
  •  2
  •   Fedor    8 年前

    这是AWS cloudwatch logger的一个已知问题,请参阅RichardBronosky的评论 https://github.com/visionmedia/debug/issues/296

    我做了一些测试,发现CloudWatch日志条目可以是多行的 通过使用 \r 作为行分隔符。使用其中一个 \n \r\n (DOS)线 结尾将导致单独的条目

    所以我添加了以下内容 ExceptionHandler 至弹簧靴 RestController

    @ExceptionHandler(Throwable.class)
    void handleUnhandledExceptions(Throwable e, HttpServletResponse response) throws IOException {
        StringWriter buffer = new StringWriter();
        e.printStackTrace(new PrintWriter(buffer));
        log.error(buffer.toString().replace("\n", "\r"));
        response.sendError(HttpStatus.INTERNAL_SERVER_ERROR.value(), e.getMessage());
    } 
    
    推荐文章