浅谈用MongoDB存储Docker日志

日志是系统很重要的一个组成部分,通过日志可以及时发现系统中存在的问题,也可以为修复问题提供线索。Docker提供了多种插件方式管理日志,本文就对使用MongoDB     存储   Docker日志的过程做个记录。

 数据流

Docker产生的日期 发送到 FluentD,然后FluentD在转存到MongoDB。

配置Fluentd

前提:操作系统是CentOS7,已安装MongoDB3.4

 1.安装Fluentd

CentOS 7的软件库并没有包含Fluentd的安装包,所以需要手动安装。在CentOS使用的软件td-agent。

上面命令会在/etct/yum.repo.d/目录中,创建一个td-agent的安装库 td.repo,然后自动安装td-agent。安装完毕后设为自动启动。

如果在启动过程中出现问题,可以查看位于/var/log/td-agent/下日志文件td-agent.log

 2. 配置将docker日志转存到MongoDB

转存到MongoDB需要插件支持,但是默认情况下td-agent是没有安装该插件的,需要安装。

编辑/etc/td-agent/td-agent.conf,增加

重启td-agent。

 3.启动容器

启动容器的命令改为:

运行完毕后,可以到MongoDB中查看日志。

 解决写入延迟

上面我们完成了Docker + Fluentd + MongoDB的基本配置。但是在实际的使用过程中,却发现Docker生成的日志并不会立即写入到MongoDB中,有大概1分钟左右的延迟。

查阅Fluentd的文档得知,有一个flush参数可以控制日志的写入频率,默认的是60s。更改flush_in     te   rval参数就可以提高写入频率,具体更改如下:

刚开始对文档理解不太透彻,增加了flush_interval参数后,并没有发挥作用,***次更改时,并没有将flush_mode和flush_interval放在buffer结构中。也就是:

从日志中也可以看出上面的配置,并没有发挥作用:

上面说flush_mode并没有起作用。

好了,操作步骤以及实际案例就介绍到这里,希望今天的内容对你所帮助!

浅谈用MongoDB存储Docker日志_设计制作_存储技术
35
69
0
36

相关资讯

  1. 1、惊悚电影《三角窗外是黑夜》花絮宣传片21年1月22日上映4508
  2. 2、他十岁出道演了秦始皇与汉武帝,演技精湛,退圈后回归校园成学霸201
  3. 3、《中国合伙人2》创业就是在打仗,刮起互联网江湖的大风暴1588
  4. 4、“漫威之父”斯坦·李逝世;《权游》第八季首发预告片1945
  5. 5、《正青春》还在热播,殷桃又一家庭剧将袭,搭档袁弘、姜妍、曾黎883
  6. 6、永璜成为如懿养子,结果养虎为患,最后失去继承大统机会4364
  7. 7、《非诚勿扰》解读异地恋黄菡:恋爱时间别过长4002
  8. 8、她才是导演一眼看中的“白娘子”,拒绝后悔26年,却成就了赵雅芝4349
  9. 9、《毒液》国内终于过审!中国版海报曝光!索尼:这次一刀不剪!3325
  10. 10、《江湖儿女》首映:贾樟柯的“江湖”,时代的“儿女”1772
全部评论(0)
我也有话说
0
收藏
点赞
顶部