数据的快速接入

数据的快速接入 在日常使用日志易过程中我们希望可以直接对数据进行查询或分析,但随着业务的发展和分析的需要,日常增加数据接入的工作随之而来。因此了解日志易数据接入的过程也十分必要。...

数据的快速接入

在日常使用日志易过程中我们希望可以直接对数据进行查询或分析,但随着业务的发展和分析的需要,日常增加数据接入的工作随之而来。因此了解日志易数据接入的过程也十分必要。

1. 日志易的接入方式

attachments-2018-08-cHh28fWU5b7a7a38bc4b6.png

2. 日志接入流程示意图

attachments-2018-08-gjeRyzkO5b7a7a4c30fe9.png

数据接入说明:通过安装日志易Agent后,选择需要接入的文件,然后对数据源进行命名,通过对关键字段进行提取后。即可对日志进行分析处理。

3.样例:通过linux系统日志接入演示Agent安装、数据接入和查询过程。

3.1 上传并解压日志易agent文件.

attachments-2018-08-pUxkVt1n5b7a7a8addcba.png

注意:无/opt/rizhiyi可以自行创建,亦或自行规划安装路径。

3.2执行解压

mkdir -p /opt/rizhiyi
cd /opt/rizhiyi/
tar xvf heka-1_10_0.26-linux-amd64.tar
cd  heka-1_10_0.26-linux-amd64/bin

3.3安装命令

/bin/sh ./install.sh 192.168.1.121:10001 192.168.1.120:8080 3a0644f81fc888dca70be0b8ba00a0b1 192.168.1.120:5180

3.4安装后效果

打开日志易前台--设置--Agent管理,如下图:

attachments-2018-08-11Zxjl075b7a7ac23e10c.png

Agent管理中会出现刚刚安装节点的Agent信息。如下图:

attachments-2018-08-PAsFeD145b7a7adc36a11.png

3.5数据接入

Agent管理中点击刚安装的Agent,进入数据采集界面:

attachments-2018-08-sF7gOqD35b7a7af18ac54.png

点击添加按钮

attachments-2018-08-XDudcofz5b7a7b0483840.png
进入采集界面
attachments-2018-08-YsEF6QZV5b7a7b16a3ebf.png

采集样例,如下图

attachments-2018-08-76fc4kmH5b7a7b3097979.png

选择样例日志文件,下一步

attachments-2018-08-snoubzcd5b7a7b4b63885.png

针对日志易来源进行分类命名:

attachments-2018-08-QzAR721N5b7a7b5fcb86a.png

对配置进行检查

attachments-2018-08-l3Z7RrQk5b7a7b75c8dba.png

最后回道“搜索”页面查看刚才接入日志:

attachments-2018-08-fWUStxyF5b7a7b92ea44c.png

基础日志接入完成

  • 发表于 2018-08-20 16:29
  • 阅读 ( 5062 )
  • 分类:数据接入

你可能感兴趣的文章

相关问题

1 条评论

请先 登录 后评论
不写代码的码农
admin

15 篇文章

作家榜 »

  1. 日志易 24 文章
  2. admin 15 文章
  3. 日志易小A 2 文章
  4. 疯狂的馒头 2 文章
  5. 腾龙国际娱乐 1 文章
  6. rizhiyi509 1 文章
  7. Xiaoyu 1 文章
  8. 陈晨 0 文章