前段时间举办的 CNUTCon 运维大会上,日志易技术副总裁黎吾平就 “日志分析场景下搜索引擎的改进” 发表了演讲,以下是演讲内容回顾——
近日,日志易 3.0 版本正式发布。大版本号都改了,正如你所预料的,这次功能升级带来的经验增幅也是上了一个大大的新台阶呢! 早在去年,日志易自研引擎就已展露锋芒。新版本全面采用自研 Beaver 搜索分析引擎,并发写入效率提升了 400%-500%,查询性能提升了 50%,统计性能提升了 100%-200%。
数据的快速接入 在日常使用日志易过程中我们希望可以直接对数据进行查询或分析,但随着业务的发展和分析的需要,日常增加数据接入的工作随之而来。因此了解日志易数据接入的过程也十分必要。...
调用链、微信告警、Topic管理、原文备份功能发布!
本文通过对日志易告警功能介绍,实现告警功能配置
Task 1. 搭建一个单机的hadoop 2. 用flume读测试环境Kafka数据写到hdfs中 环境准备 1. jdk1.8.0_102 2. hadoop-2.7.3 3. apache-flume-1.7.0-bin 4. 三个子...
就像分诊护士一样,安全人员也必须给数据分出个优先主次,以帮助他们更好地识别问题,使公司企业及其数据和设备能够避免入侵者和网络攻击的伤害。
点击上方“日志易”,关注我们哦! 近日,日志易团队参与了以光大证券信息技术总部为主导的《基于大数据与机器学习的证券行业智能运维体系建设》联合研究课题,并为光大证券智能运维体系实际落...
该方法采用look命令实现 1.新建一个地址列表的csv文件内容如下 ip,city,lo,la ip为你该区域的地址,lo 经度,la 纬度,国家省可以不用。csv文件放在日志易服务器的/data/rizhiyi/spldata/l...
针对金融行业黑客攻防类安全问题 日志易结合自身实践与心得,在6月底发起了一场关于“SOC/SIEM的实践分享”直播 我们整理内容的精华,如果您错过了直播,这篇文章不容错过。文末有PPT下载入口
某天 8 点 35 分,某地铁乘车码 APP 出现异常。正值早高峰时期,乘车码异常给众多用户造成了极大困扰。据初步定位,故障主要发生在该地铁 Nginx 集群系统上。虽然故障在半个小时后自动恢...
1.请先登录manager,登录方法: 在chrome浏览器输入日志易平台ip:8180,默认用户admin ,输入密码。 2.选择版本管理àlicense管理 3.选择license文件所在路径并提交 4....
在所有编程语言中,Java 语言的使用率长期位居榜首。虽然 Python 有后来居上之势,但你大哥毕竟是你大哥,后端开发语言总是要用的,移动应用和嵌入式开发领域也有它的一片天。Java 语言的跨平台...
kv正则解析案例 1. 日志解析难点说明 在某银行案例中遇到发卡机和 ATM 日志,日志为多行形式,通过 Agent 按照固定符号进行多行合并,合并规则为 \n(\[\d+.*?\].*?\*服务) 。在取关健字段时...
本文总结了9条日志记录最佳实践。是否记录日志不再是问题的现在,如何记录日志和日志记录什么内容,已经成为 IT 运营部门试图提高应用程序性能和投资回报率,需要关注的领域之所在。
现代企业发展过程中,业务高度依赖互联网技术的支撑。借助互联网监控技术,对业务流程进行监控,可以帮助企业衡量和分析业务流程的性能,通过数据找出关键业务...
极客邦科技(InfoQ)主办的第四届CNUTCon全球运维技术大会,邀请了Twitter、RIOT Games、BAT、华为等国内外一线大厂,全方位、多角度分享运维领域50+最佳实践案例!会议第二日,“日志处理”与您相约!
数字化转型大潮和创新技术的涌现,赋予了CIO及企业IT高管前所未有的重要角色,如何构建企业数据资产,为企业带来质的飞越或新的生机,凸显CIO以及IT部门的价值,将是许多企业CIO及IT高管面临解决的问题。 本期活动我们有幸邀请了几位资深大数据专家,通过企业实战、最佳技术案例与您一起分析探讨企业大数据能力建设之路。
日志易这样那样的小功能呢,聪明的你发现了吗?
日志易的智能日志中心平台提供了日志数据脱敏功能,且做到下载后的数据也是脱敏的,便于上海交通大学医学院附属同仁医院满足国家等级保护要求,对网络设备、安全设备日志进行集中收集和存储。
今天,有什么经验需要分享呢?
立即撰写