专利详细信息
文献类型:专利
专利类型:发明专利
是否失效:否
是否授权:否
申 请 号:CN202211094169.9
申 请 日:20220908
申 请 人:北京亿赛通网络安全技术有限公司
申请人地址:100085 北京市海淀区西二旗大街39号3层301
公 开 日:20221011
公 开 号:CN115168314A
代 理 人:王玉玲
代理机构:北京千壹知识产权代理事务所(普通合伙)
语 种:中文
摘 要:本发明涉及计算机数据处理技术领域,公开了一种日志数据的处理方法及系统,包括:对应用服务器上的日志数据的格式进行统一规范,形成每个应用服务器的日志文件;将每个应用服务器上的日志文件上传至FTP服务器;根据配置的日志传输参数,将FTP服务器上的日志文件导入至ES服务器集群,日志传输参数用于控制日志文件导入至ES服务器集群的频率和流量阀值;ES服务器集群按照预设脚本,按时间段分区创建索引;响应于外部对当前时间区间的索引是否存在的请求信息,调用查询接口判断该索引是否存在,若不存在则按当前时间区间创建索引。本发明能够提供包括日志数据生产、收集、传输、存储、检索在内的一套完整方法。
主 权 项:1.一种日志数据的处理方法,其特征在于,包括如下步骤:S1:对应用服务器上的日志数据的格式进行统一规范,形成每个应用服务器的日志文件;S2:将每个应用服务器上的日志文件上传至FTP服务器;S3:根据配置的日志传输参数,将FTP服务器上的所述日志文件导入至ES服务器集群,所述日志传输参数用于控制日志文件导入至ES服务器集群的频率和流量阀值;S4:所述ES服务器集群按照预设脚本,按时间段分区创建索引;S5:响应于外部对当前时间区间的索引是否存在的请求信息,调用查询接口判断该索引是否存在,若不存在则按当前时间区间创建索引。
关 键 词:索引 服务器集群 应用服务器 日志数据 日志文件 日志传输 时间区间 计算机数据处理技术 日志文件上传 查询接口 分区创建 请求信息 统一规范 流量阀 配置的 时间段 脚本 预设 调用 检索 存储 传输 响应 外部 创建 生产
IPC专利分类号:G06F16/18;G06F16/16;H04L67/06
参考文献:
正在载入数据...
二级参考文献:
正在载入数据...
耦合文献:
正在载入数据...
引证文献:
正在载入数据...
二级引证文献:
正在载入数据...
同被引文献:
正在载入数据...