大数据->日志处理模块->ELK部分选型搭建 需求 远程全职
一般月薪6000元- 项目类型：
- 每月工作： 3天
- 工作方式：定期坐班
职位详情
目标：
了解项目总体需求的基础上，快速确定以下分需求的技术选型和架构细节，并搭建实现具体的功能：
- 日志清洗层：技术选型(Logstash?)，分布式/集中式选型，负载均衡，持久化队列取舍
- 日志拆分：业务日志，需分析并二次重建的日志，系统日志
- 日志对接：对接Kubernetes/Docker的Pod/容器日志
- 日志格式：根据选型结果，确定日志格式细节
- 日志清洗：为业务日志编写大约4个filter，对Mock数据进行处理
- 存储层：技术选型(Hadoop/ElasticSearch)，负载均衡，使用公有云服务的评估
- 展示层：技术选型(Kibana)，按初期展示需求进行展示层配置和看板的初步配置
