-
京东
-
数据开发工程师
-
8年
擅长技能
京喜相关数据云图产品离线与实时数据需求开发,根据产品要求实现数据统计,运用flink实时流计算框架(基于kafka消息队列,redis等组件)和使用京东大数据实时flinksql或flink java代码消费Kafka实时流数据,并将结果存入redis,编写php代码为前端提供数据接口,另外编写高性能python脚本封装hivesql进行离线统计,确保需求交付及时率, 在开发flinksql时也编写了udf来满足一些特殊场合的使用,比如时间打点函数,监控性能上报等。