0
被预约次数
0
被收藏次数
0
被评价次数
有超过8个以上企业级数据平台/中台落地经验
丰富的大数据PAAS，DAAS，DA架构开发运维经验
多年广告，短视频，新零售和餐饮SAAS行业经验
设计开发过指标，标签，分析，处理，OLAP，开发，BI，埋点，画像，广告聚合，数据服务等经验
熟悉Kafka, ES, ClickHouse, StarRocks, Hbase, Hudi， Redis， Hive, Yarn等大数据组件
通读Spark源码且有大量生产实践
熟悉OLAP架构以及演进方向
熟悉数据湖架构
熟练Hadoop生态
熟练Flink机制和源码
熟悉大数据架构及数据中台
熟悉CNN RNN LSTM等深度网络
熟悉微服务架构和Kubernetes
熟练语言Java Scala Golang Rust
熟练使用机器学习算法构建机器学习流水线
熟练使用Pandas Tensorflow scikit-learn
熟悉数据平台搭建，调优和数据倾斜方案
数据开发治理平台(类阿里DataStudio)。主要职责设计开发实施。工程在软件层面使用COLA3.2落地，基于DDD和中台架构。SQL As Service理念。使用Kyuubi,sparksql,hive,yarn,dolphonschduler大数据生态组件。主要应对场景数据仓库以及复杂的任务依赖和数据治理问题。
数据流水平台。主要职责设计开发实施。基于Kappa架构，LakeHouse理轮。提供分钟级别数据增量处理和数据交换功能。使用Kafka(缓存重放,数据入口)，Flink(实时入湖仓，数据交换，增量处理)，Hudi(数据事务层)，StarRocks(查询分析，数据建模),canal(数据采集), Hive(结构数据存储，元数据服务)，DBT(etlT，维度建模)，Yarn(资源管理)等大数据组件。主要场景实时数仓，OLAP，看板报表等。
luckin coffee自动化算法平台。数据处理Pipeline产品设计研发，基于Spring boot，bigDL，Sparkcore，hdfs，Sparksql ，sparkmllib，hive，Hbase，XGBoost，LightGBM，yarn，kafka等。平台服务于Luckin coffee内部智能营销，智能发券，供应链优化，iot系统，客户画像，推荐系统，流失预测，下单预估等应用层系统。快速迭代爆炸式用户增长，统一数据处理平台，保证数据高效转动。
可兼职时间
可兼职地点
0条评论 雇主评价