-
深圳市慧业天择投资控股有限公司
-
大数据开发工程师
-
7年
擅长技能
1.熟悉大数据框架相关技术,如 hadoop ,hive ,spark ,sqoop ,hbase ,flume, flink
2.数学基础良好,熟悉常用的聚类,统计方法,学习过机器学习和深度学习相关课程,使用过 pytorch
3.对于 spark 性能调优、数据倾斜有一定的解决经验
4.对于维度建模,数仓分层有个人独特的理解
5.使用过 scrapy 爬虫框架
6.有做过完整的离线数仓架构设计,与实时数仓架构设计
7.对于数据治理,数据湖等较新大数据技术有过研究