-
亚信
-
大数据开发工程师
-
4年
擅长技能
大数据处理技能:
1、 精通Spark 深入理解Spark,熟读spark核心源码,Spark优化,Spark内存管理。掌握spark任务的提交,执行流程,对分布式计算有一定的理解
2、 精通:Hadoop(MapReduce,Yarn,Hdfs),深入理解MapReduce计算框架
3、 熟悉SparkStreaming,SparkSql
4、 熟悉:flume,kafka,Sqoop,zookeeper等大数据相关组件
5、 熟练掌握Hive,能使用Hive进行海量数据的统计分析
6、 熟练掌握Redis缓存数据库的使用
7、 熟悉Java、Scala、python
8、 掌握面向对象、泛型、反射、二进制运算等基础,以及J2EE等基础
J2EE技能:
9、 掌握面向对象、泛型、反射、二进制运算等基础,以及J2EE等基础
10、熟练使用Struts2, Spring, Hibernate框架进行整合项目开发
11、 熟练使用MD5加密处理,timer定时器,深度复制(通过串行化)
12、熟练使用SVN版本控制器进行项目的开发部署及整合,以及SVN的dos部署
13、熟悉EasyUI、BootStrap前端开发框架