熟练掌握Java核心技术,并发编程,网络编程,深入理解JVM底层原理,熟悉各类垃圾回收器的使用和算法,具备一定的JVM调优经验。
熟悉Hadoop平台技术及其底层原理,熟悉MapReduce底层流程,具有MapReduce大数据处理经验;
熟悉Hive SQL的使用与底层实现,能根据Hive SQL的执行计划进行调优,具有数据倾斜调优经验。
熟悉Flink及其底层原理,阅读过源码,具备完整的搭建流处理平台的架构和维护经验。
熟悉MySQL事务,各种锁,执行计划,具备一定的SQL调优能力。
熟练掌握Kafka的各种特性,如分区、副本、消息传递保证和复制机制。熟悉Kafka的架构设计、消息存储和索引方式等。
熟悉分布式搜索引擎 Elasticsearch。具有Elasticsearch进行大规模数据的实时搜索经验,有处理海量数据的索引和优化经验。
熟练掌握HBase底层存储原理;理解其列式存储和分布式存储特性。能够使用HBase进行高性能的读写操作,并能够进行查询优化。
熟悉数据仓库相关技术,对数据治理,数据建模有深入的理解。了解开源数据湖存储方案Hudi。
熟悉ClickHouse,有ClickHouse开发经验。
【提供的服务】
JavaWeb项目开发,包括前台,后台等。
大数据高级开发技术服务,能从0到1构建实时/离线数据处理平台
8年Java Web开发经验,精通JavaWeb相关技术,JVM,MySQL,Kafka,Spring,Netty等
其中5年大数据开发相关经验,熟练掌握 Hadoop,Flink,Hbase,Hive,Impala,Elasticsearch,实时/离线数据仓库,Redis,ClickHouse等相关技术。
主导过大数据项目开发,拥有百亿级数据处理经验
能从0到1开发Java Web项目
前端开发
可兼职时间
可兼职地点
弗兰克 2016-11-13 13:37
只评分,内容未填写或非公开