具有多年C++开发经验,曾就职于百度、饿了么,参与分布式多媒体处理框架的架构设计与核心功能开发。
在饿了么带领小组开发自主分布式KV数据库,为大数据部门提供高可用、高性能分布式存储服务。
在滴滴地图任职期间,设计了地图数据分布式编译平台,该平台使用airflow进行任务调度,资源调度使用mesos,结合docekr容器实现了数据实时编译平台。
对底层技术研发感兴趣,对于疑难问题追踪定位、性能分析优化有较深刻的认识与实践经验。
工作项目:1.分布式多媒体处理,使用erlang分布式技术重构了曲库入库转码服务,通过资源占用率高度多媒体资源的转码,提交了曲库系统的资源利用率和资源调度的平衡性,也提高了集群的伸缩性,系统可以根据资源需求进行快速伸缩。
2.分布式KV数据库,主要负责分布式存储系统架构设计。该分布式KV数据库采用多副本技术实现存储系统的高可用、高性能、可伸缩性。
多副本的一致性采用paxos算法保证,数据库的扩展通过分片技术实现。整个系统由存储子系统、分片管理、proxy代理三部分组成。存储系统主要完成系统的存储与副本的致性;分片管理负责整个系统数据分片索引管理,系统扩容中分片迁移的协调;代理实现了类redis命令的解析与数据格式解析及请求路由等功能。
可兼职时间
可兼职地点
0条评论 雇主评价