1.医疗公司的大数据业务部,该部门主要为院方提供数据对接方案,清洗和生产结构化数据等。该部门与2019年4月正式组建,作为业务方向的团队探索大数据的具体架构与数据开发等工作。
- 主要负责驻场对接院方医疗系统的数据,针对各个医院不同的数据提供方案,制定相应的数据清洗,归一与结构化
- 开发ETL相关的脚本和工具用于院方数据的解密,文本拆解,结构化等操作(python,hive,java)
- 作为大数据组的一线ETL工程师,从业务角度探索具体ETL过程中的梳理流程和规范,开发相应的工具,配合架构工程 师探索数据仓库的架构。
- 配合数据质量检测部门,开发和测试数据质检工具和相关的脚本(java,python),参与开发基于datax的数据抽取工 具等。
2. 科技公司,主要运营以“移动彩云”为核心的移动办公平台,背靠浙江移动资源,以大企政企为主要服务客户。 在职期间参与企业服务业务线的研发和项目管理工作。主要负责商旅线业务的产品的架构,设计,研发工作。 在公司主要负责【优办火车票】业务线的设计与开发,为该业务线的项目经理,管理项目需求和流程与执行,主要负 责产品需求对接,业务线调研,技术方案设计,项目排期,开发测试人员及资源调配,负责部分支撑系统的开发,如用户校验中心剥离,对接建行第三方金融业务接口,支付业务等,负责微服务拆分,分布式体系维护和基础框架优化
3. 袋鼠云中台数据产品,主要用于将数据源或数据仓库(如MYSQL,SPARK,HADOOP等)中的数据,通过配置API的方式,以标准JSON格式响应。用户可以配置API供他人使用,也可以申请他人开放的API供自己调用。以此简化数 据开放的流程。 包含API_WEB后端 + API_GATEWAY两个主要工程,均为独立设计,架构,选型和研发。
4.项目为某基础安全产品,用于部署在客户服务器端,采用流量代理的方式,主动动态的分析流量,根据配置对数 据进行加密或解密的操作,同时尽量保证在加密后数据的可用性,产品主要解决企业在使用云产品过程中的信任问题。 在项目中主要参与流量网关的需求迭代开发,根据合作方要求优化部署方式,改进流量处理流程,参与设计流量处理流 程,优化网关架构,优化网关处理性能及网关自身可用性和稳定性。