实现网
工作地点
顾问角色
排序方式
筛选条件
评价
不限
自由职业者
不限

知名企业
九州通医药集团
大数据研发工程师
墨染千秋
5年
擅长技能

大数据开发 1. 精通大数据离线开发和实时开发,具备丰富的海量数据处理经验。 2. 精通 SQL 开发,能够高效编写复杂查询、优化性能并设计数据库结构。 3. 熟悉 Hadoop、Spark、Flink 等大数据计算框架,具备分布式计算和流式数据处理能力。 4. 熟练使用 DataX 工具实现数据库数据的互导,支持多源数据的高效迁移与同步。 5. 熟悉 Flume 的日志采集流程,能够设计高可用、负载均衡的日志采集系统。 数据仓库与数据湖 1. 熟悉 Doris、StarRocks、Hive 等数据仓库技术,以及 paimon, Iceberg 数据湖技术。 2. 熟悉数据仓库建模,能够设计高效、可扩展的数据仓库架构。 云计算与大数据平台 1. 熟悉腾讯云产品(如 WeData 大数据治理平台、DLC 数据湖计算、COS 对象存储、Oceanus 流式 计算、TCHouse-D、TCHouse-C、腾讯云 BI 等),能够基于云平台构建离线和实时数据处理解决方案。 后端开发 1. 熟悉 Java 及相关技术栈,熟练运用 Spring Boot + MyBatis 进行平台或系统的后端研发。 数据爬虫与脚本开发 1. 熟悉 Python,并熟练使用 Scrapy 框架进行数据爬虫开发。 消息队列与中间件 1. 熟悉 Kafka 作为消息队列的原理及其在大数据实时场景中的应用。 开发工具与环境 1. 熟悉 Linux 常用命令。 2. 熟练使用 IntelliJ IDEA、Git、Maven 进行项目开发、自动化构建、依赖管理以及项目管理。 数据可视化与报表 1. 熟悉帆软 FineBI、Superset、腾讯云 BI 等工具,能够设计并开发数据报表及大屏展示,支持业务决 策。工作流调度 1. 熟悉 Azkaban、Airflow、DolphinScheduler 等工作流调度器在周期性开发作业中的使用。 AI 相关 1.熟悉 dify 智能体工作流平台,通过智能体调用大模型并添加提示词对数据进行探索 2.熟悉机器学习和深度学习相关算法,如线性回归、K 近邻算法、聚类算法、LSTM 神经网络、GRU 门 控循环单元等。

¥500 / 8小时

可兼职时间 周六、周日、工作日

可兼职地点 湖北 武汉

立即预约

我是技术人才
我在寻找远程工作

技术人才入驻

我是创业者
我在寻找技术人才

发布用人需求