0
被预约次数
0
被收藏次数
0
被评价次数
精通 Python 和 Node.js 双语言栈进行大规模数据采集，熟练使用 Scrapy、httpx、requests 构建分布式爬虫系统，以及 Playwright、Puppeteer 处理 SPA 动态渲染页面。具备丰富的反爬对抗经验，包括代理 IP 池轮换、浏览器指纹随机化、验证码识别、请求头伪装、TLS 指纹绕过等技术。能够逆向分析前端 JavaScript 混淆代码、API 签名算法、WebSocket 通信协议，定位加密参数生成逻辑。数据库方面熟练使用 MySQL、PostgreSQL、MongoDB、Redis，能够设计合理的存储结构和缓存策略。前端方向精通 React（Next.js、Redux、Zustand、React Query）和 Vue（Nuxt、Pinia），TypeScript 全栈开发，Tailwind CSS 和 Ant Design / Element Plus 组件库熟练使用。具备完整的数据可视化能力（ECharts、D3.js、Recharts），能够将爬取数据转化为直观的管理后台和仪表盘。同时掌握 Docker 容器化部署、Jenkins / GitHub Actions CI/CD 流水线搭建、Nginx 反向代理配置，能够独立完成从数据采集到前端展示的全链路开发交付。
电商数据监测平台：为某跨境电商客户搭建全自动竞品价格监控系统。使用 Scrapy + Playwright 构建分布式爬虫，每日自动采集 Amazon、Shopee、Lazada 等平台百万级商品数据，通过 Redis 去重和消息队列削峰，MongoDB 存储结构化结果。使用 React + ECharts 开发可视化仪表盘，支持价格趋势分析、库存变动告警、竞品上下架追踪。项目上线后客户竞品响应时间从 3 天缩短至 4 小时。
金融风控数据采集系统：为某量化团队搭建多源金融数据采集管道。使用 httpx + 自研签名逆向模块，实时抓取多个财经网站的行情、公告、财报数据。通过代理池轮换和请求频率随机化规避反爬风控。使用 PostgreSQL 存储时序数据，支撑每日 200 万+ 条数据入库。前端使用 Vue + Tailwind 构建简洁管理后台。
某社交平台内容采集工具：逆向分析目标 App 的 API 通信协议，使用 Charles / mitmproxy 抓包捕获加密请求，定位签名算法实现。搭建 Node.js + Playwright 自动化采集框架，解决登录态维持、无限滚动加载、WebSocket 实时推送等复杂场景。前端使用 React 开发数据检索后台，支持关键词搜索、内容分类、导出 CSV/JSON。
可兼职时间
可兼职地点
0条评论 雇主评价