本人具备扎实的 Python 编程能力,擅长使用 Scrapy、Selenium 等框架进行高效、稳定的爬虫开发,熟悉各类反爬机制及其对应的逆向解决方案,能够独立完成复杂网站的数据采集任务,包括登录态维持、JavaScript 渲染内容提取、WebSocket 数据监听与还原等。
在后端开发方面,熟练掌握 Django 框架,能构建高性能、可维护的 RESTful API 服务,结合 MySQL 和 MongoDB 等数据库完成结构化与非结构化数据的高效存储与查询。同时,熟悉 Redis 的缓存机制与发布订阅模型,能灵活应用于高并发数据通信场景。
具备一定的 Web 全栈开发经验,能够进行基本的前端页面构建和调试,熟悉 HTML/CSS/JavaScript 与浏览器调试工具,在数据展示与可视化接口集成方面有良好实践经验。
此外,具备较强的问题分析能力与逆向分析能力,曾多次通过抓包、分析 WebSocket 协议、自定义二进制协议解码等方式,成功还原复杂网页或 App 数据交互流程。
项目经验
1. 海外药品平台数据采集系统
基于 Scrapy 开发爬虫,采集多个海外药品平台的产品数据(含价格、规格、说明书等),总数据量达千万级。
支持断点续爬、增量更新,数据存储于 MySQL,用于后续搜索引擎与分析系统。
2. 金融数据采集与接口服务
采集股票、指数等实时行情数据,支持 WebSocket 实时接入与解析。
后端使用 FastAPI 编写 API 服务,结合 MySQL 与 Redis 提供高并发支持,供前端和量化模型调用。
3. 简单 Web 管理后台开发
使用 Django 框架开发管理系统,实现用户登录、数据展示、权限控制等基础功能。
满足数据采集与分析过程中的日常运营和管理需求。
可兼职时间
可兼职地点
0条评论 雇主评价