Python工程师（数据采集方向）

1. 负责公司数据采集体系的技术选型、架构设计与开发，涵盖多源公开数据获取、页面解析、结构化抽取等核心能力，推动从0到1的技术落地。 2. 建立可复用、可扩展的采集框架与配置化开发规范，将“一次性脚本”演进为“可维护的平台能力”，从根本上解决程序次抛问题。 3. 深入研究采集机制，制定并落地应对方案，建立代理IP池、Cookie池等基础设施的管理体系。 4. 将采集的结构化/半结构化数据进行清洗、归一化、存储与业务逻辑加工，保障数据从采集端到业务端的全链路质量与时效。 5. 将重复性人工操作流程转化为自动化程序（数据匹配、选品逻辑、供应链同步等），持续提升业务运转效率。 6. 建立统一的Python开发框架与代码规范，推进代码模块化、组件化与复用能力建设。 7. 承担系统信息安全基础保障，在开发中落实SQL注入防范、接口鉴权、敏感数据加密、日志审计等安全实践。 8. 参与需求分析，理解业务场景并独立完成模块设计与实现，具备从技术视角反推业务合理性的能力。 9. 负责服务部署、维护与性能调优，基于云基础设施及容器化技术（Docker/K8s）保障服务稳定运行。

1. 本科及以上学历，计算机相关专业优先 2. 5年以上Python开发经验，有采集框架从0到1的搭建经验 3. 精通Python，熟练使用Scrapy、Playwright、Selenium等主流框架 4. 熟悉网络协议（HTTP/HTTPS/TCP/IP），具备抓包分析能力 5. 精通JS逆向分析，能处理加密接口和动态渲染页面 6. 对于IP代理池、验证码识别、浏览器指纹模拟等具备丰富经验 7. 具备信息安全与部署意识，熟悉HTTPS、JWT/OAuth、数据脱敏、RBAC等常见安全实践，能独立完成基础安全加固 8. 了解Docker/Git等工程化工具，有CI/CD实践经验者优先 9. 具备良好的工程化意识：代码规范、单元测试、文档沉淀 三、加分项 1. 有电商平台或大型B2B平台大规模合规数据采集经验 2. 熟悉分布式任务调度系统（如Celery、Airflow等） 3. 有团队管理或技术带教经验 4. 有合规数据源接入与治理经验 我们要的是能搭数据底座、仍深耕在合规采集领域的人，要么是真有技术壁垒的架构师，要么是懂合规、懂工程化的复合型人才。 一个问题可以思考：如果平台改版，你的采集体系如何恢复？ ——如果你的答案是“我重新写个脚本”，那确实不合适；如果你的答案是“改个配置、跑个测试、半小时上线”，那你就是我们要找的人。