实现网
31人浏览/0人投稿
9小时前
待托管赏金
高级数据采集工程师(中国互联网数据采集 / 自动化监控方向)
工作地点: 西安/远程
工作性质: 全职 / 兼职 / 项目合作均可
【关于我们】
我们是一家来自北欧的品牌保护公司,为全球知名品牌提供电商平台、社交媒体及直播平台的品牌监控、数据分析及侵权治理解决方案。随着中国直播电商和社交电商的快速发展,我们在上海和西安设立研发支持团队,现寻找熟悉中国互联网生态的开发工程师。
【我们正在寻找什么样的人】
我们需要一位熟悉中国互联网生态、善于解决复杂技术问题的开发工程师,共同打造下一代智能品牌监控系统。
我们的核心目标很明确:建立一套稳定、高效、可扩展的自动化品牌监控解决方案。
我们不限制技术路线,无论是官方API、第三方数据平台、浏览器自动化、协议分析还是AI技术,只要能够有效解决业务问题,我们都愿意一起探索。
【您将负责的工作】
1. 自动化直播监控
· 研究并实现抖音、淘宝、快手、小红书、视频号等主流直播平台的自动化监控方案
· 稳定获取直播间商品、价格、销量、主播信息等数据
2. 电商平台数据采集
· 负责淘宝、天猫、京东、拼多多、1688、闲鱼等平台的数据获取
· 实现商品Listing的自动发现、持续监控与更新
3. 数据获取方案研究与选型
· 评估官方API、第三方数据平台、浏览器自动化、JS逆向、AI/OCR等多种技术路线
· 针对不同平台选择最优方案,平衡稳定性与开发效率
4. 自动化能力建设
· 持续优化采集稳定性,应对平台反爬策略
· 设计自动化采集流程,提升系统覆盖率与自动化程度
5. 产品研发支撑
· 与产品团队协作,将数据能力落地为“侵权商品自动发现”“品牌Logo自动识别”“监控报告自动生成”等产品功能
【我们希望您具备】
· 3年以上数据采集/爬虫开发经验,熟悉中国互联网生态
· 掌握Python(Java/Go亦可),熟悉Scrapy/Requests/Playwright等框架
· 有主流电商或直播平台(抖音、淘宝、快手等)的实际采集经验
· 具备反爬对抗经验(验证码、IP封锁、JS混淆、设备指纹等)
· 能够独立分析问题,持续尝试直到找到可行方案
· 良好的沟通能力,能与国内外团队协作
加分项(非必须,如有更好)
· JS逆向 / APP逆向经验
· AI、大语言模型(LLM)、Agent应用经验
· OCR、图像识别或视频分析经验
· 第三方数据平台使用经验
· 分布式爬虫架构设计与落地经验
【我们能提供】
· 与国际化团队合作的机会,参与全球品牌保护产品研发
· 较大的技术探索空间,不限制技术路线,鼓励创新
· 灵活的工作方式(西安优先,支持远程)
· 根据项目成果提供具有竞争力的薪酬和长期合作机会