猿急送    140人浏览/7人投稿    1372天前    已托管赏金

对于给定在Redis队列中的网站首页网址，识别其栏目（字数=20，位置靠前）,输出JSON结果到Redis队列。 1. 输入是JSON格式，包含域名首页，编号等字段。 2. 如果首页打不开，需要放入失败队列 3. 输入队列中的域名首页数量超过10万，需要协程高速并行处理 4. 为确定栏目中内容是否改变，需要计算其标题长度最长的5个链接的标题合并结果作为一个字段放入结果 5. 对于访问到的页面，要计算所有链接的数量，放入结果，便于以后改进处理。 6. 对某些网站要处理栏目页面中的子栏目。 7. 对异常网页要处理，如重定向，JS调入等。

猿急送    449人浏览/41人投稿    1364天前    已托管赏金

1.目的：做一个爬虫代码，我这边输入股票代码和日期，能够爬取对应日期的集合竞价数据到csv 股票代码_日期.csv 三个列:时间,价格,量能 2.竞价同花顺客户端和App都能看到,都可以用来做逆向分析

猿急送    157人浏览/36人投稿    1353天前    已托管赏金

一、开发以及维护数据的采集，机票网站的数据采集。 二、至少有能力逆向破解akamai类盾加密并找到需求数据。 三、像这个网站的采集www.emirates.com。 四、长期聘用兼职，以便开发和维护数据。

开源众包    151人浏览/24人投稿    1351天前    已托管赏金

猿急送    361人浏览/44人投稿    1350天前    已托管赏金

岗位职责： 1、负责Python算法的部署及代码工程化 2、提供算法服务python后台api、定时任务处理等功能 3、负责数据处理、清洗、入库等 4、搭建及维护算法服务 岗位要求： 1、熟悉Python语言，熟练使用Python常用模块；熟悉Python多线程，多进程编程； 2、熟悉Djando、Flask等web框架； 3、熟悉Linux常用命令，有一定的Linux编程经验； 4、熟悉主流关系型、非关系型数据库及图数据库，例如：MySQL、Redis、Mongodb、neo4j； 5、了解scrpay、scrapy-redis、selenium等爬虫框架； 6、熟

猿急送    480人浏览/41人投稿    1347天前    已托管赏金

描述：建立网站爬虫，爬取烯牛数据网站内的数据，生成 csv 档案。爬取任务需要隔一天执行一次，所以本项目产出最好是一个我自己可以执行的 exe 或 bat 档。

猿急送    200人浏览/1人投稿    1346天前    已托管赏金

沃尔玛数据爬虫 建立网站爬虫，爬取沃尔玛数据网站内的数据，将数据存在服务器上 网页登录账号密码就能查看和操作 系统里面需要包含输入栏，添加型号就能保存在系统里面，可以导出cvs或excel，系统里要带有delete和filter功能 爬取任务需要一天执行一次，库存数量要一天更新一次 可开子账号，主账号查看子账号 一页显示产品数量可以20,50,100，250四个选项

开源众包    280人浏览/25人投稿    1346天前    已托管赏金

1. 从https://www.anytimemailbox.com/ 获取所有信箱地址2. https://ipostal1.com/，并且需要支持国际运输（Shipping Internationally）3. https://www.postscanmail.com/locations.html 获取所有信箱地址4. https://www.snapmailbox.com/addresses#addresses 获取所有信箱地址5. 从上面网站中获取的地址分别在https://tools.usps.com/zip-code-lookup.htm?byaddress= 检测 COMMERCIAL MAIL RECEIVING AGENCY 结果https://www.smarty.com/products/single-address 检测 CMRA 结果以上两个结果中，仅需要都为“N”的结果6. 所有地址都导出为excel表格，标头为：地址第 1 行（街道地址）、地址第 2 行、城市、州、邮编、国家Windows11运行

猿急送    188人浏览/42人投稿    1345天前    已托管赏金

贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。。会底层分析。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。。会底层分析。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。。会底层分析。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。。会底层分析。贵旅优品抓包+逆向+爬虫+抢购。。。。。。。。

开源众包    131人浏览/49人投稿    1345天前    已托管赏金

公司是做北美市场社交App的，现出于项目需要须高效收集Instagram/Twitter/Facebook等平台上的信息（Ins优先），需有相关经验报酬可open来谈更多项目细节可联系详聊有兴趣的同学可加微信联系哦（请备注来自OS China）