任务详情
一个关键字代表一个商品,按关键字搜索推特文章。 1)专门采集推特x.com的文章数据。 2)基于关键字搜索获得推文结果,并实现自动翻页。 3)能够模拟真实用户的数字指纹,避免网站侦测。 4)采集内容:推文ID、阅读量、评论量、点赞量、转发量,推文链接、采集时间。*不需要推文内容,也不需要作者的账户信息。 5)每隔5分钟搜索一次关键字,用于计算传播增量。 6)每天约3万个新关键字,由我方动态提供。 7)每个关键字有效期为48小时,到期自动移除此关键字的采集任务。 8)关键字前期的搜索结果99%是空的,需要一个优化策略。 9)通过接口将数据实时同步给我方。 我方根据采集结果,计