Python 爬虫及后台数据管理

发布者:bubble8up 分类:完整项目>项目总包
预算: 1,000-10,000
  • 2021/06/19
  • 北京,北京
  • 需求号:T000599
交易模式:公开招标 目标周期:2周 截止日期:2021-05-28 23:57:00
  • 截止时间已到
    1投标
    2021-05-26 14:28:31

需求说明:

1. 根据设定的爬虫参数进行数据爬取(全网站爬取、异步爬虫、增量式爬虫、selenium) 
 Frameworks Authentication Asynchronus loading Inspecting AJAX calls Tackling infinite scrolling Server-side blacklisting 
 Proxy servers and IP rotation User-agent spoofing and rotation Reducing the crawling rate  Redirects and captchas 
 2. 存取记录到数据库(PostgresQL, MySQL等) 
 大批量数据的 ETL 有效验证和清洗 
 3. 进行后台监控,维护和升级 (后台GUI有效的管理,监控) 
 图形界面的统一管理和监控

需求附件: 暂无 您没有权限查看

补充说明:

数造网络

数造网络

报价:**** 元

  • 2021-05-27 10:03:51
  • 雇主未浏览

舒雅信息科技

ch_pxg

报价:**** 元

  • 2021-05-26 17:55:55
  • 雇主未浏览

贤戈网络

好产品

报价:**** 元

  • 2021-05-26 15:14:34
  • 雇主未浏览

简单数据

skippy

报价:**** 元

  • 2021-05-26 14:37:59
  • 雇主未浏览

公开招标交易模式说明:

  1. 注册用户均可提交公开招标需求
  2. 需求经平台审核通过后公开发布
  3. 根据发布者设置,相关开发者可以通过私信与发布人沟通
  4. 开发者了解需求具体情况后可进行投标
  5. 需求方根据与开发者沟通情况,可选择中标者
  6. 中标后需求方按约定的进度支付开发费用
  7. 开发者按双方约定的进度完成开发服务
  8. 项目完成后,开发者可从平台提取服务费

中标者

暂无中标者