云爬虫到底是什么啊，改不动

我毕设是做一个云爬虫信息管理系统，但我根本不知道这个是个什么东西，要怎么做，是跟gooseeker类似的网站，还是说只要爬取单一一个网站就行了啊

如果是后者，那我快做完了，如果是前者要怎么学啊，不知道学习方向

你不是应该和你论文指导老师确认吗

给大伙看看我导师说的东西是什么

两种可能思路，一种是用户在你的网站输入网址，你自动提取资源供用户下载。另一种是你爬取一个领域的信息，展示在网页上供用户浏览。

应该是让你做个像八爪鱼爬虫那样的

个人理解
云上网, 所以云爬虫大概就是在网络上提供爬虫服务
最简单的python实现大概就是 flask 路由 + 爬虫
通过浏览器请求对应的爬虫

复杂点说就是你做一个爬虫平台用户输入url和选择需要爬取的特征就能获取数据然后返回给用户爬取结果

从本地移动到服务器上，就成了云

辅助爬虫工具(

简单一点的实现，你特定写好一些网站的爬虫，让用户选择好你给他规定的几个目标网站，然后让用户自己输入要爬取的数据分类，你程序爬好后给他返回整理好的数据文件

云爬虫和现在的搜索引擎有什么区别，百度谷歌

下载贴吧APP
看高清直播、视频！

分享到: