uipath吧 关注:940贴子:5,467
  • 2回复贴,共1

小白想问一下各位大神吖。我用uipath爬取链家网的上海市租

只看楼主收藏回复

小白想问一下各位大神吖。
我用uipath爬取链家网的上海市租房数据时,
地区选择不限可以爬取3000条数据,
可是我想爬取整个上海市的数据,
就要选择区域进行爬取,可是不可能一个区域一个区域爬取,能不能拿到每个区域的url,遍历url,在进行数据抓取吖,现在问题是我不造怎么遍历。
而且我也不知道这个方法可不可行。
大神可以帮我简答一下蛮?谢谢谢谢吖


IP属地:安徽来自iPhone客户端1楼2020-01-08 17:07回复
    大佬怎么爬取的数据,我也想爬取上海小区的一些数据


    IP属地:上海来自Android客户端3楼2021-01-03 12:40
    回复
      方法有很多啊,最常规的方法,不同区域的查询时不同的url 先看URL的区别在哪。一般都是会有区域字段,所以手动创建一个区域字段的数组,遍历这个数组然后再去到不同的网址,获取不同的数据。如果URL时转义的字符就不能通过URL改变。但是也是同样的道理,先获取区域选择框的数组,根据这个数组去遍历选择区域。


      IP属地:江苏4楼2021-02-07 15:46
      回复