欢迎访问 生活随笔!

生活随笔

当前位置: 首页 > 编程资源 > 编程问答 >内容正文

编程问答

四十三、Scrapy 爬取前程无忧51jobs

发布时间:2024/10/8 编程问答 64 豆豆
生活随笔 收集整理的这篇文章主要介绍了 四十三、Scrapy 爬取前程无忧51jobs 小编觉得挺不错的,现在分享给大家,帮大家做个参考.

@Author:Runsen

之前爬了拉钩,爬了boss ,你认为我会放过51jobs 吗

这是不可能的,今日用下scrapy 来爬 51jobs,前程无忧

关于新建项目和spider 不说了,今日用scrapy 对接selenium来爬,和之前用Scrapy 爬取天气网一模一样

一开始就是先处理 item。

通过对详情页的分析,可以爬取下面的信息。

from scrapy import Item,Fieldclass QcwyItem(Item):# define the fields for your item here like:

总结

以上是生活随笔为你收集整理的四十三、Scrapy 爬取前程无忧51jobs的全部内容,希望文章能够帮你解决所遇到的问题。

如果觉得生活随笔网站内容还不错,欢迎将生活随笔推荐给好友。