十秒用爬虫Scrapy框架对接selenium模拟知乎登录

十秒用爬虫Scrapy框架对接selenium模拟知乎登录

首页动作格斗爬虫模拟器更新时间:2024-05-11

最近老猿逛知乎比较多,于是就想试一下怎么模拟知乎登录,顺便将教程分享给大家。

1. 首先第一步先新建一个项目。

2. 需要在seetings.py中将ROBOTSTXT_OBEY = True修改为ROBOTSTXT_OBEY = False,ROBOTSTXT_OBEY,我们修改成False,否则不能爬取。

然后在spider写下如图代码:

3. 这里分享给大家一个小技巧,我们在项目下创建一个main文件,写下如图代码:

打下这些代码就可以了,这样我们就不用每次在黑窗口下运行,这样的话就可以节省大家时间了。

今天的分享就到这里,如果觉得对你又帮助的话,请给老猿一个点赞关注哦。

还有其他想知道的,在评论区留言,老猿会为你们一一更新。

查看全文
大家还看了
也许喜欢
更多游戏

Copyright © 2024 妖气游戏网 www.17u1u.com All Rights Reserved