博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
scrapy-加蘑菇代理
阅读量:5319 次
发布时间:2019-06-14

本文共 277 字,大约阅读时间需要 1 分钟。

加代理ip     隧道代理
setting中 解开  下载器 
打开 蘑菇代理   复制key
按照下载器的路径  添加代理ip        [添加至函数外]
在类外边添加key  和手动添加 http://
在蘑菇代理中  复制方法   括号 中内容
 
然后试着请求  ip地址  更换ip地址              [setting中 delay 设置延迟 3  秒]
 
然后完成  总结 简单 四步走 
1 解封 setting中 代码
2 middlewares  中 添加  代理 
3  添加  爬取代理 
4  完成 

转载于:https://www.cnblogs.com/zhichao123/p/10888377.html

你可能感兴趣的文章
bzoj2257
查看>>
http://www.bootcss.com/
查看>>
20145308 《网络对抗》 注入shellcode+Return-to-libc攻击 学习总结
查看>>
如何使用USBWebserver在本机快速建立网站测试环境
查看>>
变量提升
查看>>
jquery-jqzoom 插件 用例
查看>>
查看oracle数据库的连接数以及用户
查看>>
三.野指针和free
查看>>
简单【用户输入验证】
查看>>
python tkinter GUI绘制,以及点击更新显示图片
查看>>
Spring面试题
查看>>
C语言栈的实现
查看>>
SRM 628 DIV2
查看>>
2018-2019-2 20165314『网络对抗技术』Exp5:MSF基础应用
查看>>
SecureCRT的使用方法和技巧(详细使用教程)
查看>>
自建数据源(RSO2)、及数据源增强
查看>>
2018icpc徐州OnlineA Hard to prepare
查看>>
使用命令创建数据库和表
查看>>
linux下Rtree的安装
查看>>
【转】redo与undo
查看>>