Python爬虫_通过Tor浏览器获得匿名IP

小老虎

Tor浏览器是互联网上保护隐私最有力的工具之一，利用Tor技术改变请求的IP地址，可以有效地防止反爬机制对IP的封锁。
1、首先在电脑上安装Tor浏览器，官网https://www.torproject.org/自行安装

2、安装所需要的Python库

1. pip install pysocks

复制代码

1. pip install stem

复制代码

3、Tor的默认端口为9150，使用socks请求端口9150发出每次请求，然后请求https://checkip.amazonaws.com/获取本次抓取使用的IP地址


4、代码例程（运行代码时保持Tor浏览器为开启的状态，否则会报错：目标计算机拒绝连接）

1. #安装第三方库PySocks、stem
   
2. #库的下载方式↓
   
3. #pip install pysocks
   
4. #pip install stem   #抓取和更换ip
   
5. #利用洋葱路由的加密技术转获得随机匿名ip
   
6. #运行程序时保持Tor软件处于打开状态，否则会出现目标计算机拒绝连接的错误
   
7. import socket   #标准库
   
8. import socks    #第三方库,获取Tor分配的ip
   
9. import requests
   
10. import time
    
11. from stem import Signal     # 第三方库，用来更换ip
    
12. from stem.control import Controller
    
13. 
    
14. 
    
15. #检查是否能获取ip
    
16. def check():
    
17.     # 开始连接
    
18.     # Tor默认端口为9150
    
19.     socks.set_default_proxy(socks.SOCKS5, '127.0.0.1', 9150)
    
20.     socket.socket = socks.socksocket
    
21. 
    
22.     #检查这次获取的ip地址
    
23.     a = requests.get('https://checkip.amazonaws.com/').text
    
24.     print(a)
    
25. 
    
26. #更换ip
    
27. def changeIP():
    
28.     #更新ip通过ControlPort连接Tor的服务，发出一个NEWNYM的信号。Tor浏览器默认ControlPort的端口是9151
    
29.     controller = Controller.from_port(port=9151)
    
30.     controller.authenticate()
    
31.     socks.set_default_proxy(socks.SOCKS5, '127.0.0.1', 9150)
    
32.     socket.socket = socks.socksocket
    
33. 
    
34.     total_scrappy_time = 0  #抓取网页信息的时间
    
35.     total_changeIP_time =0  #更换ip的时间
    
36. 
    
37.     #更换10次试试
    
38.     for x in range(0,10):
    
39.         a = requests.get('https://checkip.amazonaws.com/').text
    
40.         print(f'第 {x+1} 次 IP：{a}')
    
41. 
    
42.         time1 = time.time()
    
43.         #这里随便请求一个网站测试连接
    
44.         # b = requests.get('http://acgboy.gitee.io/').text
    
45.         b = requests.get('https://www.tool77.com/').text
    
46.         time2 = time.time()
    
47.         total_scrappy_time = total_scrappy_time + time2 - time1
    
48.         print(f'第 {x+1} 次抓取网页花费时间：{time2 - time1}')
    
49. 
    
50.         time3 = time.time()
    
51. 
    
52.         # 发出一个NEWNYM的信号，更换ip
    
53.         controller.signal(Signal.NEWNYM)
    
54. 
    
55.         time.sleep(5)
    
56.         time4 = time.time()
    
57.         total_changeIP_time = total_changeIP_time + time4 - time3 -5
    
58.         print(f'第 {x+1} 次更换IP花费时间：{time4 - time3 -5}')
    
59.         print('*'*20)
    
60. 
    
61.     print('平均抓取花费时间：',total_scrappy_time/10)
    
62.     print('平均更换IP花费时间：',total_changeIP_time/10)
    
63. 
    
64. # check()
    
65. changeIP()

复制代码

Tor浏览器





Tor的三次跳转




代码演示

李志敏

论坛不能没有像楼主这样的人才啊！我会一直支持知鸟论坛。

井底燕雀傥

论坛不能没有像楼主这样的人才啊！我会一直支持知鸟论坛。

掌舵的鱼1987

其实我一直觉得楼主的品味不错！呵呵！知鸟论坛太棒了！

塞翁364

论坛不能没有像楼主这样的人才啊！我会一直支持知鸟论坛。

素色流年783

其实我一直觉得楼主的品味不错！呵呵！知鸟论坛太棒了！

123456865

其实我一直觉得楼主的品味不错！呵呵！知鸟论坛太棒了！

123456809

楼主，我太崇拜你了！我想我是一天也不能离开知鸟论坛。

我的苦恼冉

楼主，大恩不言谢了！知鸟论坛是最棒的！

向往草原403

论坛不能没有像楼主这样的人才啊！我会一直支持知鸟论坛。