想用 selenium 做一个爬虫，为了绕开访问限制，使用 ip 池。同时为了效率，selenium
的 chrome instance 打算复用，所以基本的架构是


graph LR
selenium-->mitmpxy-->pxypool-->webserver

目标是
1. mitmpxy 可以编写代码定制

2. 可以动态的根据 url 选定是否使用pxy

3. 可以动态的从pxypool选择pxy

4. 支持 https connect 而不是 mitm

找了一圈，暂时还没有满足要求的。
--
FROM 119.139.198.*

试过，https支持connect后，http也变成connect了，且探测不到url了

【 在 milksea 的大作中提到: 】
: 你试试gost是不是就行？
--
FROM 119.139.198.*

要访问https网站啊，https只有两种模式，一种是connect，一种是mitm
【 在 oyljerry 的大作中提到: 】
: 你mitmproxy跟selenium不是在一个内网，为啥要https connect，http connect不就够
: 了
--
FROM 27.38.197.*

socks代理有那么点“透明”，他并不发证，没有能力
窃听https通信，mitmproxy专门干的就是发证窃听的事

【 在 abettor 的大作中提到: 】
: 标  题: Re: 问个pxy代理实现的方案
: 发信站: 水木社区 (Mon Jun 17 15:17:11 2024), 站内
:
: mitmpxy 干啥的, 为什么不直接用socks5代理池?
:
: 【 在 iwannabe 的大作中提到: 】
: : 想用 selenium 做一个爬虫，为了绕开访问限制，使用 ip 池。同时为了效率，selenium
: : 的 chrome instance 打算复用，所以基本的架构是
: :
: : ...................
:
: --
:
: ※ 来源:·水木社区 http://www.mysmth.net·[FROM: 36.110.18.*]
--
FROM 124.207.188.194

我就是回答一下 mitmproxy 是干嘛的这个问题


【 在 abettor 的大作中提到: 】
: 标  题: Re: 问个pxy代理实现的方案
: 发信站: 水木社区 (Mon Jun 17 15:53:12 2024), 站内
:
: 他用的是  selenium，所有信息都是解密后的啊
:  
: 【 在 DreamDreams (光风霁月) 的大作中提到: 】
: :  socks代理有那么点“透明”，他并不发证，没有能力
: :  窃听https通信，mitmproxy专门干的就是发证窃听的事
: :  
: :  【 在 abettor 的大作中提到: 】
: --
: 发自xsmth (iOS版)
: --
:
: ※ 来源:·水木社区 http://www.mysmth.net·[FROM: 114.246.236.*]
--
FROM 124.207.188.194