水木社区手机版
- 主题:一个页面浏览器可以打开
- 页面
https://www.cmegroup.com/services/sofr-strip-rates/
（这个页面需要爬到外面才能访问， 我是在外面AWS用开发工具做测试）
但用程序却打不开
timeout
这啥原因？
--
FROM 60.186.156.* - 试了一下这个网站，按照浏览器方式构造请求能拿到json数据，python也照这样填写请求header就行，也许还能精剪，你可以慢慢试。
命令行用的msys2方式，用powershell或者cmd.exe试可能需要改一下格式。curl 'https://www.cmegroup.com/services/sofr-strip-rates/' \ -H 'authority: www.cmegroup.com' \ -H 'accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.7' \ -H 'accept-language: en-US;q=0.9,en;q=0.9' \ -H 'cache-control: max-age=0' \ -H 'sec-ch-ua: "Chromium";v="118", "Google Chrome";v="118", "Not=A?Brand";v="99"' \ -H 'sec-ch-ua-mobile: ?0' \ -H 'sec-ch-ua-platform: "Windows"' \ -H 'sec-fetch-dest: document' \ -H 'sec-fetch-mode: navigate' \ -H 'sec-fetch-site: cross-site' \ -H 'sec-fetch-user: ?1' \ -H 'upgrade-insecure-requests: 1' \ -H 'user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36' \ --compressed
【 在 t430 的大作中提到: 】
: 页面
: https://www.cmegroup.com/services/sofr-strip-rates/
: （这个页面需要爬到外面才能访问， 我是在外面AWS用开发工具做测试）
: ...................
--
FROM 171.221.52.* - 好， 谢谢， 我试试
不过我用java的
也照样试试看
【 在 poocp 的大作中提到: 】
: 试了一下这个网站，按照浏览器方式构造请求能拿到json数据，python也照这样填写请求header就行，也许还能精剪，你可以慢慢试。
: 命令行用的msys2方式，用powershell或者cmd.exe试可能需要改一下格式。
: [code=bash]
: ...................
--
FROM 220.184.141.* - 奇怪我用你这个命令， 在2022 DOS上运行，长时间没返回
请问您是在什么环境上运行的？
谢谢
【 在 poocp 的大作中提到: 】
: 试了一下这个网站，按照浏览器方式构造请求能拿到json数据，python也照这样填写请求header就行，也许还能精剪，你可以慢慢试。
: 命令行用的msys2方式，用powershell或者cmd.exe试可能需要改一下格式。
: [code=bash]
: ...................
--
FROM 220.184.141.* - 我写了的啊，你没注意看吧，MSYS2
msys2是一个windows下的类似Linux的运行环境，有bash zsh vim ssh之类的命令，但是windows原生编译的，因此速度比cygwin快，而且它编译的mingw64的ffmpeg也支持使用显卡硬件加速以及CUDA这些。
和wsl wsl2 cygwin相比各有优缺点，这几个环境跑这个命令行应该都没问题，如果你安装了curl软件包。
【 在 t430 的大作中提到: 】
: 奇怪我用你这个命令， 在2022 DOS上运行，长时间没返回
: 请问您是在什么环境上运行的？
: 谢谢
: ...................
--
FROM 171.221.52.* - AWS 上的windows datacenter 2022自带的curl
可以在DOS上运行
我装个msys2看看
【 在 poocp 的大作中提到: 】
: 我写了的啊，你没注意看吧，MSYS2
: msys2是一个windows下的类似Linux的运行环境，有bash zsh vim ssh之类的命令，但是windows原生编译的，因此速度比cygwin快，而且它编译的mingw64的ffmpeg也支持使用显卡硬件加速以及CUDA这些。
: 和wsl wsl2 cygwin相比各有优缺点，这几个环境跑这个命令行应该都没问题，如果你安装了curl软件包。
: ...................
--
FROM 220.184.141.* - 往msys2的终端窗口粘贴命令可以用shift+ins，也可以右键粘贴但需要设置一下终端窗口mintty的"选项"->"鼠标"->"右键"，在Linux一类的窗口，通常Ctrl+V粘贴方法是无效的。
【 在 t430 的大作中提到: 】
: AWS 上的windows datacenter 2022自带的curl
: 可以在DOS上运行
: 我装个msys2看看
※ 修改:·poocp 于 Nov 1 14:57:50 2023 修改本文·[FROM: 171.221.52.*]
※ 来源:·水木社区 http://www.mysmth.net·[FROM: 171.221.52.*]
修改:poocp FROM 171.221.52.*
FROM 171.221.52.* - 好的， 谢谢了
【 在 poocp 的大作中提到: 】
: 往msys2的终端窗口粘贴命令可以用shift+ins，也可以右键粘贴但需要设置一下终端窗口mintty的"选项"->"鼠标"->"右键"，在Linux一类的窗口，通常Ctrl+V粘贴方法是无效的。
: 我装个msys2看看
--
FROM 220.184.141.* - 专门在外面弄了个linux的机器，然后试出只要下面两个参数就行
但我在java代码里就不行，怪事了， 还是timeout
明天我试试python
curl 'https://www.cmegroup.com/services/sofr-strip-rates/'
-H 'accept-language: en-US;q=0.9,en;q=0.9'
-H 'user-agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 Safari/537.36' --compressed
【 在 poocp 的大作中提到: 】
: 试了一下这个网站，按照浏览器方式构造请求能拿到json数据，python也照这样填写请求header就行，也许还能精剪，你可以慢慢试。
: 命令行用的msys2方式，用powershell或者cmd.exe试可能需要改一下格式。
: [code=bash]
: ...................
--
FROM 125.120.249.* - 装个抓包软件,wireshark之类的,自己分析请求头有啥差别呗
【 在 t430 的大作中提到: 】
: 专门在外面弄了个linux的机器，然后试出只要下面两个参数就行
: 但我在java代码里就不行，怪事了， 还是timeout
: 明天我试试python
: ...................
--
FROM 61.149.73.24