- 主题:请问这个香港银行公会的数据怎么获取到 (转载)
【 以下文字转载自 ITExpress 讨论区 】
发信人: t430 (T430), 信区: ITExpress
标 题: 请问这个香港银行公会的数据怎么获取到
发信站: 水木社区 (Wed Jul 13 16:03:57 2022), 站内
http://www.hkab.org.hk/DisplayInterestSettlementRatesAction.do?Submit=Search&lang=en&year=2022&month=6&day=14
好象有啥反爬虫技术
我用java写了个简单的程序去取
获取不到数据
但浏览器打开是没问题的, 有数据
开发者模式打开也能看到里面的内容
这个要怎么破?
谢谢
--
FROM 223.104.148.*
curl都能拉到的页面
自己查一下你的http request咋写的吧
【 在 t430 的大作中提到: 】
: 【 以下文字转载自 ITExpress 讨论区 】
: 发信人: t430 (T430), 信区: ITExpress
: 标 题: 请问这个香港银行公会的数据怎么获取到
: ...................
--
FROM 116.233.89.*
能拉到,但没有上面的hibor数据的
就是一堆js再加上网站的菜单
没有真实数据
【 在 oldwatch 的大作中提到: 】
: curl都能拉到的页面
: 自己查一下你的http request咋写的吧
:
--
FROM 223.104.148.*
对的
这个URL竟然也有敏感字?
【 在 oldwatch 的大作中提到: 】
:
: 这个url?
:
--
FROM 223.104.148.*
这个页面一点花样都没有
你curl或者Postman自己get一下
【 在 t430 的大作中提到: 】
: 对的
: 这个URL竟然也有敏感字?
--
FROM 116.233.89.*
直接
new URL("http://www.hkab.org.hk/hibor/listRates.do?lang=en&Submit=Search&year=2022&month=6&day=14").openStream()
就能拿到数据啊
【 在 t430 的大作中提到: 】
: 【 以下文字转载自 ITExpress 讨论区 】
: 发信人: t430 (T430), 信区: ITExpress
: 标 题: 请问这个香港银行公会的数据怎么获取到
: ...................
--
FROM 58.61.245.*
晕死, 我也看到js里的这个网址
还以为和我发的请求是一样的
谢谢
【 在 canper 的大作中提到: 】
: 直接
: new URL("http://www.hkab.org.hk/hibor/listRates.do?lang=en&Submit=Search&year=2022&month=6&day=14").openStream()
: 就能拿到数据啊
--
FROM 223.104.148.*
居然看到一群大佬在解决这样的小问题
--
FROM 220.181.41.*
哈哈哈哈
--
FROM 120.244.234.*