水木社区手机版
- 主题:快来纠错改进简易爬虫
- 我都是用python写的。js不熟。
【 在 zxpsychology 的大作中提到: 】
: var needle = require('needle');
: var fs = require('fs');
: var url_parser = require('url');
: ...................
--
FROM 111.85.183.* - pyspider和scrapy都用过，最后比较习惯自己写。。
【 在 dhcn 的大作中提到: 】
: 推荐国产的PySpider。环境建好，生产效率暴高。
--
FROM 111.85.172.* - json直接丢，html解析后再丢
【 在 iStudy (爱学习) 的大作中提到: 】
你们爬出来怎么丢到数据库？
数据库是monodb?
【 在 lokta (部落) 的大作中提到: 】
: pyspider和scrapy都用过，最后比较习惯自己写。。
--
FROM 58.16.6.*