V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  Martzki  ›  全部回复第 1 页 / 共 1 页
回复总数  6
多谢楼上各位 挂了很久发现确实下完了
但是印象中遇到过一直不显示大小而且下载的流量比文件本身都大很多的情况
问题解决了
问题出在新类对象调用接口前的父类对象的 addSeries 调用
我猜测是 addSeries 会对参数 Series 进行一定的操作比如清空
但是实际打印了一下 series 的地址和 series 的 count
发现都是一样的
但问题确实是上面调用了 addSeries 的原因
具体原因还真搞不清楚了
后面换用 selenium+PhantomJS 可以了,splash 还是没能成功
@SpiderXiantang 多谢,用 splash 是因为了解到比 selenium 效率高。另外我对 web 实在是没有什么基础,能不能请您提示一下下一步应该怎么处理
@wenbinwu 感谢回复,最高设置到 60 秒,还是不行!
2019 年 2 月 25 日
回复了 lovezww2011 创建的主题 Python 使用 Scrapy 爬取股票代码
老哥你好,最近在学 scrapy-splash,我的 splash 似乎没有起到渲染的作用,不知道是 splash 的问题还是网页的问题。
具体来说,是爬取一个表格,表头存在,表内容由 JS 函数填充。
网页: https://www.aqistudy.cn/historydata/daydata.php?city=%E6%AD%A6%E6%B1%89&month=201312
splash 版本:3.3.1
OS 版本:Windows 10 专业版
关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   Solana   ·   5740 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 20ms · UTC 08:39 · PVG 16:39 · LAX 00:39 · JFK 03:39
♥ Do have faith in what you're doing.