V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  yaotian  ›  全部回复第 7 页 / 共 25 页
回复总数  490
1 ... 3  4  5  6  7  8  9  10  11  12 ... 25  
2014/2/20 总结
给爬虫加入了timeout
解决了image的类型问题
错误的log给增加了代码定位,可以立刻看出错误代码
critical问题给自己发送邮件
2014/2/19 补下刚完成的。
增加了“围观排行榜”
2014/2/19 总结
增加一个网站的抓取,大图,高清,爽
解决大图下撑破图的问题
邮件发送模块,为注册模块的一部分。

资源占用少于30M,即使抓取过程中CPU占用也很小。
2014-02-20 12:12:01 +08:00
回复了 lazybios 创建的主题 Python 定向爬虫规则管理问题
配置文件,抓不到了,收到邮件。所有规则都配置文件,修改配置文件,自动生效。见我的lumeinv.com (上班期间要小心)
2014-02-20 12:09:06 +08:00
回复了 menic 创建的主题 程序员 ”抱怨“驱动开发
@tan9le
@flank123
@wheatcuican
被戳中笑点,笑了很长时间,好久没这样笑过了。

楼主别介意,没恶意。
2014-02-20 09:36:28 +08:00
回复了 finian 创建的主题 macOS 你们的 Mac 死过机么
@DreaMQ 黑苹果是?
2014/2/19 总结
通用抓取模块,配置文件配置,可以处理2级处理。
优化系统,让系统保持在30m左右的内存占用。
解决“被撸的女人的图片顺序问题“
@selectSum 哪个?
@selectSum 拭目以待吧。刚开始。
@s12348765 给你的建议,保存书签,回家慢慢看:)
2014-02-19 13:16:40 +08:00
回复了 raquelken 创建的主题 问与答 如何逃离一座城市?
@andybest 技术移?
@ccbikai 不错。不过打开好像很慢的样子。
2014/2/18 总结:
1.收录两个网站
2.添加功能“被撸过的女人”,图片按照被撸的顺序
3.解决有时候被提交两次的bug
4.修改了导航条
5.修改后台对,撸的内容进一步进行控制
@soli 好吧,你不怕进去? 呵呵
@soli 露点吗? 不露的话怕啥?
2014-02-18 18:16:31 +08:00
回复了 o618 创建的主题 问与答 你们的头像都是哪里找的?
本人
今日更新:
经过站长同意,收录http://buloulian.com/的图片,好图
增加“被撸过的女人”
当然还有bug fix了。
巴厘岛吧
想做敏感词过滤,知道哪有最新的敏感词词库下载?
1 ... 3  4  5  6  7  8  9  10  11  12 ... 25  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3680 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 24ms · UTC 04:29 · PVG 12:29 · LAX 20:29 · JFK 23:29
Developed with CodeLauncher
♥ Do have faith in what you're doing.