V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  akmonde  ›  全部回复第 2 页 / 共 9 页
回复总数  168
1  2  3  4  5  6  7  8  9  
2019-04-30 11:47:32 +08:00
回复了 akmonde 创建的主题 Python Python 项目移植到其他机器,要求全 Linux 系统适配
@tt0411 求指点,我迁移后没法用管理器,老板要求即使没有 docker 之类的,也是解压就能用。原生能支持么?
2019-04-30 10:48:00 +08:00
回复了 akmonde 创建的主题 Python Python 项目移植到其他机器,要求全 Linux 系统适配
@shuax https://www.jianshu.com/p/08c657bd34f1
感谢,不过他不能使虚拟环境跨平台使用,只能本机移动位置?
我换了机器就路径不对识别不了。
2019-04-29 23:34:17 +08:00
回复了 akmonde 创建的主题 Python Python 项目移植到其他机器,要求全 Linux 系统适配
@est 他的意思是机器可能啥都没装,临时用没时间装,要求直接解压安装就能用。
@cy97cool
@wangtao7
感谢两位的回复,两位说的都是拦截器吧,不过我黑盒爬虫去爬不一定能触发 ajax,靠这个拦截复现不太现实。。
@epkT6QJ3RSaz6AnJ 您的意思是拦截器监控再复现?但是我在随机爬行某个网站时不一定能触发该 js 函数,我这算是黑盒,白盒的应该不太适用。
2019-01-09 18:06:07 +08:00
回复了 akmonde 创建的主题 Python celery 时间不同步求破,导致 soft_time_limit 失效 [V 币感谢]
@lolizeppelin 受教,下次注意。
2019-01-09 16:20:08 +08:00
回复了 akmonde 创建的主题 Python celery 时间不同步求破,导致 soft_time_limit 失效 [V 币感谢]
@lolizeppelin Grep 了 ntpdate,进程好像后台没有跑 ntpdate,就执行了一次。
唉,紧急处理,没想到去读源码,实在心急看不下去。
2019-01-09 13:19:26 +08:00
回复了 akmonde 创建的主题 Python celery 时间不同步求破,导致 soft_time_limit 失效 [V 币感谢]
@fanhaipeng0403
忘了回复您另一个问题,我这边需要用到 3.x 版本以上废弃的一个功能,也就是使用 test.delay()调用 chord 聚合执行,所以不能升级太高。
2019-01-09 13:15:53 +08:00
回复了 akmonde 创建的主题 Python celery 时间不同步求破,导致 soft_time_limit 失效 [V 币感谢]
@fanhaipeng0403
@arrow8899
抱歉,乌龙了,好像不是版本的原因。
我原来的是 3.1.25 ,改成了 3.1.7,先是成功了一下,后来发现 worker 好像一直 offline。
连着切了几个版本都这样,我后来又换回 3.1.25 ,莫名其妙暂时没有问题了,暂时还没跑偏。
我本来环境变量就是 shanghai,这个我确定。
我晚点再测测,还没找出啥原因。
我曾在这里测过:
>>> from celery.utils.timeutils import utcoffset
>>> utcoffset()
worker 和 client,一个 8,一个 8,刚好是相差 57600s。
现在莫名其妙两个都变成-8 了。
2019-01-09 12:02:48 +08:00
回复了 akmonde 创建的主题 Python celery 时间不同步求破,导致 soft_time_limit 失效 [V 币感谢]
@arrow8899 我把 celery 升级到 3.1.7 解决了,小版本升级太烦人。
2019-01-09 09:54:42 +08:00
回复了 akmonde 创建的主题 Python celery 时间不同步求破,导致 soft_time_limit 失效 [V 币感谢]
@arrow8899 刚才试了,好像还是不管用...
2019-01-08 15:53:37 +08:00
回复了 phpchen 创建的主题 程序员 求助,一个很牛逼的 Linux 文件无法做任何修改操作
LZ 可以试试,如果进程没有被挂载之类的隐藏的话。
```
netstat -antpl
lsof -p PID 号
cd /proc/pidnumber
ls -ail
rm – rf /proc/pidnumber/恶意程序
```
2018-12-27 11:01:21 +08:00
回复了 rtwzer0 创建的主题 问与答 朋友双十一买的 iPhone xr 64g 5000 转给我怎么样?
为毛这么多出二手的,xr 问题比较大?
@GoTop 给个笨一点的建议,如果你非要在 win 下,可以自己写时长计数,然后自己 kill 掉,不要用 celery 自带的 time limit,那玩意儿也有 bug。
@GoTop 似乎会一直等待你跑完为止,不会限制。
@GoTop 在 win 下没解决,完全迁移到 linux 下了,win 下部分机制用不了。
2018-12-17 17:14:54 +08:00
回复了 iffi 创建的主题 旅行 春节一个人去🇯🇵玩,有没有去过的朋友指导一下
@lovemiku 听了土豪的花销瑟瑟发抖...
2018-12-17 14:51:46 +08:00
回复了 iffi 创建的主题 旅行 春节一个人去🇯🇵玩,有没有去过的朋友指导一下
@lovemiku 请教下兄 dei,意思是那几天差不多一共花了 2-3w 日元?
@utoyuri 试过在 middleware 里面的 process_request,尝试开头 raise IgnoreRequest,然后没写 return,按理说不会继续运行下去 [我不知道其他阻断方法] ?另外,后面还有其他法子判断 return 的。
不过似乎是没起效果。
@utoyuri 非也,是爬某个 url 时,达到某个条件,停止爬行该 url,其他的继续。
我试了下,如果是 scrapy-redis 推送的话,可能会同时爬多个网站,调用 close_spider 会直接终止整个程序,无法达到我的目的。
1  2  3  4  5  6  7  8  9  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2653 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 19ms · UTC 00:20 · PVG 08:20 · LAX 16:20 · JFK 19:20
Developed with CodeLauncher
♥ Do have faith in what you're doing.