V2EX › qq2549112 的所有回复 › 第 1 页 / 共 5 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5

❮

❯

2015 年 7 月 23 日

回复了 WildCat 创建的主题 › 程序员 › 2015 年下半年，你最期待哪些项目的发布？

python3.5
angular2

postgresql9.5

2015 年 7 月 20 日

回复了 qq2549112 创建的主题 › 问与答 › 有摄影师吗，想请教个问题

@ki https://sy.taobao.com/providerDetailEx.htm?providerId=2280566952 他们的网址

2015 年 7 月 20 日

回复了 qq2549112 创建的主题 › 问与答 › 有摄影师吗，想请教个问题

@qinix 谢谢，我明天拍一些上传上来

2015 年 7 月 20 日

回复了 qq2549112 创建的主题 › 问与答 › 有摄影师吗，想请教个问题

@surfmanjoe 谢谢，反光板我也有的，但是还是不如意，我看过他们的很多图，有些图拍到了玻璃，反射出了摄影师，发现他们可能并不一定用了反光板，我的镜头是新购买的 85 1.8F ，应该不算差了 3K多块购买的

现在我想搞清楚他们的拍摄和后期流程，自己弄的总是和他们差距太大了

2015 年 7 月 20 日

回复了 qq2549112 创建的主题 › 问与答 › 有摄影师吗，想请教个问题

@chenji PS LT ROOT这2个都会一些，但是我不知道他们我如何的处理的，您有对应处理的关键词吗，我好去搜搜

2015 年 7 月 15 日

回复了 OneAPM 创建的主题 › 程序员 › 如何使用 Docker 组件开发 Django 项目？

支持支持

2015 年 7 月 8 日

回复了 orvice 创建的主题 › 分享发现 › Google 发布了前端开发语言框架 Material Design Lite

支持

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 请问 mysql 大数据量 limit 分页，时间戳排序，如何优化

@wy315700 谢谢

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 请问 mysql 大数据量 limit 分页，时间戳排序，如何优化

@wy315700 谢谢
您的意思是：

先 SELECT * FROM table ORDER BY modified ASC LIMIT 100

就会得到100个记录，我得出最后一个记录的 modified

下次就
SELECT * FROM table WHERE modified >=上次的时间戳 ORDER BY modified ASC LIMIT 100

再下次就
SELECT * FROM table WHERE modified >=上次的时间戳 ORDER BY modified ASC LIMIT 100

是这样吗

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

@Gandum 谢谢现在我找到问题所在了，是数据库的问题我重新发了个帖子， http://www.v2ex.com/t/203463

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

@lucky2touch 谢谢，需求是实时的增量备份到另外一个数据库 [mysql to postgresql]

我重新发了个帖子， http://www.v2ex.com/t/203463

感谢前辈

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

@imn1 谢谢

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

@imn1 谢谢，我的for 改成什么表达式呀，我是新手哦，我觉得for 好像是比较正常的

这个托数据以后，处理也很简单的，也就是插入到本地另一个数据库，不耽误时间的

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

@benjiam 谢谢提醒，那我试试这个方法嘿嘿

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

@Gandum
@kenken
谢谢
我的代码是这个 http://paste.ubuntu.com/11824534/ 从代码上来看应该是没有问题，后来我加了个判断，就是offset 可以整除10000的时候就休息10秒 [也就是每次同步1w个数据，就休息10秒] ，但还是不行，还是会在5w左右的数据量出现卡住的情况

而且每次都在 5w左右卡住

所以我现在怀疑是远程数据库做了什么限制

但是我不知道怎么办了

2015 年 7 月 5 日

回复了 qq2549112 创建的主题 › 问与答 › 我的 python 脚本执行时间长了，他就卡着不动，好久才动一次

经过简单排查，发现是查询语句获取结果速度很慢

查询到了5w多，继续查询的话，获取数据的时间会很长，应该不可能是网络问题

因为我新开终端再次运行这个脚本，他跑的很快

我猜测，是不是远程数据库因为这个连接查询的数据量太多了，所以需要休息太累了

2015 年 7 月 4 日

回复了 qq2549112 创建的主题 › 问与答 › 请问时间戳增量同步如何防止记录跳过？求 sql

@Septembers 谢谢

2015 年 7 月 4 日

回复了 qq2549112 创建的主题 › 问与答 › 请问时间戳增量同步如何防止记录跳过？求 sql

@gamexg 谢谢我再研究研究

2015 年 7 月 4 日

回复了 qq2549112 创建的主题 › 问与答 › 请问 sqlalchemy 用什么算法从数据库获取大量数据，且不浪费性能啊

感谢楼上各位

2015 年 7 月 4 日

回复了 WildCat 创建的主题 › 问与答 › 老机器（用了 4 年）的硬盘坏了，开不了机了，有什么方法可以挽回里面的数据？

下次记得装个dropbox哦

1 2 3 4 5

❮

❯