这是一个创建于 4161 天前的主题，其中的信息可能已经有所发展或是发生改变。
第 1 条附言 · 2014 年 9 月 4 日
可以把文字内容，图片链接写到数据库；
可以把图片下载至本地，并把本地的相对链接也写到数据库。
只要安装了mysql，把上面的几个配置换成自己的就OK了。
可以建一个定时任务，基本上所有内容都能爬下来（不包含评论和用户信息）。
可以把图片下载至本地，并把本地的相对链接也写到数据库。
只要安装了mysql，把上面的几个配置换成自己的就OK了。
可以建一个定时任务，基本上所有内容都能爬下来（不包含评论和用户信息）。
 |
1
zinev 2014 年 9 月 4 日
试了下，下载的图片没点意思，不如换一个，下载壁纸也好啊
|
 |
3
withrock 2014 年 9 月 5 日
我也写了个多进程爬豆瓣的脚本。
http://git.oschina.net/mktime/python-learn/blob/master/qiubai.py 不过好久没更新了，不知道糗百有木有更新html结构。 如果更新的话，需要改正则表达式。 我用的sqlite3。 |
 |
4
sunny1992 2014 年 9 月 5 日
观摩
|
 |
5
displayabc 2014 年 9 月 5 日
@withrock 我感觉自己写正则的,都不是好爬虫
|
 |
6
mkeith 2014 年 9 月 5 日
草榴的
|
 |
7
linKnowEasy 2014 年 9 月 5 日
不是有官方api么。
|
 |
8
myAngel 2014 年 9 月 16 日
怎么运行。。。。。
|
 |
9
gotounix OP |
|
10
myAngel 2014 年 9 月 17 日
兄弟，我想爬一个网站的内容，能做吗?
能做的话，QQ聊聊 马化腾：156224301 |
Select Language