在学习 scrapy 遇到的一些问题。

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

V2EX 提问指南

这是一个创建于 3168 天前的主题，其中的信息可能已经有所发展或是发生改变。

目前调试在 LINUX 界面。但是编写规则的时候用 VI 明显不方便

谁能告诉一下有没有办法在 PYCHARM 上调试出来。我可以随时调试随时测试运行

另外 SCRAPY 与 PYPYSPIDER 比起来哪个更强？

Scrapy

调试

PyCharm

pypyspider

1 条回复 • 2016-03-26 18:44:58 +08:00

leavic

2016-03-26 18:44:58 +08:00

from scrapy.crawler import CrawlerProcess
from scrapy.utils.project import get_project_settings
from yourspider.spiders.index import YourSpider

settings=get_project_settings()
process = CrawlerProcess(settings)

process.crawl('spider_name')
process.start()