这个大专栏网站是爬虫网站？窃取别人的文章

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

这是一个创建于 1960 天前的主题，其中的信息可能已经有所发展或是发生改变。

地址： https://www.dazhuanlan.com/

窃取我的文章，也不引用来源。例如： https://www.dazhuanlan.com/2020/02/19/5e4c63b7105ec/

原本的文章： https://jdhao.github.io/2018/12/25/my_reading_list_2018/

窃取

文章

网站

专栏

23 条回复 • 2020-09-07 16:25:42 +08:00

murmur

2020 年 9 月 5 日

爬了 121080 这么多页帖子，也没广告，这啥垃圾网站

jdhao

2020 年 9 月 5 日

@murmur 难道是作者想自己收藏

murmur

2020 年 9 月 5 日

@jdhao 这是能备案的网站，应该是国内服务器，点了一下切换栏目和分页，卡的一笔，这站长可能弱智到索引都没加，稍微来点压力整站就炸了

winnerczwx

2020 年 9 月 5 日 via iPhone

简单做下反爬吧

datou

2020 年 9 月 5 日

果然是 wordpress....

heiheidewo

2020 年 9 月 5 日

@jdhao 现在每天只有 6k ip，等流量大点再放广告

spark

2020 年 9 月 5 日

@heiheidewo 6k ip 是怎么看出来的？

zyqf

2020 年 9 月 5 日 via Android

应该是有广告的，然后前段时间腾讯通知个人备案不允许挂广告。。。

learningman

2020 年 9 月 6 日

@winnerczwx 然后顺便把 SEO 整挂

yunyingsilue

2020 年 9 月 6 日

mamicode 和 bubuko 之类也是，就知道爬别人网站

ushio

2020 年 9 月 6 日

很多这种垃圾站，所以现在我写文章都会给图片加上水印，插入自己公众号二维码

han777

2020 年 9 月 6 日

UI 很像 hexo 的 next 主题啊

han777

2020 年 9 月 6 日

这就是个静态网站

Tianyan

2020 年 9 月 6 日

@han777 看起来像 next，不过确实是 wp 网站

Tianyan

2020 年 9 月 6 日

@murmur wp 的网站啥都不需要只要服务器配置够高就行了

xiqingongzi

2020 年 9 月 7 日

可能是这个哥们的？ https://www.v2ex.com/t/529521
他之前搞了个大专栏的开源项目

hafuhafu

2020 年 9 月 7 日

这不是那种“内容农场”吗？爬 /生成一堆文章来提高自己 SEO，不过好像又没看到广告啥的..

OKOOk666

2020 年 9 月 7 日

这不是很正常嘛，没什么大惊小怪的，我也有一个文学类的爬虫站 http://www.wlkankan.com

jdhao

2020 年 9 月 7 日 via Android

@xiqingongzi 应该是的，他那个帖子里面的开源项目已经删了，看不到了

jdhao

2020 年 9 月 7 日 via Android

@OKOOk666 正常个屁，爬取别人内容，也不表明来源，这叫正常吗

xmge

2020 年 9 月 7 日

@heiheidewo 求 6k ip 怎么看出来的

OKOOk666

2020 年 9 月 7 日

@jdhao 那些狗屁文章有没版权，爬了也没什么

zifangsky

2020 年 9 月 7 日

18L 可真理直气壮，呵呵