电影长津湖有一句对白这么说：我们把该打的仗都打了，我们的后辈就不用打了。
是啊，谁不希望下一代能够生长在一个没有硝烟的和平盛世？
在简书，同样有一群因为网络爬虫侵权而奋起发声维权的简友，而且绝不在少数。
请认真思考这个问题吧。
你难道不希望在一个没有爬虫肆意侵权的环境下安心创作吗？
如果你的答案是肯定的，那么继续往下看。
首先，通过截图，让我们回顾2018年的吃惊谷事件：
一场维权战争下来，结果如何？
据悉，有不少简友愤而舍弃简书而去。
如今尝试搜索吃惊谷，已经一无所获……据传闻似乎已元气大伤。
简书从此就不再受到网络爬虫的侵权了吗？
转眼到了2019年，另一批简友又再次为爬虫侵权奋起而战，这一回的盗贼窝叫美文网。
结果如何？
据知，简书管理层确实出面声讨美文网了。
但是美文网却根本不鸟简书，至今仍然利用爬虫技术不断进入简书爬文。
这一战的结果又让多少简友失望离开简书？
简书管理层又在乎了吗？
2021年末，就在美文网肆无忌惮继续爬取简书文章时，殊不知另一个盗贼窝台部落也许比美文网更早登陆简书，所以在曝光之时，简书作者几乎有一半以上的个人主页早已让台部落所窃取。
于是啊，又一批简友奋而声讨兼呼吁简书管理层严正看待层出不穷的爬虫侵权事件。
这一战的结果又会如何？
难道维权在简书是每一年都得来一次的集体吐槽吗？不对！我们绝非吐槽，所以这一次必须有一个结果！
如果简书管理层无法解决爬虫长期侵权的问题，那么，我们也将义无反顾协助寻求一个解决的方法。
要相信世上无难事，只怕有心人啊！
终于，在搜索了一个又一个利用爬虫技术进入简书爬文的盗贼窝后，我发现了一个简书管理层早已明白的关键所在！
这是其中一个爬文网站“摄影圈子”，在其首页免责说明第一条文，清楚阐明本站刊载的所有非原创内容，包括文字、图片、音频、视频、软件、程序、以及网页版式设计等均在网上按照Robots协议进行搜集。
原来问题就出在Robots协议！
根据网上资料，Robots协议也就是爬虫协议，顾名思义即网站与爬虫之间的协议，对允许与不允许被抓取的内容作了规范。
简而言之，当爬虫来到某个网站抓取资料时，首先会读取协议规则，然后才抓取该网站允许被抓取的内容。
当然，爬虫也分好坏，坏爬虫自然无视协议，但是无视的同时自然也承坦了法律风险。
Robots协议虽然没有真正的约束力，可是对违反此协议的爬虫网站却能以此作为付诸法律行动的依据。
若是该网站不存在Robots协议，意即默许爬虫可任意抓取网站的所有内容。
为什么默许？
说来也是现实啊，当一个网站让爬虫抓取的频率愈高，在搜索引擎上也就更容易被发现。
也许，这也是简书管理层对爬虫又爱又恨的原因吧？
这就好比入住酒店，即不想被干扰又想让服务员清理客房，那面免打扰的牌子挂还是不挂呢？
然而摄影圈子虽然阐明非原创内容，可每一篇爬取的简书文章却替原作者更名，这又是什么意思？
我对网络上的程序一窍不通，对于爬虫软件也是上网搜索所得，贸然以此作文章难免错漏百出，但是有句话叫抛砖引玉，我更希望因为错误而引出真正的专家发声纠正。
而“摄影圈子”既然是以爬虫爬取了简书的文章，但是却更改了原作者的署名，同时又以爬取的内容获取利益，这怎么也不能是合理合法吧？
再者，这么多爬虫在简书任意抓取内容，是否说明简书根本不存在Robots协议？
又或者……Robots协议允许爬虫随意抓取简书用户的任何内容？
还是说简书太佛系，所以坏爬虫都闻风而至？
据说，这么多爬虫在简书活动还会造成一个对你我都深受其苦的“副作用”。
引用网上一篇文章段落所述：
通过程序进行 URL 请求去获得数据的成本是很低的，这就造成大量低质量网页爬虫在网络横行，对目标网站产生大量的访问，导致目标网站的服务器资源大量消耗，轻则影响正常用户的访问速度，重则导致网站服务不可用。
简书经常出现类似转圈圈、数据遗失等问题，是否就是爬虫过度消耗简书资源造成？
这一点相信简书管理层心里有数吧……
好的爬虫能带动简书，可来者不拒的后果却极有可能先拖垮了服务器；更甚的是造成人心向背。
得与失之间，简书究竟该如何衡量？
如果让平台广为人知的代价却是换来耻辱之名，同时又流失一批又一批优秀作者，值得吗？
我不懂，我只是根据网上资料加以猜测。
其实，简书人才济济，于2017年就有一位简友在一篇名为爬虫的“盗亦有道”—Robots 协议一文中详细介绍了什么叫爬虫与爬虫协议—— 想深入了解的简友可以点开链接 。
维权确实艰难，然而简书管理层若是用心理解用戶心情，至少也该公开表态吧？
比如，我就很想清楚知道，简书与爬虫之间究竟有没有爬虫协议？
你呢？也想知道吧……
