败子回头-互联网常识：cs
余生很长，何事慌张?用心过好每一天。
网络上存在各种各样的爬虫与蜘蛛，有的是对网站有帮助的，譬如说：百度、谷歌，但是也有一些纯粹是垃圾爬虫，不但本身对网站毫无帮助，还大幅损耗服务器资源，所以我们可以通过用户代理 UserAgent 信息来屏蔽垃圾爬虫，本文注解并汇总了目前常见的爬虫信息，方便大家参考并选择性的屏蔽。 屏蔽的方法是在 robots.txt 文件中添加下面两行代码（以屏蔽AhrefsBot为例） user-agent: A...
专业的互联网常识：
因为Node.js的不断更新，已经不再支
相思哀愁在心头，念你恋你已好久；趁此佳节表心意，对着银河许誓爱；你愿否做我织女，共同牵手到白头！七夕快乐！