最近双十一又到了，各种电商平台的的奥数商品层出不穷，但是在这些奥数题下有很多市场硬通货（例如茅台、手机等）因为各种优惠券比二级市场价格便宜不少
因此出现了各种套利行为，从开始的用手抢，到摇人一起抢，再到利用科技的力量（软件）进行抢货，技术得到不断升级
但是，看着很多人抢的非常欢，有一部分人却半只脚踏进了管饭管住的福利间，他们就是开发这些抢货软件的程序员
而不了解这方面的小哥，还在蠢蠢欲动，想写个脚本来抢货
之后为了了解学Python从入门到入狱到底需要多久,好奇的打开了中国裁判文书网
让我看到了原来入狱离我们这么近，上百个入狱故事描述的非常详细，同时提供了很多警戒
1有意思的案例
比如下面这个，因为被告爬了对方网站上的1张图片，就被罚了3000元
而且原告并没有在根目录添加 robots.txt
被告还在网址下标注了**“本站部分文字及图片均来自于网络，如侵犯到您的权益，请及时通知我们，我们将及时的处理。本站中的文章（包括转贴文章）的版权仅归原作者所有，若作者有版权声明的或文章从其它网站（或各种互联网渠道）转载而附带有原所有站的版权声明者，其版权归属以附带声明为准”**
就这样一开始诉讼要求赔偿7000元，经过二审才改判到3000元
可见日常的爬虫侵权没有出事只是侥幸，那只是因为律师函没有来得及递上来
2爬虫入狱状况
从案由上看
刑事案由：79 件
民事案由：425 件
总体案由上来看，民事诉讼占了84 %，大部分还是道歉、赔钱了是
但是只要涉及到个人隐私信息，就是那种没有公开的个人信息，尤其牵扯到诈骗，都是三年管饭起步，数额越大，管饭越多
从时间上看
随着时间的推移，关于“爬虫”的案件量越来越多
这一方面是使用技术相关的案件基数不断增大，利用到爬虫技术的地方越来越多
另一方面，也是律师的就业环境越来越恶劣，你细细品
3那怎么避免呢？
原来说只要信息是公开的，只要爬取的数据没有用来盈利就是没有问题
但那个涉及到了著作权还是一份律师函啪的法过来
原来说遵循了对方的robots.txt，不破坏计算机信息罪就没有问题
那现在对方不放robots.txt了，你咋办？？？？
在我看来最安全的办法就是遵循robots协议，没有协议就跳过，当然老板硬是要求要爬，那最好留下记录，一起被管饭会吃的更香
当然，对于个人来说，爬虫采集数据只是为了学习和研究的话，基本不会出什么问题，也不用担心法律问题