爬虫究竟是合法还是违法的?

  • 时间:
  • 浏览:0

据说互联网上 100%以上的流量不会爬虫创造的,他说你看完本来 热门数据不会爬虫所创造的,本来 还时需说无爬虫就无互联网的繁荣。

前天写了一篇文章《 只因写了一段爬虫,公司100多人被抓!》,讲述程序员因写爬虫而被刑侦的事件。文章传播很广,评论中讨论最热是:爬虫究竟是合法还是违法的?

而且 话题涉及到大伙儿本来 程序员的日常工作,本来 有必要和大伙儿细聊一下。

01.技术无罪?

本来 大伙儿给我留言:技术是无罪的,技术某种确实是没人对错的,但使用技术的人是有对错的,公司而且程序员而且明知使用其技术是非法的,没人公司而且人就时需为之付出代价。

在今年国家颁布《中华人民共和国网络安全法》从前,本来 从前处在灰色地带的业务不会能做了。

君不见从前从前非常火的各种社工库网站,现在绝大累积都而且消失匿迹好久?而且最新的安全法强调:贩卖个人所有所有信息超过100条属于“情节严重”,时需追求其法律责任。

本来 草根站长都纷纷主动关闭了网站;还有本来 涉及版权信息的网站,比如书籍、影视剧、课程等后期也会面临没人严格的审查,这而且目前大的形势。

2014年12月20日,人人影视字幕站发布微博称,人人影视正式关闭,并表示或将继续为正版商提供翻译服务,也而且转变为讨论社区的形式。

2019年6月,吾爱破解因版权疑问报告 关站整改...

.....

随着中国经济的不断往前走,知识产权疑问报告 会没人重视,非法爬虫是现在有二个重要的打击累积,

而且有程序员走在灰色的边缘尽早收手,暂且而且而且 小的收益原因触犯法律,从而得不偿失。

技术是无罪的,而且用到了错的地方代价也是非常巨大的。

02.爬虫岗位人人自危

我在拉钩上搜索: 爬虫工程师,显示有 217 条相关招聘信息,薪资从10-100k 不会,说明市场上对爬虫的需求是很大的。

前天文章发出去从前有本来 程序员给我留言:

  • 大伙儿领导安排我爬取公司外部的信息,这算是犯罪呢?

  • 爬取网上公开的信息,这算是犯罪呢?

  • 写了一段代码上传到 Github,被人用了犯法吗?

简单回答一下什么疑问报告 :

  • 1.爬取公司外部信息有公司授权当然不算犯罪的,而且公司外部不要 接口而用爬虫谁能谁能告诉我是为何?

  • 2.爬取网上公开信息不犯法,但而且一定量开启爬虫原因对方服务器崩溃也是违法的,这属于暴力攻击的范畴了。

  • 3.写了一段代码上传到 Github 里面,有人利用你的代码做了其它非法的事情,绝大多数都没人疑问报告 的,但而且你写的软件涉及到入侵、暴力破解、病毒等就不好说了。

还有大伙儿认为这事责任在企业都没人程序员,日常工作中项目初期设计和最后上线时需通过公司的法务批准,所有代码时需有而且 程序员同事评审通过上能提交。

这位大伙儿说的挺对的,按道理每个公司都应该有法务和风控在前面,里面才是产品设计和程序员开发的事情,但而且一家公司为了利益,老板还时需直接让这有二个部门闭嘴,里面程序员还时需不干吗?

更甚至本来 公司确实就没人这有二个部门而且说形同虚设。没人做为程序员个人所有所有也时需操一份心,凡是涉及到入侵类的程序不会能干,而且有有二个东西叫做:单位犯罪

单位犯罪,是指公司、企业、事业单位、机关、团体为单位谋取利益,经单位决策机构而且负责人决定实施的,法律规定应当负刑事责任的危害社会的行为。

我国刑法对单位犯罪原则上采取双罚制度,即单位犯罪的,对单位判处罚金,并对其直接负责的主管人员和而且 直接责任人员判处刑罚。

03.什么样的爬虫是非法的?

爬虫必须涉及个人所有所有隐私!

而且爬虫程序挂接到公民的姓名、身份证件号码、通信通讯联系最好的辦法 、住址、账号密码、财产请况、行踪轨迹等个人所有所有信息,并将之用于非法途径的,则肯定构成非法获取公民个人所有所有信息的违法行为。

也而且说你爬虫爬取信息没人疑问报告 ,但必须涉及到个人所有所有的隐私疑问报告 ,而且涉及了而且通过非法途径收益了,那肯定是违法行为。

另外,还有下列某种请况,爬虫有而且违法,严重的甚至构成犯罪:

  • 1.爬虫程序规避网站经营者设置的反爬虫最好的辦法 而且破解服务器防抓取最好的辦法 ,非法获取相关信息,情节严重的,有而且构成“非法获取计算机信息系统数据罪”。

  • 2.爬虫程序干扰被访问的网站或系统正常运营,后果严重的,触犯刑法,构成“破坏计算机信息系统罪”

  • 3.爬虫挂接的信息属于公民个人所有所有信息的,有而且构成非法获取公民个人所有所有信息的违法行为,情节严重的,有而且构成“侵犯公民个人所有所有信息罪”。

现在网上有本来 付费的课程,比如极客时间、Gitchat、慕课网、知识星球等等,什么付费外部信息而且被非法爬取手法出售获利,某种违法行为。

从前要我遇到有二个明星微博 视频,把各个知识星球的内容都抓下来,合到同时个人所有所有去卖,自作聪明确实发现了有二个大的商机,确实个人所有所有谁能谁能告诉我而且 行为确实很危险,风险和收益明显不对等。

我这4天 看的从前,他的有二个公众号都被封了,要我又转移了有二个小号继续搞,迟早又是被封的命运,真的很不值当。最可怜是什么买他服务的用户,而且他宣传时承诺永久,肯定永久不了。

04.什么样的爬虫是合法的?

1、 遵守 Robots 协议

Robots 协议也叫 robots.txt(统一小写)是某种存放于网站根目录下的 ASCII 编码的文本文件,它通常告诉网络搜索引擎的漫游器(又称网络蜘蛛),此网站中的什么内容是不应被搜索引擎的漫游器获取的,什么是还时需被漫游器获取的。

Robots 协议而且告诉爬虫,什么信息是还时需爬取,什么信息必须被爬取,严格按照 Robots 协议 爬取网站相关信息一般不要 突然出现 太疑问报告 报告 。

2、必须造成对方服务器瘫痪

但不会说倘若遵守 Robots 协议的爬虫就没人疑问报告 ,还涉及到有二个因素,第一必须大规模爬虫原因对方服务器瘫痪,这等于网络攻击。

2019年05月28日国家网信办发布的《数据安全管理最好的辦法 (征求意见稿)》中,拟通过行政法规的形式,对爬虫的使用进行限制:

网络运营者采取自动化手段访问挂接网站数据,不得妨碍网站正常运行;此类行为严重影响网站运行,如自动化访问挂接流量超过网站日均流量三分之一,网站要求停止自动化访问挂接时,应当停止。

3、必须非法获利

恶意利用爬虫技术抓取数据,攫取不正当竞争的优势,甚至是牟取不法利益的,则而且触犯法律。实践中,非法使用爬虫技术抓取数据而产生的纠纷确实数量暂且少,大多是以不正当竞争为由提请诉讼。

举个例子,而且你把大众点评上的所有公开信息都抓取了下来,个人所有所有好友克隆了有二个一模一样的网站,而且还通过而且 网站获取了一定量的利润,从前也是有疑问报告 的。

一般请况下,爬虫不会为了企业获利的,而且时需爬虫开发者的道德自持和企业经营者的良知才是处理触碰法律底线的根本所在。

05.最后

最近看完本来 关于程序员出事的事件,东南亚程序员被打,多个大数据公司被查等等。做为一名普通的程序员,希望大伙儿也还时需多关注此类事 件,从而提醒个人所有所有。

有风险的行业谨慎进入,比如现金贷、不合规的P2P、赌博类游戏、黑五类产品的行业。而且公司安排入侵某个网站数据,而且有同事/大伙儿邀请泄露公司信息的都时需保持警惕,有从前有二个很小的动作不会而且原因出疑问报告 。

大伙儿绝大多数公司和个人所有所有使用的爬虫不会没人疑问报告 的,暂且人人自危,倘若把握住暂且爬取个人所有所有信息,暂且利用爬虫非法获利,暂且爬取网站的付费内容,基本上不要 有疑问报告 。

程序员是世界上最单纯的一批人,也是一批高智商低情商的人,工作是工作但也时需适当保持谨慎,对于而且 游走在法律边缘的事情请保持距离。

敬畏法律,遵纪守法,从我做起。

参考:

https://www.zhihu.com/question/291554395