爬蟲,應(yīng)用與邊界
網(wǎng)絡(luò)爬蟲,是一種按照一定規(guī)則,自動(dòng)抓取互聯(lián)網(wǎng)信息的程序與技術(shù)。如果通過爬蟲抓取網(wǎng)絡(luò)公開信息,并不違法;但如果抓取的是未公開、未授權(quán)的個(gè)人敏感信息,就屬于違法行為,違反的是2017年6月1日實(shí)施的《網(wǎng)絡(luò)安全法》以及“兩高”相關(guān)司法解釋。
51信用卡事件在杭州警方發(fā)聲明之前,多方都認(rèn)為是因?yàn)榕老x技術(shù)使用不當(dāng)觸及紅線導(dǎo)致,由此,爬蟲技術(shù)也被拉到了公眾關(guān)注的焦點(diǎn)。21世紀(jì)經(jīng)濟(jì)報(bào)道記者了解到,其實(shí),外界的這種猜想也是無風(fēng)不起浪,爬蟲整肅風(fēng)暴緣何刮到杭州并卷起風(fēng)暴?
今年以來,大數(shù)據(jù)風(fēng)控行業(yè)頗不平靜,9月份以來,杭州的魔蝎科技和公信寶運(yùn)營公司、杭州存信數(shù)據(jù)科技有限公司(以下簡稱“杭州存信”)以及貸款超市頭部機(jī)構(gòu)“信用管家”先后被杭州警方調(diào)查。
此外,還有多家大數(shù)據(jù)風(fēng)控公司人士“協(xié)助調(diào)查”,涉及同盾科技等多家機(jī)構(gòu)。一時(shí)風(fēng)聲鶴唳,大數(shù)據(jù)行業(yè)的從業(yè)者人人自危。多家大數(shù)據(jù)公司表態(tài)暫停爬蟲業(yè)務(wù)。
21世紀(jì)經(jīng)濟(jì)報(bào)道記者多方了解到,上述公司受調(diào)查均是與爬蟲業(yè)務(wù)有關(guān)。
對此,同盾科技相關(guān)人士22日回復(fù)21世紀(jì)經(jīng)濟(jì)報(bào)道記者稱,數(shù)聚魔盒產(chǎn)品是信川的產(chǎn)品之一,因?yàn)樵摲?wù)對適用條件與場景有嚴(yán)格的授權(quán)要求與限制,為了更加嚴(yán)格的保護(hù)用戶合法權(quán)益,避免個(gè)人信息被誤用,同盾已經(jīng)從去年開始逐步調(diào)整業(yè)務(wù),目前已全部停止相關(guān)服務(wù)。除此之外,同盾的高管并沒有接受警方調(diào)查,同時(shí),同盾主營業(yè)務(wù)也沒受到影響,沒有相關(guān)調(diào)整。
爬蟲“鼻祖”被查
10月21日上午,51信用卡位于杭州西湖區(qū)紫霞街80號西溪谷國際商務(wù)中心的辦公地點(diǎn)遭遇杭州警方突擊調(diào)查。引來業(yè)內(nèi)一片嘩然。
而51信用卡正是行業(yè)內(nèi)最早開展爬蟲的公司之一,這讓不少業(yè)內(nèi)人士猜測此次被警方調(diào)查即是利用爬蟲技術(shù)非法獲取用戶個(gè)人信息,而這是近期公安部嚴(yán)厲打擊的范疇。
51信用卡堪稱業(yè)內(nèi)爬蟲行業(yè)的鼻祖,此次杭州被調(diào)查的數(shù)據(jù)公司魔蝎科技創(chuàng)始人周江翔是51信用卡的前高管。魔蝎科技是業(yè)內(nèi)知名的大數(shù)據(jù)服務(wù)公司,合作機(jī)構(gòu)范圍較廣,牽涉業(yè)內(nèi)大量金融機(jī)構(gòu)。
但杭州公安10月21日深夜發(fā)布的最新通報(bào)顯示,51信用卡被調(diào)查的原因是其委托的外包催收機(jī)構(gòu)涉嫌非法催收,涉嫌尋釁滋事等犯罪行為。
就在51在杭州被大批警察包圍突擊調(diào)查的同一天,10月21日,最高人民法院、最高人民檢察院、公安部、司法部聯(lián)合發(fā)布《關(guān)于辦理非法放貸刑事案件若干問題的意見》?!兑庖姟穼⒋驌裟繕?biāo)鎖定社會(huì)危害性最為突出的非法高利放貸,明確在定罪量刑時(shí)以單次實(shí)際年利率超過36%的非法放貸為基準(zhǔn)。規(guī)定即日生效施行。
同日,《關(guān)于辦理利用信息網(wǎng)絡(luò)實(shí)施黑惡勢力犯罪刑事案件若干問題的意見》也正式發(fā)布,公安部副部長、全國掃黑辦副主任杜航偉在新聞發(fā)布會(huì)中表示,《意見》首先明確,通過線上方式實(shí)施黑惡勢力犯罪的主要手段是“發(fā)布、刪除負(fù)面或虛假信息,發(fā)送侮辱性信息、圖片,以及利用信息、電話騷擾等方式,威脅、要挾、恐嚇、滋擾他人”,同時(shí)對利用信息網(wǎng)絡(luò)實(shí)施的強(qiáng)迫交易罪、敲詐勒索罪、尋釁滋事罪如何認(rèn)定以及此類案件的特殊取證方式等問題,作了明確規(guī)定。
“刀怎么用才是問題”
所謂網(wǎng)絡(luò)爬蟲,是一種按照一定規(guī)則,自動(dòng)抓取互聯(lián)網(wǎng)信息的程序與技術(shù)。如果通過爬蟲抓取網(wǎng)絡(luò)公開信息,并不違法;但如果抓取的是未公開、未授權(quán)的個(gè)人敏感信息,就屬于違法行為,違反的是2017年6月1日實(shí)施的《網(wǎng)絡(luò)安全法》以及“兩高”相關(guān)司法解釋。
爬蟲技術(shù)的數(shù)據(jù)主要分為司法信息、電商信息、銀行卡信息、運(yùn)營商信息、社交信息、開放數(shù)據(jù)等幾大類。在這些數(shù)據(jù)維度中,比較受歡迎的都是覆蓋度高、標(biāo)準(zhǔn)化較強(qiáng)的通用類數(shù)據(jù),比如身份驗(yàn)證、逾期黑名單信息等,一般是通過爬取淘寶、社交網(wǎng)絡(luò)、網(wǎng)上銀行等獲取數(shù)據(jù)。
21世紀(jì)經(jīng)濟(jì)報(bào)道記者了解到,這波針對爬蟲業(yè)務(wù)的強(qiáng)監(jiān)管是由于公安部門打擊“套路貸”牽扯出了導(dǎo)流獲客和暴力催收這兩個(gè)幫兇,發(fā)現(xiàn)爬蟲是主要工具,為這些“套路貸”平臺爬取通訊錄、地址定位等個(gè)人敏感信息,從而引發(fā)了命案及相關(guān)刑事調(diào)查。
2017年6月1日,《網(wǎng)絡(luò)安全法》正式施行,其中第四十一條規(guī)定,網(wǎng)絡(luò)運(yùn)營者收集、使用個(gè)人信息,應(yīng)當(dāng)遵循合法、正當(dāng)、必要的原則,公開收集、使用規(guī)則,明示收集、使用信息的目的、方式和范圍,并經(jīng)被收集者同意;第四十四條規(guī)定,任何個(gè)人和組織不得竊取或者以其他非法方式獲取個(gè)人信息,不得非法出售或者非法向他人提供個(gè)人信息。
一家杭州的大數(shù)據(jù)風(fēng)控公司相關(guān)負(fù)責(zé)人對21世紀(jì)經(jīng)濟(jì)報(bào)道記者表示,“目前觀測到的市場的一些動(dòng)向和監(jiān)管的尺度,更多是在于爬蟲技術(shù)的非法使用。不注重個(gè)人隱私保護(hù),泄露信息,甚至販賣信息給涉黑暴力催收。所以賣刀沒問題,刀怎么用才是問題。”
他認(rèn)為,經(jīng)過整肅之后存活的數(shù)據(jù)公司數(shù)量會(huì)大幅減少,同時(shí)對于數(shù)據(jù)使用的規(guī)范要求會(huì)更嚴(yán)格,這會(huì)讓絕大部分的金融科技公司都或多或少受到?jīng)_擊,因?yàn)榇髷?shù)據(jù)是整個(gè)金融科技行業(yè)的基礎(chǔ)設(shè)施。
判斷爬蟲行為合法性, robot協(xié)議不可或缺
在最近的態(tài)勢下,大數(shù)據(jù)行業(yè)如今面臨強(qiáng)監(jiān)管。
一位從業(yè)人員對此表示,公民個(gè)人信息是絕對不敢爬了,那么網(wǎng)上的公開非敏感個(gè)人信息能否收集,怎樣的爬蟲行為是合法的?
對此,中國銀行法學(xué)研究會(huì)理事肖颯10月22日對21世紀(jì)經(jīng)濟(jì)報(bào)道記者表示,判斷爬蟲行為是否具有合法性,robot協(xié)議不可或缺。存在已有25年的robot協(xié)議是互聯(lián)網(wǎng)搜索引擎與網(wǎng)頁持有者之間達(dá)成的“行業(yè)規(guī)范”,該協(xié)議會(huì)告知網(wǎng)站的“訪問權(quán)限”,如果設(shè)置了robot協(xié)議,大數(shù)據(jù)公司還要突破訪問權(quán)限,那么就具有明顯的主觀惡性。
互聯(lián)網(wǎng)行業(yè)里谷歌、百度、搜狗、ebay等,均設(shè)有該協(xié)議,這幾乎是每一個(gè)互聯(lián)網(wǎng)人都知道的常識,如果公司不想被爬取信息,只需要很輕松地安放robot協(xié)議表明不愿意被爬取和收錄就可以了。
“也就是說,如果沒有robot,應(yīng)該就可以理解為可以合法爬取的公開信息。”肖颯稱。
但是近期的案例有明顯從嚴(yán)的趨勢。以某直轄市某區(qū)判決一場刑事官司為例,被告人張某、宋某、侯某共謀用技術(shù)手段(爬蟲)在某網(wǎng)站抓取視頻,放入自己所在公司網(wǎng)站上,造成被害公司人民幣2萬元的經(jīng)濟(jì)損失。2017年9月提起公訴,后三人被判非法獲取計(jì)算機(jī)信息系統(tǒng)數(shù)據(jù)罪,各自領(lǐng)刑。
同盾科技CEO蔣韜曾在對外發(fā)布的公開信《心存敬畏向善而行》中表示,人工智能及大數(shù)據(jù)的發(fā)展中的數(shù)據(jù)及隱私保護(hù)是一個(gè)世界級難題,需要監(jiān)管、企業(yè)、法律界等共同研究和探討。
[責(zé)任編輯:linlin]
標(biāo)簽: 爬蟲 大數(shù)據(jù)
宿州市埇橋區(qū)面對面幫助企業(yè)解決實(shí)際困難 增強(qiáng)企業(yè)發(fā)展信心
安徽合肥電網(wǎng)最大負(fù)荷達(dá)864.1萬千瓦打破紀(jì)錄 全力確保整體電網(wǎng)
安徽宣城努力打造安徽美食文化特色“名片” 開展校企合作培養(yǎng)人
安徽蕭縣多舉措落實(shí)放心家政暖民心行動(dòng) 推動(dòng)目標(biāo)任務(wù)落地落實(shí)
安徽全面完成今年全省夏種糧食播種 重點(diǎn)作物全面落實(shí)
安徽出臺9條措施大力支持高校畢業(yè)生筑夢江淮 引導(dǎo)加大人才招聘
前5個(gè)月安徽新材料產(chǎn)業(yè)規(guī)上產(chǎn)值同比增長14.1% 雙招雙引成果豐碩
5月份安徽新增人民幣各項(xiàng)貸款708.66億 信貸結(jié)構(gòu)不斷優(yōu)化
黑龍江出臺一系列助企紓困政策 加大承保折扣力度
黑龍江哈爾濱出臺多項(xiàng)政策“促進(jìn)四大經(jīng)濟(jì)發(fā)展” 強(qiáng)化核心共性技
安徽六安今年繼續(xù)加大農(nóng)村公路建設(shè)力度 推行鄉(xiāng)村道路專管員制度
安徽銅陵設(shè)置共計(jì)103個(gè)社區(qū)臨時(shí)蔬菜供應(yīng)點(diǎn) 方便群眾就近買菜