中文字幕在线观看,亚洲а∨天堂久久精品9966,亚洲成a人片在线观看你懂的,亚洲av成人片无码网站,亚洲国产精品无码久久久五月天

大數(shù)據(jù)公司接連被查,爬蟲技術(shù)惹的禍?

2019-10-29    來源:raincent

容器云強(qiáng)勢(shì)上線!快速搭建集群,上萬Linux鏡像隨意使用

2019年,大數(shù)據(jù)行業(yè)迎來了“大清洗”。

今年3月以來,北京、上海、深圳、杭州等地大數(shù)據(jù)公司被查消息陸續(xù)傳出。這些地區(qū)監(jiān)管部門與警方正加大對(duì)行業(yè)亂象整治力度,十余家大數(shù)據(jù)公司或被查、暫停業(yè)務(wù),或被警方帶走配合調(diào)查。

2019年大數(shù)據(jù)公司被查事件回顧

10月21日,“51信用卡”位于杭州西溪谷的辦公地點(diǎn)被警方調(diào)查。該公司于2018年香港主板上市,天眼查數(shù)據(jù)顯示,51信用卡的運(yùn)營(yíng)主體為杭州恩牛網(wǎng)絡(luò)技術(shù)有限公司,業(yè)務(wù)涵蓋個(gè)人信用管理服務(wù)、信用卡科技服務(wù)、線上信貸撮合及投資服務(wù)。

 

 

截至發(fā)稿時(shí),警方除了通報(bào)其涉嫌尋釁滋事等犯罪外,并未透露太多被查原因,但多位業(yè)內(nèi)人士猜測(cè)可能還與爬蟲程序不正當(dāng)獲取用戶信息有關(guān)。這一猜測(cè)主要來源于在21日當(dāng)天,一封某銀行致51信用卡公司的函件,該函件稱,該行技術(shù)監(jiān)控發(fā)現(xiàn),51信用卡通過爬蟲程序?qū)υ撔杏脩粜畔⑦M(jìn)行抓取,但51信用卡并未與銀行簽署授權(quán)書、同意書或默認(rèn)其獲取用戶個(gè)人信息。

9月26日,有媒體報(bào)道知名大數(shù)據(jù)公司同盾科技有限公司爬蟲類產(chǎn)品“數(shù)聚魔盒”負(fù)責(zé)人被查。9月27日,同盾科技發(fā)表公開聲明回應(yīng)此事,稱“為配合警方調(diào)查曾經(jīng)服務(wù)的某第三方單位,杭州信川(即“杭州信川科技有限公司”)及有關(guān)人員正積極協(xié)助警方調(diào)查取證,以協(xié)助相關(guān)部門查清該第三方單位的情況。”

公開資料顯示,數(shù)聚魔盒運(yùn)營(yíng)主體為杭州信川科技有限公司,成立于2016年5月,同盾控股有限公司為全資控股股東。數(shù)聚魔盒以“爬取互聯(lián)網(wǎng)公開數(shù)據(jù)+打通同盾體系內(nèi)數(shù)據(jù)+用戶授權(quán)數(shù)據(jù)采集”交叉關(guān)聯(lián)的形式,通過用戶授權(quán),利用網(wǎng)頁極速抓取技術(shù)獲取各類用戶個(gè)人數(shù)據(jù),通過海量數(shù)據(jù)比對(duì)和分析,交叉驗(yàn)證,最終為各類機(jī)構(gòu)提供用戶的風(fēng)險(xiǎn)分析判斷。

9月11日,公信寶運(yùn)營(yíng)公司杭州存信數(shù)據(jù)科技有限公司辦公室被杭州市公安局西湖分局古蕩派出所查封。據(jù)了解,公信寶成立于2016年,是一家以區(qū)塊鏈為核心技術(shù)的數(shù)據(jù)科技公司。根據(jù)公信寶官網(wǎng),公信寶為全球數(shù)據(jù)經(jīng)濟(jì)服務(wù),并開發(fā)了一條名為公信鏈(GXChain)的底層基礎(chǔ)鏈,旨在提供企業(yè)間、個(gè)人間、企業(yè)與個(gè)人之間的數(shù)據(jù)交易/交換服務(wù)。從公信寶合作方看,公信寶所售出的個(gè)人信息大規(guī)模流向網(wǎng)絡(luò)借貸領(lǐng)域,而這些信息數(shù)據(jù)來源除了頂著挖礦的名義獲取外,公信寶還通過爬蟲途徑來獲得用戶隱私數(shù)據(jù)。

9月12日上午,據(jù)業(yè)內(nèi)人士爆料,中國(guó)電信控股的子公司天翼征信的總經(jīng)理、副總經(jīng)理以及市場(chǎng)人員約十人被警方帶走。據(jù)內(nèi)部員工透露:“因?yàn)槲覀兏懊鎯杉冶徽{(diào)查的爬蟲公司有合作,去主動(dòng)說明情況。”

9月6日,杭州魔蝎數(shù)據(jù)科技有限公司疑似被相關(guān)執(zhí)法人員控制,與此同時(shí),魔蝎科技為合作方提供的服務(wù)已經(jīng)停止,官網(wǎng)也無法登陸。但到目前為止警方尚未披露相關(guān)信息。相關(guān)資料顯示,魔蝎科技成立于2016年,是國(guó)內(nèi)大數(shù)據(jù)智能風(fēng)控服務(wù)供應(yīng)商,主要業(yè)務(wù)包括提供精準(zhǔn)營(yíng)銷模型、反欺詐、多維度用戶畫像、授信評(píng)分、貸后預(yù)警、催收智能運(yùn)籌等全面風(fēng)險(xiǎn)管理服務(wù)。

 

 

同日,多方消息稱,上海新顏人工智能科技有限公司CEO黃向前被帶走,新顏科技人士表示,協(xié)助調(diào)查是因?yàn)榕c其合作的一家持牌網(wǎng)貸平臺(tái)涉及暴力催收問題,新顏科技本身的業(yè)務(wù)并未受影響。據(jù)官方網(wǎng)站信息顯示,新顏科技通過云計(jì)算、機(jī)器學(xué)習(xí)等技術(shù),逐步打造了以人工智能為核心的先進(jìn)技術(shù)體系,向銀行、保險(xiǎn)、證券、基金理財(cái)、社交平臺(tái)、電商、共享平臺(tái)等多個(gè)行業(yè)進(jìn)行定制化的產(chǎn)品設(shè)計(jì)與應(yīng)用開發(fā)。

4月22日,北京海淀公安在官方微信公號(hào)上披露,招聘信息創(chuàng)業(yè)公司巧達(dá)科技(北京)有限公司王某某等36人因非法獲取計(jì)算機(jī)信息系統(tǒng)數(shù)據(jù),已被檢察機(jī)關(guān)依法批準(zhǔn)逮捕,其中王某某曾多次被公安機(jī)關(guān)處理。公開資料顯示,巧達(dá)科技成立于2014年7月,號(hào)稱擁有中國(guó)最大的簡(jiǎn)歷數(shù)據(jù)庫。據(jù)北京警方披露,巧達(dá)科技公司在未經(jīng)授權(quán)的情況下,通過利用大量代理IP地址、偽造設(shè)備標(biāo)識(shí)等技術(shù)手段,繞過某公司服務(wù)器防護(hù)策略,大量惡意竊取放在服務(wù)器上的用戶數(shù)據(jù)。在竊取過程中,由于傳輸數(shù)據(jù)量過大,還曾導(dǎo)致該公司的服務(wù)器數(shù)十次中斷服務(wù),影響上千萬用戶正常訪問,給其帶來了嚴(yán)重的經(jīng)濟(jì)損失。

以上只是部分公開報(bào)道的大數(shù)據(jù)被查公司事件,從中可以看出,國(guó)家以及各地相關(guān)部門對(duì)大數(shù)據(jù)行業(yè)的監(jiān)管力度在逐步加大,整頓態(tài)勢(shì)趨嚴(yán)。

 

 

公司被查,“爬蟲業(yè)務(wù)”成為導(dǎo)火線

隨著市場(chǎng)對(duì)于數(shù)據(jù)服務(wù)的需求逐漸增大,數(shù)據(jù)就成為了某些公司的主要盈利工具。但數(shù)據(jù)從何而來?

據(jù)中國(guó)互聯(lián)網(wǎng)絡(luò)信息中心(CNNIC)發(fā)布的第44次《中國(guó)互聯(lián)網(wǎng)絡(luò)發(fā)展?fàn)顩r統(tǒng)計(jì)報(bào)告》顯示,截至2019年6月,我國(guó)網(wǎng)民規(guī)模達(dá)8.54億人,這些人無時(shí)無刻都在“生產(chǎn)”數(shù)據(jù),各個(gè)方面的數(shù)據(jù)不斷在匯集。正是有了這些數(shù)據(jù),讓某些“大數(shù)據(jù)公司”看到了商機(jī)。

互聯(lián)網(wǎng)平臺(tái)上的數(shù)據(jù)有些是公開的,也有非公開的,但只要通過網(wǎng)絡(luò)爬蟲技術(shù),獲取這些數(shù)據(jù)并不難。而且,在這個(gè)競(jìng)爭(zhēng)激烈的市場(chǎng)環(huán)境下,如果有人提供所需要數(shù)據(jù),不用就是“損失”。所以,供需方市場(chǎng)條件已經(jīng)滿足的情況下,這條產(chǎn)業(yè)鏈逐漸形成,其中不凡有許多正規(guī)持牌金融機(jī)構(gòu)、咨詢公司等也參與使用第三方數(shù)據(jù)公司通過各種渠道抓取的用戶數(shù)據(jù)。

網(wǎng)絡(luò)爬蟲技術(shù)成為第三方數(shù)據(jù)公司獲取網(wǎng)絡(luò)數(shù)據(jù)信息的基礎(chǔ)工具,而伴隨“爬蟲業(yè)務(wù)”而來便是數(shù)據(jù)竊取、泄露、濫用等問題。從這些被查大數(shù)據(jù)公司可以看出,大部分公司與爬蟲業(yè)務(wù)及違規(guī)抓取、販賣個(gè)人隱私數(shù)據(jù)、助力暴力催收等有關(guān)。

據(jù)了解,網(wǎng)絡(luò)爬蟲又稱為網(wǎng)頁蜘蛛或網(wǎng)絡(luò)機(jī)器人,是一種按照一定的規(guī)則,自動(dòng)地抓取萬維網(wǎng)信息的程序或者腳本。網(wǎng)絡(luò)爬蟲技術(shù)并不難,而且爬蟲技術(shù)本身是中性的,關(guān)鍵在于是否合規(guī)使用。也正是數(shù)據(jù)獲取與使用的門檻較低,大量不具備基本從業(yè)素質(zhì)、缺乏風(fēng)險(xiǎn)意識(shí)的企業(yè)參與到了這場(chǎng)大數(shù)據(jù)發(fā)展浪潮中,過度依賴“數(shù)據(jù)采集”進(jìn)行無序競(jìng)爭(zhēng)。

因?yàn)榇舜涡袠I(yè)整頓的影響,目前部分依賴于“數(shù)據(jù)采集”的公司主動(dòng)或被動(dòng)地關(guān)停了爬蟲業(yè)務(wù)。而且,此番嚴(yán)查仍在繼續(xù),有些抱著僥幸心理繼續(xù)觸碰法律紅線的企業(yè),相信也不會(huì)逍遙太久。

 

 

大數(shù)據(jù)行業(yè)發(fā)展需及時(shí)“止痛”

大數(shù)據(jù)是一個(gè)新興行業(yè),具有良好的發(fā)展和應(yīng)用前景,但它所存在的一些痛點(diǎn)問題正在阻礙其健康發(fā)展,相關(guān)部門的此番監(jiān)管行動(dòng)無疑是在為大數(shù)據(jù)行業(yè)及時(shí)“止痛”。

目前,行業(yè)內(nèi)除了被查的大數(shù)據(jù)公司,很多涉及數(shù)據(jù)業(yè)務(wù)的公司也存在或多或少的問題。比如,墨跡科技IPO被否,證監(jiān)會(huì)明確指出該公司關(guān)于經(jīng)營(yíng)資質(zhì)、收益用戶數(shù)據(jù)、收入來源單一、關(guān)聯(lián)客戶等四大問題。另外,也還存在其他一些比較典型的行業(yè)痛點(diǎn)問題需要引起重視。

首先,技術(shù)應(yīng)用的邊界問題被忽視。數(shù)據(jù)成為新的生產(chǎn)資料和無形資產(chǎn),企業(yè)要想在大數(shù)據(jù)時(shí)代領(lǐng)先,需要多方合作獲取更多的數(shù)據(jù)。而部分大數(shù)據(jù)公司,尤其是創(chuàng)業(yè)公司,因?yàn)闆]有原始數(shù)據(jù)的積累,也沒有可產(chǎn)生數(shù)據(jù)的業(yè)務(wù)或產(chǎn)品支撐,選擇通過購(gòu)買或者運(yùn)用相關(guān)技術(shù)竊取他人隱私信息,忽略技術(shù)應(yīng)用邊界問題,碰觸法律紅線,甚至在各種變現(xiàn)的壓力下,不惜成為信息販子。

其次,數(shù)據(jù)歸屬權(quán)不明確,數(shù)據(jù)共享和交易工作推進(jìn)受阻。數(shù)據(jù)應(yīng)用過程中,涉及其所有權(quán)、隱私權(quán)等,其中所有權(quán)問題最為模糊。數(shù)據(jù)到底歸誰所有?是至今一直沒有明確答案的命題,這讓部分?jǐn)?shù)據(jù)在使用過程中無法被界定是否構(gòu)成侵權(quán),容易出現(xiàn)數(shù)據(jù)濫用的情況。

數(shù)據(jù)共享可以加強(qiáng)企業(yè)間的聯(lián)合,可以加快數(shù)據(jù)與產(chǎn)業(yè)的融合,可以促進(jìn)產(chǎn)業(yè)優(yōu)化升級(jí)。同時(shí),如果交換數(shù)據(jù)權(quán),數(shù)據(jù)整合會(huì)更加完善。目前,我國(guó)除了部分地區(qū)政府部門建立政府?dāng)?shù)據(jù)共享交換平臺(tái),推動(dòng)政府?dāng)?shù)據(jù)陸續(xù)得到有效應(yīng)用外,各地所成立的大數(shù)據(jù)交易企業(yè)或平臺(tái)幾乎沒有太明顯的工作推進(jìn)成效,其原因包括企業(yè)要保護(hù)商業(yè)機(jī)密不愿意交易自身數(shù)據(jù)、企業(yè)交易機(jī)制不健全、法律法規(guī)不完善等。

再次,數(shù)據(jù)安全保障工作意識(shí)薄弱,專業(yè)人才短缺。公民個(gè)人信息經(jīng)常在網(wǎng)上被以白菜價(jià)格倒賣;多數(shù)企業(yè)數(shù)據(jù)中心安全防護(hù)措施薄弱,被惡意攻擊、內(nèi)鬼泄露等問題大量存在。主要因?yàn)榇蠹覍?duì)個(gè)人用戶、密碼以及相關(guān)數(shù)據(jù)保護(hù)意識(shí)不足,企業(yè)對(duì)于數(shù)據(jù)安全的保障工作往往處于被動(dòng)狀態(tài)。此外,我國(guó)大數(shù)據(jù)產(chǎn)業(yè)人才培養(yǎng)體系處于建立初期,在短期內(nèi)專業(yè)人才供不應(yīng)求,限制了大數(shù)據(jù)產(chǎn)業(yè)創(chuàng)新發(fā)展的成效。

寫在最后

解決行業(yè)發(fā)展痛點(diǎn)刻不容緩,但大數(shù)據(jù)行業(yè)的發(fā)展也不會(huì)因?yàn)椴糠止颈徽{(diào)查而潰不成軍。發(fā)展大數(shù)據(jù),最終目的是與各個(gè)行業(yè)深度融合,促進(jìn)各行業(yè)各領(lǐng)域轉(zhuǎn)型升級(jí),并建立良好的產(chǎn)業(yè)生態(tài)。這是一個(gè)需要慢慢探索和推進(jìn)的過程,如果想要在這個(gè)風(fēng)口上投機(jī)取巧,牟取暴利,最終只會(huì)害人害己。

合法合規(guī)的大數(shù)據(jù)企業(yè)一定是靠技術(shù)形成核心競(jìng)爭(zhēng)力,隨時(shí)把握好發(fā)展契機(jī),積極探索合規(guī)可行的商業(yè)模式,不斷成長(zhǎng)和壯大自己。正如暢銷書《失控》作者凱文·凱利所言,大數(shù)據(jù)會(huì)締造大公司,十年、二十年之后,在全世界最大的公司就是有最多數(shù)據(jù)、最大數(shù)據(jù)的公司。將來誰在數(shù)據(jù)方面能勝出,誰有最大的數(shù)據(jù)公司,誰就是最大的勝者。(數(shù)據(jù)觀 陳近梅)

標(biāo)簽: 大數(shù)據(jù)公司 大數(shù)據(jù)行業(yè)

版權(quán)申明:本站文章部分自網(wǎng)絡(luò),如有侵權(quán),請(qǐng)聯(lián)系:west999com@outlook.com
特別注意:本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)!
本站所提供的圖片等素材,版權(quán)歸原作者所有,如需使用,請(qǐng)與原作者聯(lián)系。

上一篇:AI人才稀缺:全面解讀數(shù)據(jù)科學(xué)家成長(zhǎng)的4個(gè)階段

下一篇:80本值得一讀的最佳數(shù)據(jù)科學(xué)書籍(二)