中文字幕在线观看,亚洲а∨天堂久久精品9966,亚洲成a人片在线观看你懂的,亚洲av成人片无码网站,亚洲国产精品无码久久久五月天

B 端大數(shù)據(jù)應用的架構實踐與思考

2018-12-04    來源:raincent

容器云強勢上線!快速搭建集群,上萬Linux鏡像隨意使用

國雙科技 技術總經理何愷鐸老師接受我們的采訪,首先請何老師簡單介紹一下自己吧。

何愷鐸:好的,大家好,我叫何愷鐸,是國雙科技的技術總經理。我們國雙科技是 05 年成立,到現(xiàn)在有十幾年的歷史,在 16 年,我們在納斯達克上市,那么在這十幾年當中,我們一直專注于做數(shù)據(jù)的分析和相關咨詢的業(yè)務,我們是一個為企業(yè)服務的公司。

問:何老師,同樣是處理大數(shù)據(jù),您認為 B 端和 C 端大數(shù)據(jù)處理的最大差異是什么,在架構實踐上需要做出怎樣的針對性調整呢?

何愷鐸:B 端和 C 端的確有比較大的一個差異,我覺得最核心的一點主要體現(xiàn)在我們的 B 端需要同時適應多個客戶的場景和需求,有的時候我們也要針對一些行業(yè)的特點去進行更高層面的抽象。這里面主要分析的抽象單位,可能有一些區(qū)別。所以在這里面,我覺得抽象以及抽象對應的實現(xiàn)是 B 端大數(shù)據(jù)的應用當中最關鍵的部分,這也是在剛才的演講當中,我們著重去剖析的那個部分。

問:那在架構實踐上需要做出哪些針對性的調整呢?

何愷鐸:我覺得主要就是針對這個多租戶的情況,以及在我們的演講當中提到的多態(tài)情況去進行比較針對性的設計,建立這樣一個以元數(shù)據(jù)配置為中心的架構體系,應該是 B 端比較顯著的特點。

問:企業(yè)在做大數(shù)據(jù)轉型的時候從哪方面切入會比較好呢?

何愷鐸:這是一個比較大的話題了,我個人的建議是,我們可以針對我們現(xiàn)在企業(yè)的業(yè)務痛點去入手,圍繞當前這個業(yè)務的痛點去分析,對于這塊相關的數(shù)據(jù)進行妥善的梳理,然后評估針對這一塊和痛點相關的業(yè)務數(shù)據(jù),能夠幫助我們去發(fā)現(xiàn)什么樣的價值,以及我們可以采取怎么樣的行動。

問:我們知道架構其實是在做一種權衡和取舍,比如在可用性、性能、準確性等方面,對于 B 端大數(shù)據(jù)應用的架構來說,哪些方面更為關鍵呢?

何愷鐸:對于 B 端來講,剛才您提到的這個我們不管是可用性還是性能,這些我覺得都是一樣的。比較有特點的,就是在 B 端來講,需要注意和成本的平衡,因為不管是人力方面還是硬件方面,我們也沒有辦法去做無盡止的投入,我們需要通過巧妙的架構的設計,能夠在我們的成本和產出之間取得一個比較好的平衡,在做 B 端大數(shù)據(jù)架構的時候的確需要著重去考慮。

問:你們在做大數(shù)據(jù)轉型的過程中曾經遇到過哪些坑嗎?如果有重新再來一次的機會,你們有沒有想到更好辦法繞過它們或解決它們?

何愷鐸:我們在很多不同的產品,不同的研發(fā)的過程當中,的確也有一些經驗和教訓,我覺得比較需要小心處理的一個點可能是關于遺留系統(tǒng)的處理,因為 B 端的特點決定了它可能會存在很多遺留的系統(tǒng),或者說系統(tǒng)老的版本,但是我們?yōu)榱吮WC客戶服務的穩(wěn)定性,我們是需要繼續(xù)對這些版本進行維護。所以我認為這里面特別要當心的,主要是在于說,對于,當我們對老版本的進行升級的時候,需要注意,它和老版本的一個兼容性,能夠保證對客戶有一個比較平滑的升級的體驗,這點是非常關鍵的。

問:根據(jù)現(xiàn)有數(shù)據(jù)去深入分析挖掘,或者基于業(yè)務去獲取數(shù)據(jù),你是如何看待這兩種方式的?

何愷鐸:我覺得通過現(xiàn)有數(shù)據(jù)去分析,它成本比較低,就是我們現(xiàn)在可以看看現(xiàn)在手頭有哪些東西,讓他去給我們一些洞察,但是這個問題沒有一個一致的答案,因為它最終還是取決于我們前面提到的業(yè)務的痛點在哪里,如果圍繞這個業(yè)務的痛點,我們最需要分析的那個方向,它的數(shù)據(jù)如果是現(xiàn)成的,當然自然是最好,如果并沒有,那我們就需要花力氣去做相關的采集、梳理和治理的工作,這個更多的是取決于我們現(xiàn)有的數(shù)據(jù)是不是和我們的業(yè)務的痛點是匹配的,更多的是圍繞業(yè)務的需求去編排、管理、收集我們的數(shù)據(jù)。

問:也就是說這兩種方式沒有絕對的好?

何愷鐸:當然,還是要事先要想清楚,你業(yè)務上想要達到什么目的,再去決定怎么樣的數(shù)據(jù)去輔助這個目的。

問:企業(yè)做大數(shù)據(jù)轉型時,是不是組織架構也需要做一定的調整?

何愷鐸:這也是一個非常好的話題,因為我們所有的事情都是和人相關的,最終由人來去落地和執(zhí)行,企業(yè)的組織架構的確會有比較大的影響,在數(shù)字化轉型過程當中,不管是程度的深淺,還是進度的快慢,的確會有很大的影響,我見過兩種方式,一種方式更多的是業(yè)務驅動,業(yè)務部門有比較明確的需求,它來驅動,但是它需要 IT 技術的相關支持。

另外一種方式我們也見過,就是更多的是公司從 IT 去主導這個事情,我們需要建立數(shù)據(jù)平臺,做這個轉型,那么它需要去聯(lián)合我們企業(yè)的其他業(yè)務部門,來達到這個目的,那么我個人的感覺,如果說我們要把這個數(shù)字化轉型做得順利和徹底,它最好需要得到企業(yè)高層的一個強而有力的支持,讓這件事情不再僅僅從單部門角度去考慮這個事情,而是自上而下,能夠在企業(yè)當中去推廣這樣的一種方法論,我覺得這樣它的阻力和它最終的這個效果就會很好,這也是為什么現(xiàn)在很多企業(yè)會設立 CDO,Chief Data Officer 這個職位的,我想一個很重要的原因,就是為了能夠自上而下去協(xié)調整個企業(yè)。

問:那在這個過程中它會對應用架構產生怎樣的影響?

何愷鐸:應用架構你指的是哪個方面的?

問:就是我們那個技術方面的。

何愷鐸:啊,就是對應的這個技術是吧?明白。我覺得它更多的,當這個組織架構梳理得比較清晰了,并且能夠形成這樣的一個自上而下的這個體系的時候,對我們的應該說是先影響到我們的產品的架構,因為產品會定義我們的組織當中的不同的角色,他們之間的分工,以及一個事情的流轉的這樣的一個方式。所以它組織架構首先會影響產品架構,產品架構就會影響我們的技術架構,是這樣一個邏輯。

問:如今圍繞大數(shù)據(jù)有很多的平臺和框架,在解決方案選型時,針對不同的業(yè)務特點是不是需要做出不同的搭配?針對不同的行業(yè),你是否有一些推薦的備選項呢?

何愷鐸:現(xiàn)在的這個應該說在大數(shù)據(jù)處理方面已經非常成熟,百花齊放的一個狀態(tài),我們有很多,可能做一件事情也有不同的框架去進行選擇,我的一個建議呢,是可以根據(jù)我們企業(yè)現(xiàn)在的人才的一個情況,我們對于哪一塊比較熟悉,哪一種方式,我們比較駕輕就熟,那么這樣呢,我們可能能夠花比較少的時間在學習上,而是能夠更多的專注在業(yè)務問題的解決上面,這是我的一個建議,另外一個建議呢,可能尤其是對于很多傳統(tǒng)企業(yè)來講,會推薦使用云端的一些和大數(shù)據(jù)相關的一些框架和技術的。因為在云端我們很方便的,一方面能夠使用到公有云廠商自己提供的實時處理,或者大數(shù)據(jù)批量處理的一些解決方案,使用的門檻并不高,另一方面,這些云也都會提供開源社區(qū)比較標準的,開源體系下面大數(shù)據(jù)處理方案,并且它會隨著這個技術的趨勢,它可以不斷的往里面去增添新的東西,某種程度上來講跟著云廠商的節(jié)奏對企業(yè)來講是一個不錯的選擇。

問:那最后你可以展望一下大數(shù)據(jù)的未來的發(fā)展,你覺得它雖然現(xiàn)在很火,那它是否真的實現(xiàn)落地,然后真的有未來?

何愷鐸:我覺得將來會是這樣的一個狀態(tài),我們也許不會再去反復的強調說 Big Data 這個詞,而是它會潤物細無聲的,就是自然而然的成為我們生活、業(yè)務、企業(yè)當中一個很自然的組成部分,它會無處不在,所以呢,當然它的未來是會前景是非常好的。

問:那您認為未來會影響大數(shù)據(jù)最大的關鍵因素是什么?技術還是資本,或者說國家層面的一些政策?

何愷鐸:一方面是技術,因為在技術上,我們還是可以看到它有一些很明顯的趨勢,比如說我們的實時和這種批處理的方式在不斷的融合,比如說它的易用性,它的這個使用的門檻也越來越降低,所以這是技術方面的趨勢,至于說未來,我覺得它的確也會受到政策的影響,因為我們也看到這個現(xiàn)在我們對于數(shù)據(jù)的保護,這個意識越來越強,像歐盟有 GDPR 的標準,我覺得中國也有我們的網絡安全和數(shù)據(jù)保護相關的法律條例,我覺得我們同時的確也需要對數(shù)據(jù)有敬畏之心,那么在一些應用的場合也要,有一些地方要保證合理的克制,比如在廣告的領域,我們可能會對我們的用戶的 ID,設備的 ID,一定要做非常小心的處理,避免它的濫用。

問:以上就是我們今天的采訪,非常感謝何老師,謝謝。

何愷鐸:謝謝!

來源:InfoQ

標簽: 安全 處理大數(shù)據(jù) 大數(shù)據(jù) 大數(shù)據(jù)處理 大數(shù)據(jù)的應用 大數(shù)據(jù)架構 大數(shù)據(jù)應用 公有云 推廣 網絡 網絡安全 轉型

版權申明:本站文章部分自網絡,如有侵權,請聯(lián)系:west999com@outlook.com
特別注意:本站所有轉載文章言論不代表本站觀點!
本站所提供的圖片等素材,版權歸原作者所有,如需使用,請與原作者聯(lián)系。

上一篇:玩轉TensorFlow?你需要知道這30功能

下一篇:從大數(shù)據(jù)到AI:AI的現(xiàn)狀和未來