隨著互聯(lián)網(wǎng)及移動(dòng)互聯(lián)網(wǎng)的高速發(fā)展，傳統(tǒng)證券業(yè)也逐步走向市場(chǎng)化和網(wǎng)絡(luò)化，行業(yè)在快速變化中也面臨著激烈的競(jìng)爭(zhēng)，一方面國(guó)家監(jiān)管層面逐步放開管制，加強(qiáng)監(jiān)督，鼓勵(lì)創(chuàng)新。另一方面，證券行業(yè)內(nèi)部各公司也在不斷的與時(shí)俱進(jìn)，從經(jīng)紀(jì)、資管業(yè)務(wù)的網(wǎng)絡(luò)化，到證券版銀聯(lián)的發(fā)展，再到個(gè)性化、移動(dòng)化、社交化的客戶服務(wù)。
證券公司要在這樣競(jìng)爭(zhēng)激烈市場(chǎng)中保持領(lǐng)先地位，需要在滿足監(jiān)管層合規(guī)審計(jì)的要求下，以客戶為中心，對(duì)內(nèi)深化運(yùn)營(yíng)和服務(wù)，提高現(xiàn)有客戶體驗(yàn)和單客戶價(jià)值；對(duì)外實(shí)時(shí)了解市場(chǎng)和上市企業(yè)等信息，加強(qiáng)跨界合作，對(duì)潛在客戶精準(zhǔn)定位和營(yíng)銷。
在這樣背景下，數(shù)據(jù)成為券商提供內(nèi)外競(jìng)爭(zhēng)力的關(guān)鍵，只有及時(shí)準(zhǔn)確地獲得客戶在內(nèi)部和外部的交易、行為、媒體偏好、社交內(nèi)容的信息數(shù)據(jù)，才能更好的了解客戶，做好營(yíng)銷和服務(wù)，并不斷優(yōu)化產(chǎn)品設(shè)計(jì)和運(yùn)營(yíng)。
證券行業(yè)大數(shù)據(jù)問題及解決方案
1、哪些數(shù)據(jù)需要納入到大數(shù)據(jù)平臺(tái)上來？
證券公司內(nèi)部在經(jīng)紀(jì)業(yè)務(wù)、資管業(yè)務(wù)、投行業(yè)務(wù)和自營(yíng)業(yè)務(wù)中存在各個(gè)系統(tǒng)，例如股票交易系統(tǒng)、理財(cái)交易系統(tǒng)、用戶開戶系統(tǒng)、客服系統(tǒng)等。同時(shí)，在各個(gè)業(yè)務(wù)中又存在各種角色，如用戶、上市公司、融資方、出資方、托管行等。這些角色在各個(gè)系統(tǒng)每時(shí)每刻都在產(chǎn)生著各種結(jié)構(gòu)的數(shù)據(jù)，這些數(shù)據(jù)產(chǎn)生的不但數(shù)量大、類型多、速度快，而且可能會(huì)存在各個(gè)系統(tǒng)的不一致。
同時(shí)，在互聯(lián)網(wǎng)高速發(fā)展的今天，和證券公司相關(guān)的各個(gè)角色也在無時(shí)無刻產(chǎn)生大量的網(wǎng)絡(luò)數(shù)據(jù)，例如用戶的購物行為、媒體資訊瀏覽等，上市公司的投融資、并購活動(dòng)等。各業(yè)務(wù)形態(tài)也都在大的市場(chǎng)環(huán)境下受到影響，例如政策法規(guī)、國(guó)內(nèi)外金融形勢(shì)、重大事件等。
這些數(shù)據(jù)中哪些應(yīng)該被納入大數(shù)據(jù)平臺(tái)呢，是根據(jù)最終的業(yè)務(wù)場(chǎng)景來決定，還是將所有能獲取的數(shù)據(jù)全部納入，深入挖掘，以數(shù)據(jù)說話呢？
百分點(diǎn)的大數(shù)據(jù)理念是數(shù)據(jù)標(biāo)準(zhǔn)化和分層接入。對(duì)目前和將來可獲取的數(shù)據(jù)類型、來源進(jìn)行充分調(diào)研和理解，制定統(tǒng)一的數(shù)據(jù)接入標(biāo)準(zhǔn)、結(jié)構(gòu)化標(biāo)準(zhǔn)、歸一化標(biāo)準(zhǔn)、挖掘標(biāo)準(zhǔn)，以實(shí)現(xiàn)很好的系統(tǒng)擴(kuò)展性。根據(jù)業(yè)務(wù)需求、數(shù)據(jù)類型、范圍、來源、采集技術(shù)、實(shí)時(shí)性要求等進(jìn)行分層接入，盡量保證原始數(shù)據(jù)完整性，整合數(shù)據(jù)一致性和挖掘數(shù)據(jù)價(jià)值度。
2、如何進(jìn)行跨渠道的用戶生命周期運(yùn)營(yíng)管理？
移動(dòng)端、PC端乃至類似AppleWatch等可穿戴設(shè)備都已成為用戶數(shù)據(jù)觸點(diǎn)。股票、投資理財(cái)、投顧服務(wù)等各個(gè)業(yè)務(wù)，涉及到交易、風(fēng)控、清算等系統(tǒng)的數(shù)據(jù)都是用戶在各個(gè)觸點(diǎn)、場(chǎng)景下的痕跡，對(duì)這些數(shù)據(jù)進(jìn)行拉通和分析，可以掌握用戶在該券商所處的生命周期，從而可以有的放矢的對(duì)用戶進(jìn)行針對(duì)性運(yùn)營(yíng)。
百分點(diǎn)對(duì)用戶在各個(gè)系統(tǒng)、各個(gè)觸點(diǎn)的行為數(shù)據(jù)進(jìn)行采集，分析其瀏覽、查找、存留、訪問路徑、事件深度、到達(dá)渠道等，進(jìn)而對(duì)用戶進(jìn)行跨屏幕、跨應(yīng)用、跨系統(tǒng)的生命周期分析。
3、如何通過產(chǎn)品、資訊、投資建議的個(gè)性化推薦，提升用戶體驗(yàn)，深挖用戶？
面對(duì)越來越多的投資選擇，用戶的選擇困難癥凸現(xiàn)。如何讓用戶在最短的時(shí)間找到自己需要的產(chǎn)品、資訊乃至可靠的投資建議、選股建議呢？
建立在用戶、產(chǎn)品、資訊、服務(wù)、市場(chǎng)充分了解的基礎(chǔ)上，百分點(diǎn)強(qiáng)大的推薦引擎給用戶提供實(shí)時(shí)的“千人千面”的跨屏、跨站的個(gè)性化產(chǎn)品資訊推薦和服務(wù)。
4、如何快速精準(zhǔn)的定位和營(yíng)銷新用戶？
隨著各大券商支付系統(tǒng)的對(duì)接和完善，其業(yè)務(wù)不斷延伸到生活場(chǎng)景的支付，而且，其與時(shí)俱進(jìn)的產(chǎn)品設(shè)計(jì)也與用戶工作生活等場(chǎng)景密不可分?！鞍丫W(wǎng)民變股民”的戰(zhàn)役中，用戶在互聯(lián)網(wǎng)的各場(chǎng)景觸點(diǎn)成為競(jìng)爭(zhēng)激烈的戰(zhàn)場(chǎng)，只有買股票才被想起的券商將逐漸被淘汰。
百分點(diǎn)幫助證券客戶利用第一方DMP平臺(tái)，探知用戶觸點(diǎn)和渠道偏好，同時(shí)將DMP平臺(tái)與百分點(diǎn)線上營(yíng)銷平臺(tái)無縫對(duì)接。該平臺(tái)已成功對(duì)接了幾十家DSP、SEM、EDM、SMS等線上代理渠道，可對(duì)其進(jìn)行統(tǒng)一頻控、投放規(guī)則、素材管理、監(jiān)測(cè)和效果評(píng)估等。該平臺(tái)還為客戶提供外部數(shù)據(jù)標(biāo)簽優(yōu)化投放效果；與DSP數(shù)據(jù)對(duì)接，保護(hù)客戶信息不泄露；并將潛在客戶數(shù)據(jù)回流到第一方DMP的數(shù)據(jù)服務(wù)。
5、如何及時(shí)準(zhǔn)確地感知市場(chǎng)，保持競(jìng)爭(zhēng)力？
市場(chǎng)輿情指數(shù)，重大事件預(yù)警等對(duì)證券公司來說是非常重要的信息，需要實(shí)時(shí)監(jiān)控。
百分點(diǎn)有非常專業(yè)的輿情監(jiān)控應(yīng)用，數(shù)據(jù)來自每天實(shí)時(shí)讀取的上萬家新聞媒體網(wǎng)站的資訊內(nèi)容。通過對(duì)這些數(shù)據(jù)的熱點(diǎn)分析、敏感詞分析、輿情指數(shù)、A股新聞熱度擇時(shí)指標(biāo)NQ等計(jì)算，實(shí)時(shí)提供市場(chǎng)輿論監(jiān)控。
百分點(diǎn)券商客戶案例
客戶一：某金融集團(tuán)下屬證券公司
對(duì)于集團(tuán)型證券公司，不僅擁有自己的內(nèi)部數(shù)據(jù)，更可以在集團(tuán)的幫助下共享兄弟公司的數(shù)據(jù)，例如征信、理財(cái)?shù)葦?shù)據(jù)。從而更加完善用戶畫像，對(duì)用戶進(jìn)行更貼心的服務(wù)和更精準(zhǔn)的營(yíng)銷。
通過百分點(diǎn)所提供的用戶中心大數(shù)據(jù)平臺(tái)，充分采集各渠道用戶行為數(shù)據(jù)、本公司及兄弟公司的系統(tǒng)數(shù)據(jù)，并補(bǔ)充百分點(diǎn)的外部數(shù)據(jù)標(biāo)簽，建立自有用戶畫像體系，進(jìn)行網(wǎng)絡(luò)交易行為分析、支付分析、產(chǎn)品分析、市場(chǎng)監(jiān)控、智能產(chǎn)品推薦等典型大數(shù)據(jù)應(yīng)用，實(shí)現(xiàn)了用戶需求驅(qū)動(dòng)的產(chǎn)品企劃，優(yōu)化產(chǎn)品開發(fā)，提升用戶服務(wù)質(zhì)量。
客戶二：某中型證券公司
隨著智能移動(dòng)設(shè)備的普及，通過移動(dòng)APP為客戶提供產(chǎn)品和資訊推薦服務(wù)已經(jīng)成為各大券商爭(zhēng)相獲得用戶的主要手段。如何在APP上實(shí)現(xiàn)個(gè)性化服務(wù)，做到不同用戶的“千時(shí)千人千面”呢？
企業(yè)通過搭建百分點(diǎn)大數(shù)據(jù)底層技術(shù)平臺(tái)，建立統(tǒng)一的數(shù)據(jù)采集、整合、數(shù)據(jù)挖掘，完成統(tǒng)一數(shù)據(jù)視圖，打通多渠道、甚至多個(gè)交易APP、服務(wù)APP的用戶、產(chǎn)品和資訊數(shù)據(jù)，建立用戶、產(chǎn)品和資訊事實(shí)數(shù)據(jù)庫，從而沉淀完成用戶標(biāo)簽數(shù)據(jù)庫，建立包括個(gè)性化著陸頁、個(gè)性化產(chǎn)品和資訊推薦、個(gè)性化消息提醒、個(gè)性化投顧服務(wù)在內(nèi)的應(yīng)用場(chǎng)景，快速提高用戶的忠誠(chéng)度與用戶粘性，用數(shù)據(jù)打造券商的競(jìng)爭(zhēng)力。
在確定投資大數(shù)據(jù)解決方案之前，評(píng)估可用于分析的數(shù)據(jù)；通過分析這些數(shù)據(jù)而獲得的洞察；以及可用于定義、設(shè)計(jì)、創(chuàng)建和部署大數(shù)據(jù)平臺(tái)的資源。詢問正確的問題是一個(gè)不錯(cuò)的起點(diǎn)。使用本文中的問題將指導(dǎo)您完成調(diào)查。答案將揭示該數(shù)據(jù)和您嘗試解決的問題的更多特征。
盡管組織一般情況對(duì)需要分析的數(shù)據(jù)類型有一些模糊的理解，但具體的細(xì)節(jié)很可能并不清晰。畢竟，數(shù)據(jù)可能具有之前未發(fā)現(xiàn)的模式的關(guān)鍵，一旦識(shí)別了一種模式，對(duì)額外分析的需求就會(huì)變得很明顯。要幫助揭示這些未知的未知信息，首先需要實(shí)現(xiàn)一些基本用例，在此過程中，可以收集以前不可用的數(shù)據(jù)。構(gòu)建數(shù)據(jù)存儲(chǔ)庫并收集更多數(shù)據(jù)后，數(shù)據(jù)科學(xué)家就能夠更好地確定關(guān)鍵的數(shù)據(jù)，更好地構(gòu)建將生成更多洞察的預(yù)測(cè)和統(tǒng)計(jì)模型。
組織可能也已知道它有哪些信息是不知道的。要解決這些已知的未知，組織首先必須與數(shù)據(jù)科學(xué)家合作，識(shí)別外部或第三方數(shù)據(jù)源，實(shí)現(xiàn)一些依賴于此外部數(shù)據(jù)的用例。
本文首先嘗試回答大多數(shù) CIO 在實(shí)施大數(shù)據(jù)舉措之前通常會(huì)提出的問題，然后，本文將重點(diǎn)介紹一種將幫助評(píng)估大數(shù)據(jù)解決方案對(duì)組織的可行性的基于維度的方法。
我的大數(shù)據(jù)問題是否需要大數(shù)據(jù)解決方案？
大數(shù)據(jù)，曾幾何時(shí)似乎很少出現(xiàn)
組織多半會(huì)選擇以增量方式實(shí)現(xiàn)大數(shù)據(jù)解決方案。不是每個(gè)分析和報(bào)告需求都需要大數(shù)據(jù)解決方案。如果對(duì)于對(duì)大型數(shù)據(jù)集或來自多個(gè)數(shù)據(jù)源的臨時(shí)報(bào)告執(zhí)行并行處理的項(xiàng)目，那么可能沒有必要使用大數(shù)據(jù)解決方案。
隨著大數(shù)據(jù)技術(shù)的到來，組織會(huì)問自己：“大數(shù)據(jù)是否是我的業(yè)務(wù)問題的正確解決方案，或者它是否為我提供了業(yè)務(wù)機(jī)會(huì)？”大數(shù)據(jù)中是否隱藏著業(yè)務(wù)機(jī)會(huì)？以下是我從 CIO 那里聽到的一些典型問題：
如果我使用大數(shù)據(jù)技術(shù)，可能會(huì)獲得何種洞察和 業(yè)務(wù)價(jià)值？
它是否可以擴(kuò)充我 現(xiàn)有的數(shù)據(jù)倉庫？
我如何評(píng)估 擴(kuò)展當(dāng)前環(huán)境 或采用新解決方案的成本？
對(duì)我現(xiàn)有的 IT 治理 有何影響？
我能否 以增量方式實(shí)現(xiàn) 大數(shù)據(jù)解決方案？
我需要掌握哪些 具體的技能 來理解和分析構(gòu)建和維護(hù)大數(shù)據(jù)解決方案的需求？
我的 現(xiàn)有企業(yè)數(shù)據(jù) 能否用于提供業(yè)務(wù)洞察？
來自各種來源的 數(shù)據(jù)的復(fù)雜性 在不斷增長(zhǎng)。大數(shù)據(jù)解決方案對(duì)我有幫助嗎？
維度可幫助評(píng)估大數(shù)據(jù)解決方案的可行性
為了回答這些問題，本文提出了一種依據(jù)下圖中所示的維度來評(píng)估大數(shù)據(jù)解決方案的可行性的結(jié)構(gòu)化方法。
來自可通過分析數(shù)據(jù)獲得的洞察的業(yè)務(wù)價(jià)值
針對(duì)新數(shù)據(jù)來源和數(shù)據(jù)使用方式的治理考慮因素
擁有相關(guān)技能和贊助商的承諾的人員
捕獲的數(shù)據(jù)量
各種各樣的數(shù)據(jù)源、數(shù)據(jù)類型和數(shù)據(jù)格式
生成數(shù)據(jù)的速度，需要對(duì)它執(zhí)行操作的速度，或者它更改的速度
數(shù)據(jù)的真實(shí)性，或者數(shù)據(jù)的不確定性和可信賴性
對(duì)于每個(gè)維度，我們都給出了一些關(guān)鍵問題。依據(jù)業(yè)務(wù)上下文，為每個(gè)維度分配一個(gè)權(quán)重和優(yōu)先級(jí)。評(píng)估會(huì)因業(yè)務(wù)案例和組織的不同而有所不同。您可以考慮在與相關(guān)的業(yè)務(wù)和 IT 利益相關(guān)者召開的一系列研討會(huì)中探討這些問題。
業(yè)務(wù)價(jià)值：可通過大數(shù)據(jù)技術(shù)獲取何種洞察？
許多組織想知道，他們?cè)趯ふ业臉I(yè)務(wù)洞察能否通過大數(shù)據(jù)解決方案解決。沒有權(quán)威的指南能夠用來定義可從大數(shù)據(jù)獲取的洞察。具體場(chǎng)景需要由組織識(shí)別，而且這些場(chǎng)景在不斷演變。在確定和識(shí)別在實(shí)現(xiàn)后會(huì)給企業(yè)帶來重大價(jià)值的業(yè)務(wù)用例和場(chǎng)景的過程中，數(shù)據(jù)科學(xué)家起著至關(guān)重要的作用。
數(shù)據(jù)科學(xué)家必須能夠理解關(guān)鍵績(jī)效指標(biāo)，對(duì)數(shù)據(jù)應(yīng)用統(tǒng)計(jì)算法和復(fù)雜算法來獲得一個(gè)用例列表。用例因行業(yè)和業(yè)務(wù)不同而有所不同。研究市場(chǎng)競(jìng)爭(zhēng)對(duì)手的行動(dòng)、發(fā)揮作用的市場(chǎng)力量，以及客戶在尋找什么，會(huì)很有幫助。下表給出了來自各行各業(yè)的用例示例。
行業(yè)示例用例
電子商務(wù)和在線零售電子零售商（比如 eBay）在不斷創(chuàng)建針對(duì)性產(chǎn)品來提高客戶終生價(jià)值 (CLV)；提供一致的跨渠道客戶體驗(yàn)；從銷售、營(yíng)銷和其他來源收獲客戶線索；并持續(xù)優(yōu)化后端流程。
公用事業(yè)公司現(xiàn)在正利用 Hadoop 集群來分析分析發(fā)電（供應(yīng)）和電力消耗（需求）數(shù)據(jù)。
智慧儀表的采用導(dǎo)致前所未有的數(shù)據(jù)流洶涌而來。大多數(shù)公用事業(yè)公司都未做好充分準(zhǔn)備在開啟儀表后分析該數(shù)據(jù)。
媒體在有線行業(yè)，大型有線運(yùn)營(yíng)商（比如 Time Warner、Comcast 和 Cox Communications）每天都可以使用大數(shù)據(jù)來分析機(jī)頂盒數(shù)據(jù)?？梢岳么藬?shù)據(jù)來調(diào)整廣告或促銷活動(dòng)。
雜項(xiàng)
潛在的客戶正在社交網(wǎng)絡(luò)和評(píng)論站點(diǎn)上生成大量新數(shù)據(jù)。在企業(yè)內(nèi)，隨著客戶切換到在線渠道來執(zhí)行業(yè)務(wù)和與公司交互，交易數(shù)據(jù)和 Web 日志與日俱增。
確定數(shù)據(jù)的優(yōu)先級(jí)
首先為企業(yè)內(nèi)存在的數(shù)據(jù)創(chuàng)建一個(gè)清單。識(shí)別內(nèi)部系統(tǒng)和應(yīng)用程序中存在的數(shù)據(jù)以及從第三方傳入的數(shù)據(jù)。如果業(yè)務(wù)問題可使用現(xiàn)有數(shù)據(jù)解決，那么有可能不需要使用來自外部來源的數(shù)據(jù)。
請(qǐng)考慮構(gòu)建一個(gè)大數(shù)據(jù)解決方案的成本，并權(quán)衡它與帶給業(yè)務(wù)部門的新洞察的價(jià)值。
在有關(guān)現(xiàn)有客戶的歸檔數(shù)據(jù)的上下文中分析此新數(shù)據(jù)時(shí)，業(yè)務(wù)人員將獲得對(duì)新業(yè)務(wù)機(jī)會(huì)的洞察。
主要滿足以下條件，大數(shù)據(jù)可提供可行的解決方案：
從數(shù)據(jù)中開發(fā)的洞察所生成的價(jià)值，值得在大數(shù)據(jù)解決方案中投入的資本成本
面向客戶的場(chǎng)景可證明來自洞察的潛在價(jià)值
評(píng)估通過大數(shù)據(jù)解決方案獲取的業(yè)務(wù)價(jià)值時(shí)，請(qǐng)考慮您當(dāng)前的環(huán)境是否可擴(kuò)展并權(quán)衡此投資的成本。
我當(dāng)前的環(huán)境能否擴(kuò)展？
詢問以下問題，確定您能否擴(kuò)充現(xiàn)有的數(shù)據(jù)倉庫平臺(tái)？
當(dāng)前的數(shù)據(jù)集是否非常大，是否達(dá)到了 TB 或 PB 數(shù)量級(jí)？
現(xiàn)有的倉庫環(huán)境是否包含生成或獲取的所有 數(shù)據(jù)的存儲(chǔ)庫？
是否有大量冷數(shù)據(jù)或人們很少接觸的數(shù)據(jù)未分析，可以通過分析這些數(shù)據(jù)獲得業(yè)務(wù)洞察？
您是否需要丟棄數(shù)據(jù)，因?yàn)闊o法存儲(chǔ)或處理它？
您是否希望能夠在復(fù)雜且大量的數(shù)據(jù)上執(zhí)行數(shù)據(jù)探索？
您是否希望能夠?qū)Ψ遣僮鲾?shù)據(jù)執(zhí)行分析？
您是否有興趣使用數(shù)據(jù)執(zhí)行傳統(tǒng)和新類型的分析？
您是否試圖延遲對(duì)現(xiàn)有數(shù)據(jù)倉庫的升級(jí)？
您是否在尋求途徑降低執(zhí)行分析的總體成本？
如果任何這些問題的答案是 “是”，那么您就可以探索擴(kuò)充現(xiàn)有數(shù)據(jù)倉庫環(huán)境的方式。
擴(kuò)展我當(dāng)前的環(huán)境的成本是多少？
擴(kuò)展現(xiàn)有數(shù)據(jù)倉庫平臺(tái)或 IT 環(huán)境與實(shí)現(xiàn)大數(shù)據(jù)解決方案的成本和可行性取決于：
現(xiàn)有工具和技術(shù)
現(xiàn)有系統(tǒng)的可伸縮性
現(xiàn)有環(huán)境的處理能力
現(xiàn)有平臺(tái)的存儲(chǔ)能力
執(zhí)行的治理和策略
現(xiàn)有 IT 應(yīng)用程序的異構(gòu)性
組織中存在的技術(shù)和業(yè)務(wù)技能。
它還依賴于將從新數(shù)據(jù)來源收集的數(shù)據(jù)量、業(yè)務(wù)用例的復(fù)雜性、處理的分析復(fù)雜性，以及獲取數(shù)據(jù)和擁有恰當(dāng)技能集的人員的成本?，F(xiàn)有的資源池能否開發(fā)新的大數(shù)據(jù)技能，或者是否可從外部雇傭擁有稀缺技能的人員？
請(qǐng)注意，大數(shù)據(jù)舉措會(huì)對(duì)其他正在實(shí)施的項(xiàng)目產(chǎn)生影響。從新的來源獲取數(shù)據(jù)具有很高的成本。您首先應(yīng)當(dāng)識(shí)別系統(tǒng)和應(yīng)用程序內(nèi)部存在的數(shù)據(jù)，以及目前收到的第三方數(shù)據(jù)，這一點(diǎn)很重要。如果業(yè)務(wù)問題可以使用現(xiàn)有數(shù)據(jù)解決，那么有可能不需要使用來自外部來源的數(shù)據(jù)。
在生成新工具和應(yīng)用程序之前，請(qǐng)?jiān)u估組織的應(yīng)用程序組合。例如，一個(gè)普通的 Hadoop 平臺(tái)可能無法滿足您的需求，您可能必須購買專業(yè)的工具?；蛘呦鄬?duì)而言，Hadoop 的商業(yè)版本對(duì)當(dāng)前用例而言可能很昂貴，但可能需要用作長(zhǎng)期投資來支持一個(gè)戰(zhàn)略性的大數(shù)據(jù)平臺(tái)?？紤]大數(shù)據(jù)工具和技術(shù)需要的基礎(chǔ)架構(gòu)、硬件、軟件和維護(hù)的成本。
對(duì)數(shù)據(jù)的治理和控制：對(duì)現(xiàn)有的 IT 治理有何影響？
在決定是否實(shí)現(xiàn)一個(gè)大數(shù)據(jù)平臺(tái)時(shí)，組織可能會(huì)查看新數(shù)據(jù)源和新的數(shù)據(jù)元素類型，而這些信息當(dāng)前的所有權(quán)尚未明確定義。一些行業(yè)制度會(huì)約束組織獲取和使用的數(shù)據(jù)。例如，在醫(yī)療行業(yè)，通過訪問患者數(shù)據(jù)來從中獲取洞察是否合法？類似的規(guī)則約束著所有行業(yè)。除了 IT 治理問題之外，組織的業(yè)務(wù)流程可能也需要重新定義和修改，讓組織能夠獲取、存儲(chǔ)和訪問外部數(shù)據(jù)。
請(qǐng)?jiān)谀那闆r的上下文中考慮以下治理相關(guān)問題：
安全性和隱私— 為了與當(dāng)?shù)胤ㄒ?guī)一致，解決方案可以訪問哪些數(shù)據(jù)？可以存儲(chǔ)哪些數(shù)據(jù)？哪些數(shù)據(jù)應(yīng)在移動(dòng)過程中加密？靜止數(shù)據(jù)呢？誰可以查看原始數(shù)據(jù)和洞察？
數(shù)據(jù)的標(biāo)準(zhǔn)化— 是否有標(biāo)準(zhǔn)約束數(shù)據(jù)？數(shù)據(jù)是否具有專用的格式？是否有部分?jǐn)?shù)據(jù)為非標(biāo)準(zhǔn)格式？
數(shù)據(jù)可用的時(shí)段— 數(shù)據(jù)在一個(gè)允許及時(shí)采取操作的時(shí)段是否可用？
數(shù)據(jù)的所有權(quán)— 誰擁有該數(shù)據(jù)？解決方案是否擁有適當(dāng)?shù)脑L問權(quán)和權(quán)限來使用數(shù)據(jù)？
允許的用法：允許如何使用該數(shù)據(jù)？
我能否增量地實(shí)現(xiàn)大數(shù)據(jù)解決方案？
大數(shù)據(jù)解決方案可以采用增量方式實(shí)現(xiàn)。明確地定義業(yè)務(wù)問題的范圍，并以可度量的方式設(shè)置預(yù)期的業(yè)務(wù)收入提升，這樣做會(huì)很有幫助。
對(duì)于基礎(chǔ)業(yè)務(wù)案例，請(qǐng)仔細(xì)列出問題的范圍和解決方案帶來的預(yù)期收益。如果該范圍太小，業(yè)務(wù)收益將無法實(shí)現(xiàn)，如果范圍太大，獲得資金和在恰當(dāng)?shù)钠谙迌?nèi)完成項(xiàng)目就會(huì)很有挑戰(zhàn)性。在項(xiàng)目的第一次迭代中定義核心功能，以便能夠輕松地贏得利益相關(guān)者的信任。
人員：是否已有恰當(dāng)?shù)募寄懿⒄{(diào)整了合適的人員？
需要特定的技能來理解和分析需求，并維護(hù)大數(shù)據(jù)解決方案。這些技能包括行業(yè)知識(shí)、領(lǐng)域?qū)ｉL(zhǎng)，以及有關(guān)大數(shù)據(jù)工具和技術(shù)的技術(shù)知識(shí)。擁有建模、統(tǒng)計(jì)、分析和數(shù)學(xué)方面的專業(yè)經(jīng)驗(yàn)的數(shù)據(jù)科學(xué)家，是任何大數(shù)據(jù)舉措成功的關(guān)鍵。
在實(shí)施一個(gè)新的大數(shù)據(jù)項(xiàng)目之前，確保已安排了合適的人員：
您是否獲得利益相關(guān)者和其他愿意投資該項(xiàng)目的業(yè)務(wù)贊助者的支持？
是否擁有熟悉該領(lǐng)域、能分析大量數(shù)據(jù)、而且能識(shí)別從數(shù)據(jù)生成有意義且有用的洞察的途徑的數(shù)據(jù)科學(xué)家？
是否擁有可用于獲取洞察的現(xiàn)有數(shù)據(jù)？
所有組織都擁有大量未用于獲取業(yè)務(wù)洞察的數(shù)據(jù)。這些數(shù)據(jù)包括日志文件、錯(cuò)誤文件和來自應(yīng)用程序的操作數(shù)據(jù)。不要忽略此數(shù)據(jù)，它是寶貴信息的潛在來源。
數(shù)據(jù)復(fù)雜性是否在增長(zhǎng)？
查找數(shù)據(jù)復(fù)雜性增長(zhǎng)的線索，尤其是在數(shù)據(jù)量、種類、速度和真實(shí)性方面。
數(shù)據(jù)量是否已增長(zhǎng)？
如果滿足以下條件，您可能希望考慮大數(shù)據(jù)解決方案：
數(shù)據(jù)大小達(dá)到 PB 和 EB 級(jí)，而且在不久的將來，它們可能增長(zhǎng)到 ZB 級(jí)別。
這一數(shù)據(jù)量給使用傳統(tǒng)方法（比如關(guān)系數(shù)據(jù)庫引擎）存儲(chǔ)、搜索、共享、分析和可視化數(shù)據(jù)帶來的技術(shù)和經(jīng)濟(jì)挑戰(zhàn)。
數(shù)據(jù)處理目前可使用可用硬件上的大規(guī)模并行處理能力。
數(shù)據(jù)種類是否已增多？
如果滿足以下條件，各種各樣的數(shù)據(jù)可能都需要大數(shù)據(jù)解決方案：
數(shù)據(jù)內(nèi)容和結(jié)構(gòu)無法預(yù)期或預(yù)測(cè)。
數(shù)據(jù)格式各不相同，包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)。
用戶和機(jī)器能夠以任何格式生成數(shù)據(jù)，例如：Microsoft Word 文件、Microsoft Excel 電子表格、Microsoft PowerPoint 演示文稿、PDF 文件、社交媒體、Web 和軟件日志、電子郵件、來自相機(jī)的照片和視頻、信息感知的移動(dòng)設(shè)備、空中感知技術(shù)、基因組和醫(yī)療記錄。
以前沒有為了獲得洞察而被挖掘的數(shù)據(jù)來源不斷地在產(chǎn)生新的數(shù)據(jù)類型。
領(lǐng)域?qū)嶓w在不同的上下文中具有不同的含義。
數(shù)據(jù)的速度是否已增長(zhǎng)或改變？
考慮您的數(shù)據(jù)是否：
在快速更改，必須立即響應(yīng)
擁有過多的傳統(tǒng)技術(shù)和方法，它們不再足以實(shí)時(shí)處理傳入的數(shù)據(jù)
您的數(shù)據(jù)是否值得信賴？
如果滿足以下條件，那么請(qǐng)考慮使用大數(shù)據(jù)解決方案：
數(shù)據(jù)的真實(shí)性或準(zhǔn)確性未知。
數(shù)據(jù)包含模糊不清的信息。
不清楚數(shù)據(jù)是否完整。
如果數(shù)據(jù)的量、種類、速度或真實(shí)性具有合理的復(fù)雜性，那么有可能會(huì)適合地采用大數(shù)據(jù)解決方案。對(duì)于更復(fù)雜的數(shù)據(jù)，需要評(píng)估與實(shí)現(xiàn)大數(shù)據(jù)解決方案關(guān)聯(lián)的任何風(fēng)險(xiǎn)。對(duì)于不太復(fù)雜的數(shù)據(jù)，則應(yīng)該評(píng)估傳統(tǒng)的解決方案。
