四虎国产精品永久地址998_chinesexxx少妇露脸_日本丁香久久综合国产精品_一区二区久久久久_四虎av影视_久久久久国产一区二区三区不卡

中培偉業(yè)IT資訊頻道
您現(xiàn)在的位置:首頁 > IT資訊 > 精選文章 > 中培專家論-企業(yè)級大數(shù)據(jù)平臺(tái)建設(shè)綜述

中培專家論-企業(yè)級大數(shù)據(jù)平臺(tái)建設(shè)綜述

2018-08-29 10:41:27 | 來源:中培企業(yè)IT培訓(xùn)網(wǎng)

企業(yè)大數(shù)據(jù)平臺(tái)的建設(shè)和運(yùn)營無疑是實(shí)現(xiàn)上述目標(biāo)的關(guān)鍵舉措,也正成為是企業(yè)信息化建設(shè)的核心任務(wù)和目標(biāo),通過構(gòu)建企業(yè)大數(shù)據(jù)平臺(tái),實(shí)現(xiàn)資源整合優(yōu)化、統(tǒng)一數(shù)據(jù)采集及數(shù)據(jù)加工、統(tǒng)一數(shù)據(jù)共享及服務(wù)、提高企業(yè)運(yùn)營效率、最大化釋放數(shù)據(jù)價(jià)值,最終實(shí)現(xiàn)“一點(diǎn)存儲(chǔ)、統(tǒng)一管控、多點(diǎn)應(yīng)用、體現(xiàn)價(jià)值”的目標(biāo)。

▌企業(yè)大數(shù)據(jù)平臺(tái)的建設(shè)目標(biāo)

企業(yè)大數(shù)據(jù)平臺(tái)是企業(yè)信息支撐系統(tǒng)的重要組成部分,具備對企業(yè)各系統(tǒng)和其它域外部系統(tǒng)的數(shù)據(jù)聚合與數(shù)據(jù)處理能力,同時(shí),通過對數(shù)據(jù)加工形成的數(shù)據(jù)資產(chǎn)進(jìn)行統(tǒng)一管理與數(shù)據(jù)封裝,實(shí)現(xiàn)對企業(yè)數(shù)據(jù)管理與數(shù)據(jù)服務(wù)能力、應(yīng)用體系管理能力的系統(tǒng)支撐。

企業(yè)大數(shù)據(jù)中心應(yīng)具備如下三方面特征:

1. “企業(yè)級”數(shù)據(jù)中心:企業(yè)大數(shù)據(jù)中心全面獲取企業(yè)內(nèi)外部各系統(tǒng)源數(shù)據(jù),并進(jìn)行整合、處理,生成企業(yè)級統(tǒng)一數(shù)據(jù)視圖,數(shù)據(jù)服務(wù)范圍面向企業(yè)各系統(tǒng)及應(yīng)用領(lǐng)域,實(shí)現(xiàn)跨業(yè)務(wù)線、跨部門、跨系統(tǒng)的數(shù)據(jù)支撐。

2. “智慧型”數(shù)據(jù)中心:數(shù)據(jù)完備且標(biāo)準(zhǔn)規(guī)范;平臺(tái)功能完善;數(shù)據(jù)共享充分;應(yīng)用的智能化和多樣化;系統(tǒng)資源可彈性擴(kuò)展;系統(tǒng)架構(gòu)可動(dòng)態(tài)適配。

3. “管理運(yùn)營”數(shù)據(jù)中心:企業(yè)大數(shù)據(jù)平臺(tái)需肩負(fù)起企業(yè)數(shù)據(jù)管理和運(yùn)營的樞紐作用,對企業(yè)數(shù)據(jù)的獲取、傳輸、加工、應(yīng)用、管控、運(yùn)維等實(shí)行一體化支撐,實(shí)現(xiàn)數(shù)據(jù)管理流程與各方面工作的無縫銜接和高度協(xié)同,構(gòu)建數(shù)據(jù)價(jià)值運(yùn)營生態(tài)體系。

▌建設(shè)原則

1   ▏一體化原則

系統(tǒng)技術(shù)架構(gòu)方面,應(yīng)將地市系統(tǒng)數(shù)據(jù)納入數(shù)據(jù)采集范圍,并在數(shù)據(jù)存儲(chǔ)方面實(shí)現(xiàn)統(tǒng)一數(shù)據(jù)存儲(chǔ)和全省數(shù)據(jù)共享。

系統(tǒng)功能架構(gòu)方面,應(yīng)從數(shù)據(jù)的使用和數(shù)據(jù)應(yīng)用的開發(fā)層面,實(shí)現(xiàn)數(shù)據(jù)的共享訪問和數(shù)據(jù)應(yīng)用的個(gè)性化開發(fā)支撐。

2   ▏先進(jìn)性原則

企業(yè)大數(shù)據(jù)平臺(tái)在系統(tǒng)架構(gòu)方面,應(yīng)確保先進(jìn)性和可擴(kuò)展性,確保企業(yè)大數(shù)據(jù)平臺(tái)架構(gòu)合理部署、適度超前,能夠適應(yīng)公司未來較長周期內(nèi)發(fā)展需求,為源數(shù)據(jù)引入、應(yīng)用建設(shè)提供一個(gè)穩(wěn)定、可平滑演進(jìn)的系統(tǒng)框架。

在系統(tǒng)技術(shù)方面,應(yīng)采用先進(jìn)的產(chǎn)品和技術(shù),搭建一個(gè)架構(gòu)可伸縮、可平滑擴(kuò)展、資源可彈性調(diào)配的數(shù)據(jù)中心平臺(tái);

在體系架構(gòu)方面,應(yīng)實(shí)現(xiàn)數(shù)據(jù)中心大數(shù)據(jù)處理分析平臺(tái)與應(yīng)用平臺(tái)的分離,采用組件化、模塊化技術(shù),確保平臺(tái)在內(nèi)核穩(wěn)定的同時(shí)具有高度開放性、可靈活擴(kuò)展。

在數(shù)據(jù)服務(wù)交付方面,應(yīng)借鑒先進(jìn)的SOA理念,實(shí)現(xiàn)數(shù)據(jù)與應(yīng)用分離,提供快速便捷的應(yīng)用交付能力,支持各類用戶通過數(shù)據(jù)服務(wù)支撐平臺(tái)按需定購,快速獲得相關(guān)數(shù)據(jù)服務(wù)。

3   ▏智慧型原則

全新的企業(yè)大數(shù)據(jù)平臺(tái)應(yīng)逐步轉(zhuǎn)變傳統(tǒng)BI以報(bào)表提供為主的數(shù)據(jù)應(yīng)用和服務(wù)方式,以洞察力為導(dǎo)向,提高數(shù)據(jù)分析處理和應(yīng)用的實(shí)效性、關(guān)聯(lián)性,充分發(fā)揮數(shù)據(jù)使能的驅(qū)動(dòng)作用,改善數(shù)據(jù)應(yīng)用和數(shù)據(jù)服務(wù)水平,充分體現(xiàn)系統(tǒng)在感知、調(diào)度、觸發(fā)等方面的智慧性原則。

系統(tǒng)應(yīng)從架構(gòu)設(shè)計(jì)上,借助分布式計(jì)算與分布式存儲(chǔ)技術(shù),形成海量數(shù)據(jù)的快速處理與深加工能力,滿足智慧性系統(tǒng)對數(shù)據(jù)的各種靈活加工與數(shù)據(jù)存儲(chǔ)及智能調(diào)度的要求。

在數(shù)據(jù)管理方面,需在多形態(tài)、海量數(shù)據(jù)聚合處理形成的數(shù)據(jù)資產(chǎn)基礎(chǔ)上,通過全面、靈活、可靠的數(shù)據(jù)資產(chǎn)模型與管理體系的支撐,實(shí)現(xiàn)對數(shù)據(jù)資產(chǎn)擴(kuò)充智能化存儲(chǔ)與管理、數(shù)據(jù)使用過程的智能引導(dǎo)與觸發(fā)。

數(shù)據(jù)應(yīng)用方面,通過場景化、標(biāo)準(zhǔn)化、流程化的應(yīng)用體系和靈活、易用的應(yīng)用開發(fā)工具的支撐,應(yīng)具備對數(shù)據(jù)應(yīng)用的開發(fā)與使用行為的感知能力,并通過系統(tǒng)的自學(xué)習(xí)能力與自助式數(shù)據(jù)封裝能力,實(shí)現(xiàn)對數(shù)據(jù)應(yīng)用使用的智能引導(dǎo)。

在系統(tǒng)管理層面,需實(shí)現(xiàn)對數(shù)據(jù)加工、數(shù)據(jù)封裝、數(shù)據(jù)應(yīng)用開發(fā)與數(shù)據(jù)應(yīng)用使用行為的可視化管理、統(tǒng)一調(diào)度與流程監(jiān)控,形成企業(yè)大數(shù)據(jù)平臺(tái)的智能神經(jīng)中樞。

4   ▏開放性原則

企業(yè)大數(shù)據(jù)平臺(tái)服務(wù)對象:數(shù)據(jù)中心的服務(wù)對象覆蓋面更廣,不僅包括公司內(nèi)部的管理人員、一線人員和運(yùn)營人員,公司外部的合作伙伴、集團(tuán)客戶、大眾客戶,還包括公司內(nèi)外的各域、各行業(yè)信息系統(tǒng)和IT平臺(tái)。中心可依據(jù)數(shù)據(jù)安全標(biāo)準(zhǔn)、服務(wù)內(nèi)容和SLA水平設(shè)定不同的數(shù)據(jù)開放級別。

企業(yè)大數(shù)據(jù)平臺(tái)服務(wù)領(lǐng)域:隨著源數(shù)據(jù)覆蓋不斷擴(kuò)展數(shù)據(jù)服務(wù)領(lǐng)域橫向不斷延伸、縱向不斷深化,可面向管理運(yùn)營、面向市場擴(kuò)展、面向外部客戶提供多領(lǐng)域的數(shù)據(jù)應(yīng)用。

企業(yè)大數(shù)據(jù)平臺(tái)所使用的各種網(wǎng)絡(luò)協(xié)議、硬件接口和數(shù)據(jù)接口等應(yīng)符合業(yè)界開放式標(biāo)準(zhǔn)。應(yīng)通過數(shù)據(jù)封裝等標(biāo)準(zhǔn)化數(shù)據(jù)服務(wù)形式,面向公司各業(yè)務(wù)系統(tǒng)對外提供數(shù)據(jù)服務(wù),支撐開放式數(shù)據(jù)應(yīng)用構(gòu)建。

5   ▏安全性原則

企業(yè)大數(shù)據(jù)平臺(tái)應(yīng)具備統(tǒng)一且完善的安全機(jī)制以確保數(shù)據(jù)的安全性和系統(tǒng)的安全性。

數(shù)據(jù)安全:企業(yè)大數(shù)據(jù)平臺(tái)保存的數(shù)據(jù)是經(jīng)過匯聚、提煉的各業(yè)務(wù)線、管理線的內(nèi)外部數(shù)據(jù),對管理決策、生產(chǎn)運(yùn)營和業(yè)務(wù)擴(kuò)展意義重大,數(shù)據(jù)訪問和開放應(yīng)進(jìn)行嚴(yán)格的安全控制,需要針對不同的服務(wù)對象和數(shù)據(jù)內(nèi)容構(gòu)建差異化的安全訪問策略和分級管理機(jī)制,確保資產(chǎn)信息保存、訪問和傳輸?shù)陌踩浴?/p>

系統(tǒng)安全:系統(tǒng)設(shè)計(jì)不能影響數(shù)據(jù)中心系統(tǒng)的可靠運(yùn)行,需構(gòu)建系統(tǒng)層面的安全控制機(jī)制,確保大數(shù)據(jù)采集、處理分析以及應(yīng)用能夠可靠準(zhǔn)確運(yùn)行,同時(shí),數(shù)據(jù)中心應(yīng)與其它系統(tǒng)之間采取嚴(yán)格的權(quán)限控制或防火墻等措施,保證其安全性。

6   ▏原則易用性

數(shù)據(jù)應(yīng)用易用性:實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)可視化呈現(xiàn),構(gòu)建的統(tǒng)一數(shù)據(jù)資產(chǎn)易于理解與應(yīng)用,同時(shí),提供友好的UI確保用戶在應(yīng)用數(shù)據(jù)服務(wù)時(shí)的良好客戶體驗(yàn),要求系統(tǒng)具備良好易用的人機(jī)交互界面與靈活多樣的展現(xiàn)方式。

運(yùn)營管理易用性:運(yùn)營管理功能深入且直觀。易理解、易學(xué)習(xí),功能描述準(zhǔn)確細(xì)致、邏輯清晰,用戶進(jìn)入操作界面后一目了然,能夠很直觀、很容易找到自己要使用的功能菜單,方便的完成運(yùn)維操作。

7   ▏總體規(guī)劃、分步實(shí)施、迭代式演進(jìn)原則

企業(yè)大數(shù)據(jù)平臺(tái)的規(guī)劃實(shí)施,應(yīng)結(jié)合企業(yè)的的轉(zhuǎn)型戰(zhàn)略實(shí)現(xiàn)突破創(chuàng)新,兼?zhèn)湎冗M(jìn)性、智慧性和前瞻性;

具體的演進(jìn)過程,應(yīng)結(jié)合不同階段的業(yè)務(wù)訴求、IT環(huán)境、數(shù)據(jù)中心成熟度等因素,制定數(shù)據(jù)中心服務(wù)能力體系建設(shè)、大數(shù)據(jù)企業(yè)大數(shù)據(jù)平臺(tái)服務(wù)能力體系建設(shè)、企業(yè)大數(shù)據(jù)平臺(tái)運(yùn)營服務(wù)能力體系三個(gè)階段。

▌系統(tǒng)規(guī)劃

1   ▏系統(tǒng)能力體系

企業(yè)大數(shù)據(jù)平臺(tái)建設(shè)是一個(gè)復(fù)雜的系統(tǒng)性工程,其能力體系包括:

構(gòu)建大數(shù)據(jù)管理平臺(tái),支撐大數(shù)據(jù)的獲取、加工、存儲(chǔ)及服務(wù)能力

采用基于分布式處理的功能架構(gòu)與技術(shù)架構(gòu),建設(shè)分層處理、功能解耦的企業(yè)大數(shù)據(jù)平臺(tái);應(yīng)用Hadoop、實(shí)時(shí)流處理、分布式數(shù)據(jù)庫、NoSQL數(shù)據(jù)庫等大數(shù)據(jù)處理技術(shù),構(gòu)建公司內(nèi)外部結(jié)構(gòu)化、非結(jié)構(gòu)化、流數(shù)據(jù)等不同形態(tài)海量數(shù)據(jù)的處理能力;合理部署存儲(chǔ)資源,針對企業(yè)大數(shù)據(jù)平臺(tái)海量數(shù)據(jù)實(shí)施分級存儲(chǔ)管理;應(yīng)用數(shù)據(jù)封裝技術(shù),實(shí)現(xiàn)企業(yè)大數(shù)據(jù)平臺(tái)對外數(shù)據(jù)服務(wù)的系統(tǒng)化支撐;實(shí)施數(shù)據(jù)質(zhì)量管理,保障企業(yè)大數(shù)據(jù)平臺(tái)數(shù)據(jù)準(zhǔn)確性;實(shí)施系統(tǒng)安全與信息安全管理,保障企業(yè)大數(shù)據(jù)平臺(tái)運(yùn)行穩(wěn)定,具備高可用性,保障信息安全。

匯聚公司內(nèi)外部源數(shù)據(jù),有效組織多態(tài)大數(shù)據(jù)

采用統(tǒng)一封裝的數(shù)據(jù)采集接口,實(shí)現(xiàn)對公司內(nèi)外部系統(tǒng)數(shù)據(jù)的匯聚,包括公司內(nèi)部以及各業(yè)務(wù)平臺(tái)的價(jià)值源數(shù)據(jù),公司外部互聯(lián)網(wǎng)、社會(huì)統(tǒng)計(jì)、競爭對手?jǐn)?shù)據(jù)。支持結(jié)構(gòu)化、非結(jié)構(gòu)化和實(shí)時(shí)數(shù)據(jù)的采集。支持海量數(shù)據(jù)的采集和存儲(chǔ)。

構(gòu)建企業(yè)級數(shù)據(jù)資產(chǎn),支撐核心數(shù)據(jù)的共享和復(fù)用

采用先進(jìn)加工技術(shù)實(shí)施大數(shù)據(jù)分析處理,實(shí)現(xiàn)對基礎(chǔ)數(shù)據(jù)資產(chǎn)的統(tǒng)一管理。

通過智慧性,先進(jìn)性的數(shù)據(jù)模型構(gòu)建,實(shí)現(xiàn)從基礎(chǔ)數(shù)據(jù)資產(chǎn)到應(yīng)用數(shù)據(jù)資產(chǎn)的持續(xù)的加工處理。建立系統(tǒng)化的數(shù)據(jù)資產(chǎn)長周期存儲(chǔ)、大數(shù)據(jù)量加工與轉(zhuǎn)換方案,實(shí)現(xiàn)從存儲(chǔ)效率、時(shí)間要求、訪問要求、應(yīng)用要求多維度的管控機(jī)制與系統(tǒng)管理支撐能力。

構(gòu)建標(biāo)準(zhǔn)化數(shù)據(jù)服務(wù)能力,支撐公司運(yùn)營數(shù)據(jù)需求

基于統(tǒng)一數(shù)據(jù)資產(chǎn),建立標(biāo)準(zhǔn)化的數(shù)據(jù)服務(wù)流程和服務(wù)標(biāo)準(zhǔn);以標(biāo)準(zhǔn)化數(shù)據(jù)服務(wù)方式為公司內(nèi)外部各系統(tǒng)及使用方提供數(shù)據(jù)支撐。

構(gòu)建數(shù)據(jù)應(yīng)用體系,支撐數(shù)據(jù)價(jià)值挖掘及應(yīng)用

建立企業(yè)大數(shù)據(jù)平臺(tái)數(shù)據(jù)價(jià)值挖掘及應(yīng)用流程,基于企業(yè)大數(shù)據(jù)平臺(tái)數(shù)據(jù)支撐,在公司各業(yè)務(wù)運(yùn)營領(lǐng)域推動(dòng)數(shù)據(jù)應(yīng)用,發(fā)揮數(shù)據(jù)價(jià)值。

面向內(nèi)部管理:服務(wù)于企業(yè)的精細(xì)化管理要求,提升企業(yè)運(yùn)營管理水平;

面向客戶:為企業(yè)提高精準(zhǔn)營銷與個(gè)性化客戶服務(wù)能力,優(yōu)化客戶感知;

面向合作伙伴:為合作伙伴提供高價(jià)值的數(shù)據(jù)服務(wù)產(chǎn)品,實(shí)現(xiàn)企業(yè)數(shù)據(jù)增值。

2   ▏系統(tǒng)總體框架

基于企業(yè)大數(shù)據(jù)平臺(tái)的建設(shè)目標(biāo)與建設(shè)原則,企業(yè)大數(shù)據(jù)平臺(tái)從總體框架上要支持大數(shù)據(jù)時(shí)代的以多態(tài)、海量數(shù)據(jù)為主的數(shù)據(jù)源引入和數(shù)據(jù)聚合,通過大數(shù)據(jù)處理架構(gòu)的數(shù)據(jù)處理能力形成集中的企業(yè)級數(shù)據(jù)資產(chǎn),通過數(shù)據(jù)資產(chǎn)的加工與數(shù)據(jù)封裝,以及數(shù)據(jù)管理體系與數(shù)據(jù)應(yīng)用體系的建設(shè),實(shí)現(xiàn)對數(shù)據(jù)應(yīng)用和數(shù)據(jù)產(chǎn)品的開發(fā)與使用過程的智能化支撐,從而支撐企業(yè)的精細(xì)化管理、全業(yè)務(wù)運(yùn)營。

企業(yè)大數(shù)據(jù)平臺(tái)的總體框架包括數(shù)據(jù)聚合、數(shù)據(jù)資產(chǎn)、數(shù)據(jù)應(yīng)用、系統(tǒng)管理、訪問門戶五個(gè)方面。通過聚合多態(tài)、海量源數(shù)據(jù),形成企業(yè)級基礎(chǔ)數(shù)據(jù)資產(chǎn)與應(yīng)用數(shù)據(jù)資產(chǎn),通過數(shù)據(jù)分析挖掘與數(shù)據(jù)封裝,提供基于數(shù)據(jù)資產(chǎn)的數(shù)據(jù)服務(wù),支撐數(shù)據(jù)應(yīng)用與數(shù)據(jù)產(chǎn)品的開發(fā),并通過系統(tǒng)門戶,面向公司各類人員提供數(shù)據(jù)分析與業(yè)務(wù)決策支持,面向公司內(nèi)業(yè)務(wù)支撐系統(tǒng)以及各業(yè)務(wù)平臺(tái)提供數(shù)據(jù)服務(wù)能力,面向合作伙伴、集團(tuán)客戶等外部用戶提供智慧型數(shù)據(jù)價(jià)值產(chǎn)品,助力外部企業(yè)用戶的運(yùn)營能力提升。

數(shù)據(jù)聚合

數(shù)據(jù)聚合方面,要聚合包含企業(yè)外部系統(tǒng)在內(nèi)的公司內(nèi)、外部數(shù)據(jù),形成常態(tài)化的數(shù)據(jù)聚合機(jī)制。

針對源數(shù)據(jù)的數(shù)據(jù)種類、接口種類,建設(shè)與其相匹配的接口與處理能力,實(shí)現(xiàn)結(jié)構(gòu)化數(shù)據(jù)/非結(jié)構(gòu)化數(shù)據(jù)、實(shí)時(shí)/非實(shí)時(shí)數(shù)據(jù)的聚合,為加工形成集中的統(tǒng)一數(shù)據(jù)資產(chǎn)提供基礎(chǔ)數(shù)據(jù)。

數(shù)據(jù)資產(chǎn)

數(shù)據(jù)資產(chǎn)的建設(shè)方面,要構(gòu)建結(jié)構(gòu)化、模型化數(shù)據(jù)資產(chǎn)的組織、管理、存儲(chǔ)架構(gòu)。根據(jù)業(yè)務(wù)使用要求(高熱度數(shù)據(jù)/低熱度數(shù)據(jù)),提供不同的數(shù)據(jù)資產(chǎn)分類管理、存儲(chǔ)環(huán)境。引入NoSQL數(shù)據(jù)庫,與關(guān)系型數(shù)據(jù)庫形成高效的融合架構(gòu),共同形成數(shù)據(jù)資產(chǎn)的綜合管理支撐能力。

數(shù)據(jù)資產(chǎn)包括基礎(chǔ)數(shù)據(jù)資產(chǎn)和應(yīng)用數(shù)據(jù)資產(chǎn)兩個(gè)層面。

數(shù)據(jù)應(yīng)用

數(shù)據(jù)應(yīng)用從形態(tài)上包括數(shù)據(jù)應(yīng)用、數(shù)據(jù)產(chǎn)品、數(shù)據(jù)服務(wù)三種類型。通過構(gòu)建應(yīng)用支撐體系,圍繞公司運(yùn)營的市場活動(dòng)提供數(shù)據(jù)應(yīng)用能力支撐。

1. 數(shù)據(jù)服務(wù):是基于數(shù)據(jù)資產(chǎn)的數(shù)據(jù)封裝,面向業(yè)務(wù)系統(tǒng)提供標(biāo)準(zhǔn)化數(shù)據(jù)服務(wù)接口,將數(shù)據(jù)能力按照服務(wù)的方式對外開放,實(shí)現(xiàn)系統(tǒng)間的有效互動(dòng)。

2. 數(shù)據(jù)產(chǎn)品:是面向企業(yè)外部、合作伙伴等客戶提供的基于數(shù)據(jù)資產(chǎn)進(jìn)行分析挖掘形成的高價(jià)值數(shù)據(jù)產(chǎn)品。

3. 數(shù)據(jù)應(yīng)用:包括基于數(shù)據(jù)集市數(shù)據(jù)加工而成的地市數(shù)據(jù)應(yīng)用,和基于省級數(shù)據(jù)資產(chǎn)進(jìn)行數(shù)據(jù)價(jià)值持續(xù)挖掘形成的全省數(shù)據(jù)應(yīng)用,通過省市兩級數(shù)據(jù)應(yīng)用共享與互動(dòng),為省市兩級的一體化運(yùn)營提供價(jià)值應(yīng)用支撐,面向公司業(yè)務(wù)決策與經(jīng)營提供數(shù)據(jù)分析支撐能力。

系統(tǒng)管理

系統(tǒng)管理統(tǒng)一負(fù)責(zé)對企業(yè)大數(shù)據(jù)平臺(tái)數(shù)據(jù)資產(chǎn)、數(shù)據(jù)應(yīng)用的統(tǒng)一管理與調(diào)度,構(gòu)建數(shù)據(jù)級可視化管理能力,實(shí)現(xiàn)全程數(shù)據(jù)溯源、數(shù)據(jù)質(zhì)量管理和服務(wù)流程監(jiān)控管理,為數(shù)據(jù)中心的開放運(yùn)營提供基礎(chǔ)保障能力。

訪問門戶

訪問門戶包括面向省市業(yè)務(wù)人員、公司領(lǐng)導(dǎo)的對內(nèi)門戶,面向外部人員數(shù)據(jù)產(chǎn)品運(yùn)營的對外門戶,面向企業(yè)大數(shù)據(jù)平臺(tái)管理人員的管理門戶三個(gè)組成部分。

1. 對內(nèi)門戶:是面向省市業(yè)務(wù)人員、公司領(lǐng)導(dǎo)提供統(tǒng)一的訪問Portal。實(shí)現(xiàn)定制化的個(gè)人工作臺(tái)。其中,地市數(shù)據(jù)應(yīng)用通過對內(nèi)門戶的地市專區(qū)向地市人員開放,提供統(tǒng)一訪問與管理。

2. 對外門戶:是面向外部人員提供獨(dú)立的安全的訪問門戶。以貨架形式對外部企業(yè)與個(gè)人用戶提供數(shù)據(jù)運(yùn)營產(chǎn)品,方便外部客戶獲取適合自身的數(shù)據(jù)產(chǎn)品,提升企業(yè)與個(gè)人自身的市場運(yùn)營能力。

3. 管理門戶:是面向企業(yè)大數(shù)據(jù)平臺(tái)管理人員和數(shù)據(jù)服務(wù)開發(fā)者的訪問門戶。管理人員通過該門戶實(shí)現(xiàn)數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)服務(wù)管理、數(shù)據(jù)服務(wù)自助組裝、系統(tǒng)日常運(yùn)行維護(hù)與數(shù)據(jù)質(zhì)量管控等功能,數(shù)據(jù)服務(wù)開發(fā)者通過該門戶實(shí)現(xiàn)數(shù)據(jù)服務(wù)的自助開發(fā)與注冊、管理,構(gòu)建高價(jià)值數(shù)據(jù)服務(wù)開發(fā)的共享平臺(tái)。

3   ▏數(shù)據(jù)平臺(tái)功能架構(gòu)

大數(shù)據(jù)基礎(chǔ)平臺(tái)

數(shù)據(jù)采集對業(yè)務(wù)數(shù)據(jù)進(jìn)行統(tǒng)一采集的平臺(tái),獲取層由網(wǎng)頁爬蟲和接口文件采集構(gòu)成。它通過數(shù)據(jù)采集子層為數(shù)據(jù)層提供規(guī)范、高效的數(shù)據(jù)服務(wù),實(shí)現(xiàn)業(yè)務(wù)數(shù)據(jù)的充分共享。

數(shù)據(jù)存儲(chǔ)和處理是平臺(tái)對業(yè)務(wù)數(shù)據(jù)進(jìn)行統(tǒng)一組織、集中管理的平臺(tái),數(shù)據(jù)層由數(shù)據(jù)存儲(chǔ)和數(shù)據(jù)處理組件構(gòu)成。組件是實(shí)現(xiàn)特定功能的程序模塊,比如:HDFS組件、MapReduce組件、Hive組件、YARN組件、Hbase組件等。

數(shù)據(jù)總線通過數(shù)據(jù)集成平臺(tái)或ETL實(shí)現(xiàn)內(nèi)部模塊之間的數(shù)據(jù)交互。

大數(shù)據(jù)能力平臺(tái)

基于上層大數(shù)據(jù)基礎(chǔ)數(shù)據(jù)分析能力,針對不同業(yè)務(wù)產(chǎn)品,通過Java、Jobs等技術(shù)封裝形成數(shù)據(jù)服務(wù)能力組件,包括關(guān)鍵詞分析組件、客戶識(shí)別組件、標(biāo)簽產(chǎn)品組件、行為分析組件等。從而為平臺(tái)提供數(shù)據(jù)服務(wù)能力和平臺(tái)服務(wù)能力。

大數(shù)據(jù)開放平臺(tái)

在數(shù)據(jù)服務(wù)能力組件基礎(chǔ)上,對外提供服務(wù)能力開放,提供各種訪問設(shè)備、外部系統(tǒng)接入的接口,由接入適配構(gòu)成。它進(jìn)行交互信息的協(xié)議轉(zhuǎn)換、路由控制、負(fù)載均衡和訪問設(shè)備的合法性驗(yàn)證,完成訪問設(shè)備、外部系統(tǒng)與平臺(tái)系統(tǒng)的接口適配。

大數(shù)據(jù)管理平臺(tái)

大數(shù)據(jù)管理平臺(tái)是大數(shù)據(jù)能力產(chǎn)品與應(yīng)用平臺(tái)對系統(tǒng)進(jìn)行統(tǒng)一管理、監(jiān)控的平臺(tái),管理層由系統(tǒng)安全、數(shù)據(jù)質(zhì)量、作業(yè)調(diào)度、運(yùn)維監(jiān)控等構(gòu)成,通過建立網(wǎng)絡(luò)安全、數(shù)據(jù)隱私保護(hù)、調(diào)度機(jī)制、運(yùn)維監(jiān)控管理等為平臺(tái)提供管理保障措施。

大數(shù)據(jù)應(yīng)用平臺(tái)是大數(shù)據(jù)能力產(chǎn)品與應(yīng)用平臺(tái)實(shí)現(xiàn)應(yīng)用功能的平臺(tái),可通過標(biāo)準(zhǔn)化服務(wù)接口訪問,由一個(gè)或多個(gè)組件按一定的規(guī)則和標(biāo)準(zhǔn)封裝而成,既是展示邏輯調(diào)用的對象,也是組成業(yè)務(wù)流程的實(shí)體,也可調(diào)用服務(wù)來完成業(yè)務(wù)功能。

信息化建設(shè)是一個(gè)逐步推進(jìn)和不斷完善的過程,不可能一蹴而就,尤其是作為企業(yè)架構(gòu)之一的大數(shù)據(jù)支撐平臺(tái)建設(shè),即要有高瞻遠(yuǎn)矚的戰(zhàn)略眼光,又要有腳踏實(shí)地的務(wù)實(shí)精神,把企業(yè)的當(dāng)前需求與長遠(yuǎn)規(guī)劃發(fā)展結(jié)合起來,突出重點(diǎn)、分步實(shí)施,實(shí)現(xiàn)對精確管理和品牌經(jīng)營的有力支撐。

想了解更多IT資訊,請?jiān)L問中培偉業(yè)官網(wǎng):中培偉業(yè)

相關(guān)閱讀

主站蜘蛛池模板: 额敏县| 宜川县| 海伦市| 包头市| 黎平县| 开阳县| 嘉兴市| 山丹县| 霍山县| 巫溪县| 白银市| 阿拉善右旗| 荔浦县| 晋中市| 沿河| 和田市| 唐山市| 大余县| 揭西县| 蕲春县| 德惠市| 台东县| 大理市| 南皮县| 砚山县| 德安县| 澄江县| 西青区| 霍林郭勒市| 夏河县| 武清区| 亚东县| 揭阳市| 涟源市| 隆安县| 文安县| 奉化市| 洛隆县| 台中县| 天镇县| 政和县|