許多企業(yè)并沒有意識到大數(shù)據(jù)服務的潛在好處。盡管大肆宣傳,要么沒有意識到自己存在大數(shù)據(jù)問題,要么不這么認為。當數(shù)據(jù)量、種類和速度突然增長,并且企業(yè)當前的數(shù)據(jù)庫和應用無法再處理負載時,大數(shù)據(jù)技術通常十分有用。
如果處理不當,大數(shù)據(jù)問題可能會增加開支,并對生產(chǎn)力和競爭力產(chǎn)生負面影響。另一方面,強大的大數(shù)據(jù)戰(zhàn)略可以通過將勞動密集型的現(xiàn)有工作負載轉(zhuǎn)換為大數(shù)據(jù)技術,并引入新的應用來利用尚未開發(fā)的潛力,從而幫助組織降低成本,并提高運營效率。
大數(shù)據(jù)即服務(BDaaS):什么是大數(shù)據(jù)服務?
大數(shù)據(jù)即服務由云提供商提供數(shù)據(jù)平臺和工具,幫助企業(yè)處理、管理和分析海量數(shù)據(jù)集,以產(chǎn)生可用于增強業(yè)務運營并獲得競爭優(yōu)勢的見解。
大數(shù)據(jù)即服務(BDaaS)旨在通過利用外部提供商的數(shù)據(jù)管理系統(tǒng)和IT專業(yè)知識來釋放組織資源,而不是部署本地系統(tǒng),并雇用內(nèi)部員工來執(zhí)行這些功能。
許多企業(yè)生成大量結構化、非結構化和半結構化數(shù)據(jù)。大數(shù)據(jù)即服務可以作為由云提供商托管和管理的托管服務合同提供,也可以作為在云中運行的專用硬件和軟件提供。
什么是大數(shù)據(jù)?
大數(shù)據(jù)是指由于數(shù)據(jù)數(shù)量、速度和種類不斷增長而導致傳統(tǒng)數(shù)據(jù)庫無法解決的數(shù)據(jù)管理問題。
定義大數(shù)據(jù)的方法有多種,但大多數(shù)都包含所謂大數(shù)據(jù)“三個V”的思想:
數(shù)據(jù)量:數(shù)據(jù)量在TB到PB之間變化。
多樣性:多樣性包括來自許多不同來源和格式的信息,如網(wǎng)絡日志、社交媒體互動、電子商務和在線交易、金融交易等。
速度:從收集數(shù)據(jù)到用戶獲得可行的見解,企業(yè)的要求越來越高。因此,必須在相對較短的時間內(nèi)(從每日到實時)收集、保存、處理和評估數(shù)據(jù)。
大數(shù)據(jù)處理的演變
大數(shù)據(jù)生態(tài)系統(tǒng)建設進展迅速。如今,各種分析方法服務于各種組織活動。
用戶可以回答“發(fā)生了什么以及為什么?”的問題借助描述性分析。帶有記分卡和儀表板的傳統(tǒng)查詢和報告設置就是一些示例。
用戶可以借助預測分析評估功能中特定事件的可能性。例如預警系統(tǒng)、欺詐檢測、預防性維護和預測。
規(guī)范性分析為用戶提供特定(規(guī)范性)建議。其回答這個問題:如果出現(xiàn)“x”,該怎么辦?
大數(shù)據(jù)即服務示例
數(shù)字時代最重要的發(fā)展之一是“大數(shù)據(jù)”技術。強大的分析功能可以揭示隱藏在海量數(shù)據(jù)集中的模式和聯(lián)系,為幾乎所有企業(yè)的規(guī)劃和決策提供信息。
過去十年中,大數(shù)據(jù)的使用量大幅增加,幾乎影響到我們生活方式、購買模式和日常消費者決策的方方面面。
以下是一些每天影響人類的大數(shù)據(jù)應用實例:
運輸
我們大多數(shù)人依賴的GPS智能手機應用在最短的時間內(nèi)從一個地方移動到另一個地方,這些應用都是由大數(shù)據(jù)提供支持的。政府機構和衛(wèi)星照片是GPS數(shù)據(jù)的兩個提供者。
對于跨大西洋旅行,一架飛機可以產(chǎn)生1,000 TB或更多的數(shù)據(jù)。所有這些數(shù)據(jù)均由航空分析系統(tǒng)獲取,然后分析燃油效率、乘客和貨物重量以及天氣模式,以最大限度地提高安全性和能源利用。
大數(shù)據(jù)通過以下方式使運輸變得更輕松、更高效:
擁堵管理和交通控制:借助大數(shù)據(jù)分析,高德地圖現(xiàn)在可以提供前往任何位置最不擁堵的路線。
路線規(guī)劃:為了實現(xiàn)最大效率的規(guī)劃,可以根據(jù)用戶需求、燃料消耗和其他要素來比較不同的路線。
交通安全:為了識別事故多發(fā)地點,采用實時處理和預測分析。
廣告與營銷
廣告始終關注特定的客戶群體。過去,營銷人員使用焦點小組、調(diào)查結果、電視和廣播偏好以及其他方法來嘗試和預測消費者對廣告的反應。這些技術充其量只是有根據(jù)的猜測。
為了了解人們實際點擊、搜索和“喜歡”的內(nèi)容,廣告商如今購買或收集大量數(shù)據(jù)。利用瀏覽量和點擊率等精確衡量標準,還可以評估營銷活動的有效性。
例如,亞馬遜收集了有關數(shù)百萬客戶的購買、運輸方式和支付偏好的大量信息。然后,向狹窄的細分市場和子群體提供高度針對性的廣告投放。
銀行和金融服務
大數(shù)據(jù)和分析在金融領域的應用產(chǎn)生了巨大的影響:
欺詐檢測:銀行跟蹤客戶的消費習慣和其他活動,以發(fā)現(xiàn)可能表明欺詐交易的異常行為和異常情況。
風險管理:借助大數(shù)據(jù)分析,銀行可以跟蹤和報告操作流程、KPI和人員活動。
客戶關系優(yōu)化:為了更好地了解如何將潛在客戶轉(zhuǎn)變?yōu)榭蛻舨⒐膭罡嗟厥褂貌煌慕鹑诋a(chǎn)品,金融機構研究網(wǎng)站使用情況和交易數(shù)據(jù)中的數(shù)據(jù)。
個性化營銷:銀行利用大數(shù)據(jù)建立每個客戶的生活方式、品味和目標的詳細檔案,然后將其應用于微觀目標營銷活動。
政府
政府組織收集大量數(shù)據(jù),但其中許多組織,尤其是地方一級,并未使用尖端技術數(shù)據(jù)挖掘,以及充分利用其分析工具。
社會保障管理局和國稅局是利用數(shù)據(jù)分析來發(fā)現(xiàn)虛假殘疾索賠和逃稅的組織的例子。美國聯(lián)邦調(diào)查局(FBI)和美國證券交易委員會(SEC)使用大數(shù)據(jù)技術監(jiān)控市場,以發(fā)現(xiàn)非法商業(yè)行為。聯(lián)邦住房管理局多年來一直使用大數(shù)據(jù)分析來預測抵押貸款違約和還款率。
媒體和娛樂
娛樂行業(yè)使用大數(shù)據(jù)來分析消費者反饋、預測觀眾興趣和偏好、管理節(jié)目安排并確定廣告投放目標。
兩個最著名的例子是Spotify和Amazon Prime,它們都使用大數(shù)據(jù)分析為訂閱者提供定制的節(jié)目推薦。
氣象
全球分布的天氣傳感器和衛(wèi)星收集大量數(shù)據(jù)來監(jiān)測環(huán)境。
氣象學家利用大數(shù)據(jù)來:
分析災害趨勢。
進行天氣預報。
認識全球變暖的影響。
確定世界上可以獲得飲用水的地點。
盡早通知風暴和海嘯等迫在眉睫的緊急情況。
衛(wèi)生保健
大數(shù)據(jù)正在穩(wěn)步但顯著地改變龐大的醫(yī)療保健行業(yè)。使用可穿戴技術和傳感器數(shù)據(jù)實時更新患者的電子健康記錄。
目前,提供商和實踐組織將大數(shù)據(jù)用于多種目的,例如:
預測流行病的爆發(fā)
早期癥狀識別,避免可預防的疾病
數(shù)字健康記錄
實時通知
增加患者參與
預測和避免重大疾病的發(fā)展
戰(zhàn)略性計劃
研究速度加快
遠程醫(yī)療
改進的醫(yī)學圖像分析
網(wǎng)絡安全
大數(shù)據(jù)可能會增加企業(yè)遭受網(wǎng)絡攻擊的危險,但機器學習分析可以使用相同的數(shù)據(jù)存儲來阻止和打擊在線犯罪。對歷史數(shù)據(jù)的分析可以產(chǎn)生情報來構建更有效的威脅控制。
此外,當模式和序列偏離常態(tài)時,機器學習可以向企業(yè)發(fā)出警報,因此可以針對勒索軟件攻擊、有害的內(nèi)部程序和未經(jīng)授權的訪問嘗試等風險采取有效的對策。
在企業(yè)發(fā)生入侵或數(shù)據(jù)盜竊后,攻擊后分析可以揭示所使用的技術。然后,機器學習可用于創(chuàng)建防御措施,以阻止未來此類嘗試。
教育
大數(shù)據(jù)正在受到管理者、學者和其他利益相關者的歡迎,以幫助改進課程、吸引頂尖人才并增強學生體驗。
示例包括:
定制課程:大數(shù)據(jù)可以根據(jù)特定學生的需求定制學術課程,經(jīng)常將在線學習與傳統(tǒng)的現(xiàn)場課程和獨立學習結合起來。
降低輟學率:預測分析為教育機構提供有關學生表現(xiàn)的信息、有關建議學習課程的反饋以及有關畢業(yè)生在勞動力市場表現(xiàn)的建議。
提高學生成績:通過檢查學生的個人“數(shù)據(jù)軌跡”,可以更好地了解學生的學習偏好和習慣,然后將其應用于設計一個促進學生學習的環(huán)境學習。
有針對性的國際招聘:借助大數(shù)據(jù)分析,機構可以更準確地預測申請人的成功機會。另一方面,還可以幫助海外學生找到最有可能接受其并最能實現(xiàn)其學術目標的大學。
總結
大數(shù)據(jù)是一個在商業(yè)和技術領域廣泛使用的術語。簡而言之,這是從各種來源獲取極大量復雜數(shù)據(jù),并對其進行分析以發(fā)現(xiàn)模式、趨勢、問題并提供獲得有用見解的機會的過程。
大數(shù)據(jù)即服務(BDaaS)旨在通過利用外部提供商的數(shù)據(jù)管理系統(tǒng)和IT專業(yè)知識來釋放組織資源,而不是部署本地系統(tǒng)和雇用內(nèi)部員工。許多企業(yè)生成大量結構化、非結構化和半結構化數(shù)據(jù)。
目前最令人著迷和最令人滿意的大數(shù)據(jù)項目提供的見解基于當前正在發(fā)生的事情,而不僅僅是上周發(fā)生的事情,允許立即采取行動,而不僅僅是從過去學習。