1，數(shù)據(jù)存儲(chǔ)面臨最大的威脅是什么2，大數(shù)據(jù)帶來(lái)的挑戰(zhàn)有哪些3，中國(guó)大數(shù)據(jù)行業(yè)發(fā)展的挑戰(zhàn)有哪些4，大數(shù)據(jù)帶來(lái)的挑戰(zhàn)有哪些 會(huì)導(dǎo)致數(shù)據(jù)盲點(diǎn)5，詳解大數(shù)據(jù)存儲(chǔ)哪些問(wèn)題最容易出現(xiàn)1，數(shù)據(jù)存儲(chǔ)面臨最大的威脅是什么
我國(guó)銀行業(yè)信息存儲(chǔ)，是建立在具有軍工背景的日企日立公司上面。國(guó)內(nèi)21家主要銀行所使用存儲(chǔ)設(shè)備的94%都為國(guó)外廠商所提供，其中日立占據(jù)1/3，其中，有充分證據(jù)表明，通過(guò)利用其預(yù)留后門、以及設(shè)備巡檢和磁盤更換的各種機(jī)會(huì)。
2，大數(shù)據(jù)帶來(lái)的挑戰(zhàn)有哪些
挑戰(zhàn)一：大數(shù)據(jù)的巨大體量使得信息管理成本顯著增加挑戰(zhàn)二：大數(shù)據(jù)的繁多類型使得信息有效性驗(yàn)證工作大大增加挑戰(zhàn)二：大數(shù)據(jù)的繁多類型使得信息有效性驗(yàn)證工作大大增加挑戰(zhàn)四：大數(shù)據(jù)的快速處理要求使得獨(dú)立決策的比例顯著降低挑戰(zhàn)六：大數(shù)據(jù)網(wǎng)絡(luò)的相對(duì)開(kāi)放性使得安全加固策略的復(fù)雜性有所降低挑戰(zhàn)六：大數(shù)據(jù)網(wǎng)絡(luò)的相對(duì)開(kāi)放性使得安全加固策略的復(fù)雜性有所降低大數(shù)據(jù)近年來(lái)發(fā)展的非常快，現(xiàn)在也普遍得到應(yīng)用，大數(shù)據(jù)帶來(lái)了機(jī)遇同時(shí)也帶來(lái)了挑戰(zhàn)，當(dāng)大數(shù)據(jù)產(chǎn)業(yè)鏈、行業(yè)應(yīng)用逐步發(fā)展完善之后，大數(shù)據(jù)將會(huì)形成質(zhì)變，創(chuàng)新整個(gè)社會(huì)形態(tài)。光環(huán)大數(shù)據(jù)培訓(xùn)認(rèn)為，大數(shù)據(jù)行業(yè)的真正挑戰(zhàn)來(lái)自三個(gè)方面：一是原來(lái)的分析基礎(chǔ)要變化，要融合統(tǒng)計(jì)學(xué)、計(jì)算理論基礎(chǔ)、邏輯基礎(chǔ)。二是，計(jì)算技術(shù)也需要重新革新，無(wú)論是存儲(chǔ)、計(jì)算語(yǔ)言、還是計(jì)算方法都需要重新來(lái)過(guò)。三是，大數(shù)據(jù)做出來(lái)的結(jié)論對(duì)不對(duì)，還無(wú)法大規(guī)模驗(yàn)證，這是目前面臨的最大挑戰(zhàn)。
3，中國(guó)大數(shù)據(jù)行業(yè)發(fā)展的挑戰(zhàn)有哪些
1、數(shù)據(jù)質(zhì)量目前醫(yī)療數(shù)據(jù)的來(lái)源主要為醫(yī)療機(jī)構(gòu)(例如、醫(yī)學(xué)藥學(xué)實(shí)驗(yàn)室、醫(yī)療康復(fù)中心等)和互聯(lián)網(wǎng)。采集的數(shù)據(jù)范 圍廣、維度高、類型種類繁多且不針對(duì) 特定的問(wèn)題。2、不確定性的度量問(wèn)題目前比較成熟且進(jìn)入實(shí)用階段的大數(shù) 據(jù)模型多數(shù)都是面向藥廠和保險(xiǎn)公司的。美國(guó)的醫(yī)療大數(shù)據(jù)應(yīng)用中，面向醫(yī)生和患 者業(yè)務(wù)通常較難，很難找到合適的切入點(diǎn)。面向企業(yè)的業(yè)務(wù)相對(duì)容易，尤其是針對(duì)保 險(xiǎn)公司和藥廠，而則相對(duì)難一些。由于大數(shù)據(jù)模型精度有限，在安全性要求極 高的和醫(yī)生中其實(shí)用價(jià)值非常有限，例如，一個(gè)95%準(zhǔn)確度的模型對(duì)醫(yī)生來(lái)說(shuō)可能仍然不夠精確，因?yàn)獒t(yī)生在決策時(shí)是針對(duì)患者個(gè)體的，而不是基于統(tǒng)計(jì)意義的。另外，統(tǒng)計(jì)學(xué)習(xí)模型的可解釋性也較差，往往只有統(tǒng)計(jì)學(xué)家和計(jì)算機(jī)科學(xué)家才能精確完整地解釋模型，而對(duì)于模型真正的使用者如醫(yī)生和政府官員等存在巨大的障礙。挑戰(zhàn)一：大數(shù)據(jù)行業(yè)發(fā)展良莠不濟(jì)我國(guó)大數(shù)據(jù)仍處于起步發(fā)展階段，在“萬(wàn)眾創(chuàng)新，大眾創(chuàng)業(yè)”的大環(huán)境下，大量的大數(shù)據(jù)企業(yè)不斷涌現(xiàn)，但企業(yè)發(fā)展良莠不濟(jì)。挑戰(zhàn)二：大數(shù)據(jù)創(chuàng)新、創(chuàng)業(yè)盲目企業(yè)在創(chuàng)新、創(chuàng)業(yè)過(guò)程，由于缺乏對(duì)大數(shù)據(jù)產(chǎn)業(yè)鏈的認(rèn)識(shí)，出現(xiàn)許多跟風(fēng)扎堆的情況，沒(méi)有有效發(fā)揮自身優(yōu)勢(shì)，造成巨大的資源浪費(fèi)。創(chuàng)新的時(shí)候，我們往往會(huì)看到一些標(biāo)桿出來(lái)。通俗來(lái)講，看到人家風(fēng)光，沒(méi)有看到人家背后受罪的時(shí)候。往往一窩蜂跟去的時(shí)候就會(huì)發(fā)現(xiàn)全是坑，而且 “此去華山一條道”，滿滿的全是競(jìng)爭(zhēng)對(duì)手。因此我們做這個(gè)排行的初衷就是為大家梳理一下，哪些行業(yè)、哪些板塊、哪些領(lǐng)域是什么樣的狀況，精確的找到自己的優(yōu)勢(shì)方向，去做創(chuàng)新和努力。挑戰(zhàn)三：投資盲目霍華德.馬克思說(shuō)過(guò)“投資者們明確達(dá)成的廣泛共識(shí)差不多都是錯(cuò)的”。究其原因是資本在選擇大數(shù)據(jù)項(xiàng)目、企業(yè)的時(shí)候，由于沒(méi)有客觀的評(píng)價(jià)標(biāo)準(zhǔn)，同時(shí)也缺乏對(duì)產(chǎn)業(yè)鏈的整體認(rèn)知，導(dǎo)致投資市場(chǎng)追逐熱點(diǎn)，存在一定的盲目性，大大降低了資本對(duì)大數(shù)據(jù)行業(yè)發(fā)展的正向推動(dòng)力。挑戰(zhàn)四：監(jiān)管的盲目性目前，監(jiān)管層很難對(duì)大數(shù)據(jù)企業(yè)和機(jī)構(gòu)進(jìn)行有效的監(jiān)管以及正確引導(dǎo)，要為大數(shù)據(jù)發(fā)展打造一個(gè)良性的生態(tài)環(huán)境就比較困難。其核心原因是對(duì)大數(shù)據(jù)企業(yè)的識(shí)別評(píng)價(jià)缺乏標(biāo)準(zhǔn)和規(guī)范。挑戰(zhàn)五：大數(shù)據(jù)項(xiàng)目建設(shè)盲目由于人才缺乏、大數(shù)據(jù)咨詢服務(wù)還沒(méi)有發(fā)展起來(lái)等原因，用戶很難對(duì)大數(shù)據(jù)項(xiàng)目有全面的認(rèn)識(shí)，容易受到廠商的左右，導(dǎo)致建設(shè)內(nèi)容的盲目;由于缺乏對(duì)產(chǎn)業(yè)的整體認(rèn)識(shí)和大數(shù)據(jù)企業(yè)評(píng)價(jià)標(biāo)準(zhǔn)、方法，所以在大數(shù)據(jù)服務(wù)商選擇上也存在一定的盲目性。
4，大數(shù)據(jù)帶來(lái)的挑戰(zhàn)有哪些 會(huì)導(dǎo)致數(shù)據(jù)盲點(diǎn)
大數(shù)據(jù)帶來(lái)的第一個(gè)挑戰(zhàn)就是還要不要調(diào)查數(shù)據(jù)。事實(shí)上對(duì)調(diào)查數(shù)據(jù)的挑戰(zhàn)，取決于對(duì)調(diào)查數(shù)據(jù)的替代程度和擴(kuò)大程度。相對(duì)于大數(shù)據(jù)而言，調(diào)查數(shù)據(jù)，就是小數(shù)據(jù)。大數(shù)據(jù)與小數(shù)據(jù)有一個(gè)交集，兩種數(shù)據(jù)交集重疊的部分會(huì)怎么樣增長(zhǎng)，取決于兩個(gè)因素，一個(gè)是傳感器技術(shù)的發(fā)展，一是數(shù)據(jù)挖掘的算法技術(shù)的發(fā)展，這兩項(xiàng)技術(shù)未來(lái)的發(fā)展，直接影響到社會(huì)科學(xué)未來(lái)發(fā)展的走向。第二個(gè)挑戰(zhàn)，社會(huì)學(xué)研究范式還有用嗎？在《大數(shù)據(jù)時(shí)代》中，提到過(guò)去的研究范式是抽樣、精確、因果。作者說(shuō)這三個(gè)過(guò)去我們?yōu)橹^斗的范式可能面臨著革命性的轉(zhuǎn)變。事實(shí)是否如此，這是一個(gè)值得認(rèn)真思考的信號(hào)。大數(shù)據(jù)：1. 大數(shù)據(jù)（big data）又稱為巨量資料，指需要新處理模式才能具有更強(qiáng)的決策力、洞察力和流程優(yōu)化能力的海量、高增長(zhǎng)率和多樣化的信息資產(chǎn)。2. “大數(shù)據(jù)”概念最早由維克托·邁爾·舍恩伯格和肯尼斯·庫(kù)克耶在編寫《大數(shù)據(jù)時(shí)代》中提出，指不用隨機(jī)分析法（抽樣調(diào)查）的捷徑，而是采用所有數(shù)據(jù)進(jìn)行分析處理。3. 大數(shù)據(jù)有4v特點(diǎn)，即volume（大量）、velocity（高速）、variety（多樣）、value（價(jià)值）。時(shí)每刻產(chǎn)生大量的數(shù)據(jù)。在此背景下，大數(shù)據(jù)時(shí)代（big data era）將會(huì)面臨新的挑戰(zhàn)。 1、大數(shù)據(jù)時(shí)代的基本特征 所謂大數(shù)據(jù)，就是人類在生產(chǎn)和生活中產(chǎn)生的海量數(shù)據(jù)信息。 大數(shù)據(jù)時(shí)代的到來(lái)，毫無(wú)疑問(wèn)會(huì)給人們帶來(lái)空前便利。據(jù)統(tǒng)計(jì)，2010年以互聯(lián)網(wǎng)為基礎(chǔ)所產(chǎn)生的數(shù)據(jù)比之前所有年份的總和還要多；而且不僅是數(shù)據(jù)量的激增，數(shù)據(jù)結(jié)構(gòu)亦在演變。gartner預(yù)計(jì)，2012年半結(jié)構(gòu)和非結(jié)構(gòu)化的數(shù)據(jù)，諸如文檔、表格、網(wǎng)頁(yè)、音頻、圖像和視頻等將占全球網(wǎng)絡(luò)數(shù)據(jù)量的85%左右；而且，整個(gè)網(wǎng)絡(luò)體系架構(gòu)將面臨革命性改變。由此，所謂大數(shù)據(jù)時(shí)代已經(jīng)臨。對(duì)于大數(shù)據(jù)時(shí)代，目前通常認(rèn)為有下述四大特征： 第一：數(shù)據(jù)量大：數(shù)據(jù)量級(jí)已從tb（1012字節(jié)）發(fā)展至pb乃至zb，可稱海量、巨量乃至超量。第二：類型繁多：愈來(lái)愈多為網(wǎng)頁(yè)、圖片、視頻、圖像等半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)信息。第三：價(jià)值密度低：以視頻安全監(jiān)控為例，連續(xù)不斷的監(jiān)控流中，有重大價(jià)值者可能僅為一兩秒的數(shù)據(jù)流；360°全方位視頻監(jiān)控的“死角”處，可能會(huì)挖掘出最有價(jià)值的圖像信息。大數(shù)據(jù)帶來(lái)的第一個(gè)挑戰(zhàn)就是還要不要調(diào)查數(shù)據(jù)。事實(shí)上，對(duì)調(diào)查數(shù)據(jù)的挑戰(zhàn)，取決于對(duì)調(diào)查數(shù)據(jù)的替代程度和擴(kuò)大程度。相對(duì)于大數(shù)據(jù)而言，調(diào)查數(shù)據(jù)，就是小數(shù)據(jù)。大數(shù)據(jù)與小數(shù)據(jù)有一個(gè)交集，兩種數(shù)據(jù)交集重疊的部分會(huì)怎么樣增長(zhǎng)，取決于兩個(gè)因素，一個(gè)是傳感器技術(shù)的發(fā)展，一是數(shù)據(jù)挖掘的算法技術(shù)的發(fā)展，這兩項(xiàng)技術(shù)未來(lái)的發(fā)展，直接影響到社會(huì)科學(xué)未來(lái)發(fā)展的走向。第二個(gè)挑戰(zhàn)，社會(huì)學(xué)研究范式還有用嗎？在《大數(shù)據(jù)時(shí)代》中，作者提到過(guò)去的研究范式是抽樣、精確、因果。作者說(shuō)，這三個(gè)過(guò)去我們?yōu)橹^斗的范式可能面臨著革命性的轉(zhuǎn)變。事實(shí)是否如此，現(xiàn)在依然有爭(zhēng)論，至少這是一個(gè)值得認(rèn)真思考的信號(hào)。
5，詳解大數(shù)據(jù)存儲(chǔ)哪些問(wèn)題最容易出現(xiàn)
數(shù)據(jù)是重要的生產(chǎn)要素信息時(shí)代，數(shù)據(jù)儼然已成為一種重要的生產(chǎn)要素，如同資本、勞動(dòng)力和原材料等其他要素一樣，而且作為一種普遍需求，它也不再局限于某些特殊行業(yè)的應(yīng)用。各行各業(yè)的公司都在收集并利用大量的數(shù)據(jù)分析結(jié)果，盡可能的降低成本，提高產(chǎn)品質(zhì)量、提高生產(chǎn)效率以及創(chuàng)造新的產(chǎn)品。例如，通過(guò)分析直接從產(chǎn)品測(cè)試現(xiàn)場(chǎng)收集的數(shù)據(jù)，能夠幫助企業(yè)改進(jìn)設(shè)計(jì)。此外，一家公司還可以通過(guò)深入分析客戶行為，對(duì)比大量的市場(chǎng)數(shù)據(jù)，從而超越他的競(jìng)爭(zhēng)對(duì)手。存儲(chǔ)技術(shù)必須跟上隨著大數(shù)據(jù)應(yīng)用的爆發(fā)性增長(zhǎng)，它已經(jīng)衍生出了自己獨(dú)特的架構(gòu)，而且也直接推動(dòng)了存儲(chǔ)、網(wǎng)絡(luò)以及計(jì)算技術(shù)的發(fā)展。畢竟處理大數(shù)據(jù)這種特殊的需求是一個(gè)新的挑戰(zhàn)。硬件的發(fā)展最終還是由軟件需求推動(dòng)的，就這個(gè)例子來(lái)說(shuō)，我們很明顯的看到大數(shù)據(jù)分析應(yīng)用需求正在影響著數(shù)據(jù)存儲(chǔ)基礎(chǔ)設(shè)施的發(fā)展。從另一方面看，這一變化對(duì)存儲(chǔ)廠商和其他it基礎(chǔ)設(shè)施廠商未嘗不是一個(gè)機(jī)會(huì)。隨著結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)量的持續(xù)增長(zhǎng)，以及分析數(shù)據(jù)來(lái)源的多樣化，此前存儲(chǔ)系統(tǒng)的設(shè)計(jì)已經(jīng)無(wú)法滿足大數(shù)據(jù)應(yīng)用的需要。存儲(chǔ)廠商已經(jīng)意識(shí)到這一點(diǎn)，他們開(kāi)始修改基于塊和文件的存儲(chǔ)系統(tǒng)的架構(gòu)設(shè)計(jì)以適應(yīng)這些新的要求。在這里，我們會(huì)討論哪些與大數(shù)據(jù)存儲(chǔ)基礎(chǔ)設(shè)施相關(guān)的屬性，看看它們?nèi)绾斡哟髷?shù)據(jù)的挑戰(zhàn)。容量問(wèn)題這里所說(shuō)的“大容量”通常可達(dá)到pb級(jí)的數(shù)據(jù)規(guī)模，因此，海量數(shù)據(jù)存儲(chǔ)系統(tǒng)也一定要有相應(yīng)等級(jí)的擴(kuò)展能力。與此同時(shí)，存儲(chǔ)系統(tǒng)的擴(kuò)展一定要簡(jiǎn)便，可以通過(guò)增加模塊或磁盤柜來(lái)增加容量，甚至不需要停機(jī)?；谶@樣的需求，客戶現(xiàn)在越來(lái)越青睞scale-out架構(gòu)的存儲(chǔ)。scale-out集群結(jié)構(gòu)的特點(diǎn)是每個(gè)節(jié)點(diǎn)除了具有一定的存儲(chǔ)容量之外，內(nèi)部還具備數(shù)據(jù)處理能力以及互聯(lián)設(shè)備，與傳統(tǒng)存儲(chǔ)系統(tǒng)的煙囪式架構(gòu)完全不同，scale-out架構(gòu)可以實(shí)現(xiàn)無(wú)縫平滑的擴(kuò)展，避免存儲(chǔ)孤島?！按髷?shù)據(jù)”應(yīng)用除了數(shù)據(jù)規(guī)模巨大之外，還意味著擁有龐大的文件數(shù)量。因此如何管理文件系統(tǒng)層累積的元數(shù)據(jù)是一個(gè)難題，處理不當(dāng)?shù)脑挄?huì)影響到系統(tǒng)的擴(kuò)展能力和性能，而傳統(tǒng)的nas系統(tǒng)就存在這一瓶頸。所幸的是，基于對(duì)象的存儲(chǔ)架構(gòu)就不存在這個(gè)問(wèn)題，它可以在一個(gè)系統(tǒng)中管理十億級(jí)別的文件數(shù)量，而且還不會(huì)像傳統(tǒng)存儲(chǔ)一樣遭遇元數(shù)據(jù)管理的困擾?；趯?duì)象的存儲(chǔ)系統(tǒng)還具有廣域擴(kuò)展能力，可以在多個(gè)不同的地點(diǎn)部署并組成一個(gè)跨區(qū)域的大型存儲(chǔ)基礎(chǔ)架構(gòu)。延遲問(wèn)題“大數(shù)據(jù)”應(yīng)用還存在實(shí)時(shí)性的問(wèn)題。特別是涉及到與網(wǎng)上交易或者金融類相關(guān)的應(yīng)用。舉個(gè)例子來(lái)說(shuō)，網(wǎng)絡(luò)成衣銷售行業(yè)的在線廣告推廣服務(wù)需要實(shí)時(shí)的對(duì)客戶的瀏覽記錄進(jìn)行分析，并準(zhǔn)確的進(jìn)行廣告投放。這就要求存儲(chǔ)系統(tǒng)在必須能夠支持上述