1，哪位大俠能提供一個oracle大數(shù)據(jù)存儲的解決辦法2，大數(shù)據(jù)儲存解決方案3，大數(shù)據(jù)時代數(shù)據(jù)應(yīng)該如何存儲1，哪位大俠能提供一個oracle大數(shù)據(jù)存儲的解決辦法
數(shù)據(jù)量這么大，可以考慮利用機器的性能。而不是數(shù)據(jù)庫本身了。
a)考慮多線程；
b)分多次查詢，多次插入，這樣查詢與插入可以并行。
比較麻煩的是要考慮數(shù)據(jù)庫的異?；貪L等處理,尤其是多線程中。
2，大數(shù)據(jù)儲存解決方案
考沒考慮用云盤存儲。把text1存儲到你想存儲的文件 a=text1 open 路徑 (文件名).txtfor output as #1 print #1,a close #1 把讀取出的數(shù)據(jù)付給text1 open 路徑 (文件名).txtfor input as #1 input #1,a close #1 text1=a
3，大數(shù)據(jù)時代數(shù)據(jù)應(yīng)該如何存儲
pb或多pb級基礎(chǔ)設(shè)施與傳統(tǒng)大規(guī)模數(shù)據(jù)集之間的差別簡直就像白天和黑夜的差別，就像在筆記本電腦上處理數(shù)據(jù)和在raid陣列上處理數(shù)據(jù)之間的差別。當(dāng)day在2009年加入shutterfly時，存儲已經(jīng)成為該公司最大的開支，并且以飛快的速度增長。每n個pb的額外存儲意味著我們需要另一個存儲管理員來支持物理和邏輯基礎(chǔ)設(shè)施，day表示，面對大規(guī)模數(shù)據(jù)存儲，系統(tǒng)會更頻繁地出問題，任何管理超大存儲的人經(jīng)常都要處理硬件故障。大家都在試圖解決的根本問題是：當(dāng)你知道存儲的一部分將在一段時間內(nèi)出現(xiàn)問題，你應(yīng)該如何確保數(shù)據(jù)可用性，同時確保不會降低性能？raid問題解決故障的標(biāo)準(zhǔn)答案是復(fù)制，通常以raid陣列的形式。但day表示，面對龐大規(guī)模的數(shù)據(jù)時，raid解決問題的同時可能會制造更多問題。在傳統(tǒng)raid數(shù)據(jù)存儲方案中，每個數(shù)據(jù)的副本都被鏡像和存儲在陣列的不同磁盤中，以確保完整性和可用性。但這意味著每個被鏡像和存儲的數(shù)據(jù)將需要其本身五倍以上的存儲空間。隨著raid陣列中使用的磁盤越來越大（從密度和功耗的角度來看，3tb磁盤非常具有吸引力），更換故障驅(qū)動器的時間也將變得越來越長。實際上，我們使用raid并不存在任何操作問題，day表示，我們看到的是，隨著磁盤變得越來越大，當(dāng)任何組件發(fā)生故障時，我們回到一個完全冗余的系統(tǒng)的時間增加。生成校驗是與數(shù)據(jù)集的大小成正比的。當(dāng)我們開始使用1tb和2tb的磁盤時，回到完全冗余系統(tǒng)的時間變得很長?？梢哉f，這種趨勢并沒有朝著正確的方向發(fā)展。對于shutterfly而言，可靠性和可用性是非常關(guān)鍵的因素，這也是企業(yè)級存儲的要求。day表示，其快速膨脹的存儲成本使商品系統(tǒng)變得更具吸引力。當(dāng)day及其團(tuán)隊在研究潛在技術(shù)解決方案以幫助控制存儲成本時，他們對于一項叫做糾刪碼（erasure code）的技術(shù)非常感興趣。采用擦除代碼技術(shù)的下一代存儲里德-所羅門糾刪碼最初作為前向糾錯碼（forward error correction, fec）用于不可靠通道的數(shù)據(jù)傳輸，例如外層空間探測的數(shù)據(jù)傳輸。這項技術(shù)還被用于cd和dvd來處理光盤上的故障，例如灰塵和劃痕。一些存儲供應(yīng)商已經(jīng)開始將糾刪碼納入他們的解決方案中。使用糾刪碼，數(shù)據(jù)可以被分解成幾塊，單塊分解數(shù)據(jù)是無用的，然后它們被分散到不同磁盤驅(qū)動器或者服務(wù)器。在任何使用，這些數(shù)據(jù)都可以完全重組，即使有些數(shù)據(jù)塊因為磁盤故障已經(jīng)丟失。換句話說，你不需要創(chuàng)建多個數(shù)據(jù)副本，單個數(shù)據(jù)就可以確保數(shù)據(jù)的完整性和可用性?；诩m刪碼的解決方案的早期供應(yīng)商之一是cleversafe公司，他們添加了位置信息來創(chuàng)建其所謂的分散編碼，讓用戶可以在不同位置（例如多個數(shù)據(jù)中心）存儲數(shù)據(jù)塊或者說數(shù)據(jù)片。每個數(shù)據(jù)塊就其自身而言是無用的，這樣能夠確保隱私性和安全性。因為信息分散技術(shù)使用單一數(shù)據(jù)來確保數(shù)據(jù)完整性和可用性，而不是像raid一樣使用多個副本，公司可以節(jié)省多達(dá)90%的存儲成本。當(dāng)你將試圖重組數(shù)據(jù)時，你并不一定需要提供所有數(shù)據(jù)塊，cleversafe公司產(chǎn)品策略、市場營銷和客戶解決方案副總裁russ kennedy表示，你生成的數(shù)據(jù)塊的數(shù)量，我們稱之為寬度，我們將重組數(shù)據(jù)需要的最低數(shù)量稱之為門檻。你生成的數(shù)據(jù)塊的數(shù)量和重組需要的數(shù)量之間的差異決定了其可靠性。同時，即使你丟失節(jié)點和驅(qū)動器，你仍然能夠得到原來形式的數(shù)據(jù)。