1,數(shù)據(jù)倉(cāng)庫(kù)和大數(shù)據(jù)有什么關(guān)系2,數(shù)據(jù)倉(cāng)庫(kù)是什么意思啊通俗的講3,數(shù)據(jù)倉(cāng)庫(kù)大數(shù)據(jù)和云計(jì)算有什么區(qū)別和聯(lián)系4,數(shù)據(jù)庫(kù)與數(shù)據(jù)倉(cāng)庫(kù)有啥區(qū)別5,數(shù)據(jù)庫(kù)是什么1,數(shù)據(jù)倉(cāng)庫(kù)和大數(shù)據(jù)有什么關(guān)系
bi領(lǐng)域注重統(tǒng)計(jì)分析,傳統(tǒng)的數(shù)據(jù)庫(kù)注重在線事務(wù)。。 統(tǒng)計(jì)分析的數(shù)據(jù)量一般都比較大,注重的是查詢,一次查詢大批量的數(shù)據(jù),但是傳統(tǒng)的數(shù)據(jù)庫(kù)一般都是為了支持在線事務(wù)的,所以插入更新較多,查詢往往只根據(jù)條件查詢。。數(shù)據(jù)庫(kù)是面向事務(wù)的設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)是面向主題設(shè)計(jì)的。 數(shù)據(jù)庫(kù)一般存儲(chǔ)在線交易數(shù)據(jù),數(shù)據(jù)倉(cāng)庫(kù)存儲(chǔ)的一般是歷史數(shù)據(jù)。 在線分析處理:作儲(chǔ)存在靜態(tài)數(shù)據(jù)倉(cāng)儲(chǔ)(data warehouse)內(nèi)廣泛資源的軟件技術(shù)。其透過(guò)快速、一致、交談式的界面對(duì)同一數(shù)據(jù)提供各種不同的呈現(xiàn)方式,供不同層面的使用者如分析師、經(jīng)理及高階主管等使用,使其具備透析數(shù)據(jù)反應(yīng)出來(lái)信息的能力。對(duì)管理和決策非常有幫助
2,數(shù)據(jù)倉(cāng)庫(kù)是什么意思啊通俗的講
數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)環(huán)境,而不是一件產(chǎn)品,提供用戶用于決策支持的當(dāng)前和歷史數(shù)據(jù),這些數(shù)據(jù)在傳統(tǒng)的操作型數(shù)據(jù)庫(kù)中很難或不能得到。數(shù)據(jù)倉(cāng)庫(kù)技術(shù)是為了有效的把操作形數(shù)據(jù)集成到統(tǒng)一的環(huán)境中以提供決策型數(shù)據(jù)訪問(wèn),的各種技術(shù)和模塊的總稱。所做的一切都是為了讓用戶更快更方便查詢所需要的信息,提供決策支持。
數(shù)據(jù)倉(cāng)庫(kù)的組成
數(shù)據(jù)抽數(shù)據(jù)凈化 數(shù)據(jù)載入
信息發(fā)布系統(tǒng)
操作型數(shù)據(jù)和外界數(shù)據(jù)
數(shù)據(jù)集市
報(bào)表,查詢, eis工具
olap 工具
數(shù)據(jù)挖掘工具
操縱平臺(tái)
元數(shù)據(jù)
管理平臺(tái)如果是同一個(gè)qq號(hào)在不同的機(jī)器上出現(xiàn)這問(wèn)題`那是說(shuō)明不同的電腦qq版本不同``如果是同一臺(tái)電腦上出現(xiàn)不同的qq號(hào)的問(wèn)題(一個(gè)顯示問(wèn)問(wèn)一個(gè)不顯示)那只能說(shuō)明不顯示問(wèn)問(wèn)的qq號(hào)沒(méi)有開(kāi)通問(wèn)問(wèn)`沒(méi)有點(diǎn)亮這個(gè)圖標(biāo)```
開(kāi)通問(wèn)問(wèn)的辦法`點(diǎn)開(kāi)qq上的問(wèn)問(wèn)`自己?jiǎn)栆粋€(gè)問(wèn)題`然后找出你想要的答案`即可點(diǎn)亮`
不能問(wèn)那些灌水性質(zhì)的問(wèn)題`那樣就會(huì)被刪帖的`呵呵`數(shù)據(jù)倉(cāng)庫(kù)是一個(gè)環(huán)境,而不是一件產(chǎn)品,提供用戶用于決策支持的當(dāng)前和歷史數(shù)據(jù),這些數(shù)據(jù)在傳統(tǒng)的操作型數(shù)據(jù)庫(kù)中很難或不能得到。數(shù)據(jù)倉(cāng)庫(kù)技術(shù)是為了有效的把操作形數(shù)據(jù)集成到統(tǒng)一的環(huán)境中以提供決策型數(shù)據(jù)訪問(wèn),的各種技術(shù)和模塊的總稱。所做的一切都是為了讓用戶更快更方便查詢所需要的信息,提供決策支持。
數(shù)據(jù)倉(cāng)庫(kù)的組成
數(shù)據(jù)抽數(shù)據(jù)凈化 數(shù)據(jù)載入
信息發(fā)布系統(tǒng)
操作型數(shù)據(jù)和外界數(shù)據(jù)
數(shù)據(jù)集市
報(bào)表,查詢, eis工具
olap 工具
數(shù)據(jù)挖掘工具
操縱平臺(tái)
元數(shù)據(jù)
管理平臺(tái)
3,數(shù)據(jù)倉(cāng)庫(kù)大數(shù)據(jù)和云計(jì)算有什么區(qū)別和聯(lián)系
您好,上海藍(lán)盟為您解答。首先簡(jiǎn)單的看一下云計(jì)算與大數(shù)據(jù)的概念.1)云計(jì)算:云計(jì)算本質(zhì)上是一種計(jì)算資源集中分布和充分共享的效用計(jì)算模式,其中集中是為了計(jì)算資源的集約化管理,分布是便于擴(kuò)展計(jì)算能力.集中分布式是針對(duì)云服務(wù)提供商的,充分共享是針對(duì)用戶,在云計(jì)算中,雖然對(duì)于每個(gè)云用戶來(lái)說(shuō)都擁有一臺(tái)超級(jí)計(jì)算機(jī),但本質(zhì)上,這些用戶是充分共享了云服務(wù)商所提供的計(jì)算服務(wù).而效用計(jì)算更多的是一種商業(yè)模式,就是用戶按所需服務(wù)來(lái)付費(fèi).2)在前面的博文中,對(duì)大數(shù)據(jù)有個(gè)討論,簡(jiǎn)單的說(shuō),大數(shù)據(jù)的特點(diǎn)就是數(shù)據(jù)量大(雖然很多人都把大數(shù)據(jù)定義在t級(jí)別以上,其實(shí)我覺(jué)得這是有問(wèn)題的,大數(shù)據(jù)的大其實(shí)應(yīng)該是個(gè)相對(duì)概念,是相對(duì)于當(dāng)前的存儲(chǔ)技術(shù)和計(jì)算能力的),數(shù)據(jù)應(yīng)用需求大,計(jì)算量大.數(shù)據(jù)量大是最基本的,需求大其實(shí)包含了需求的數(shù)量、多樣性和實(shí)時(shí)性.計(jì)算量大是因?yàn)閿?shù)據(jù)量大和需求量大和算法復(fù)雜(檢索,推薦,模式識(shí)別)所致.大數(shù)據(jù)的這種特點(diǎn)使得我們很難找到通用的處理模式來(lái)解決大數(shù)據(jù)所面臨的問(wèn)題,我們只能針對(duì)不同的需求采用不同的處理方法,這也是大數(shù)據(jù)處理比較困難的癥結(jié)所在。無(wú)論是傳統(tǒng)的數(shù)據(jù)庫(kù)還是最近興起的nosql數(shù)據(jù)庫(kù),在大數(shù)據(jù)存儲(chǔ)和處理方面其實(shí)都是有非常大的局限性的,所以分布式計(jì)算才在大數(shù)據(jù)處理中大興其道。hadoop雖然提供了比較完整的一套處理模式,但相對(duì)于大數(shù)據(jù)所面臨的應(yīng)用需求的多樣性而言,能處理的問(wèn)題域也是十分有限的。數(shù)據(jù)庫(kù)和數(shù)據(jù)倉(cāng)庫(kù)的概念,大家google一下就可以了,接下來(lái),我們看看它們之間的關(guān)系:1)數(shù)據(jù)庫(kù)和數(shù)據(jù)倉(cāng)庫(kù)都是數(shù)據(jù)的一種存儲(chǔ)方式,大數(shù)據(jù)處理更多的是一種需求(問(wèn)題),而云計(jì)算是一種比較綜合的需求(問(wèn)題)解決方案。2)由于云計(jì)算本身的特性,天生就面臨大數(shù)據(jù)處理(存儲(chǔ)、計(jì)算等)問(wèn)題,因?yàn)樵朴?jì)算的基本架構(gòu)模式是c/s模式,其中s相對(duì)集中,而c是廣泛分布。所有用戶的數(shù)據(jù)和絕大部分的計(jì)算都是在s端完成的(數(shù)據(jù)量大,計(jì)算量大),加上用戶也天然具有多樣性(地域,文化,需求,個(gè)性化等),因此需求(也包括計(jì)算量)就非常大。3)云計(jì)算當(dāng)然會(huì)涉及到數(shù)據(jù)的存儲(chǔ)技術(shù),但數(shù)據(jù)庫(kù)技術(shù)對(duì)于云計(jì)算來(lái)說(shuō)要視具體的情況來(lái)分析: a)對(duì)于iaas而言,數(shù)據(jù)庫(kù)技術(shù)不是必需的,也不是必備的功能; b)對(duì)于paas來(lái)說(shuō),數(shù)據(jù)庫(kù)功能應(yīng)該是必備的功能 c)對(duì)于saas而言,必然會(huì)用到數(shù)據(jù)庫(kù)技術(shù)(包括傳統(tǒng)關(guān)系數(shù)據(jù)庫(kù)和nosql數(shù)據(jù)庫(kù))。而對(duì)于數(shù)據(jù)倉(cāng)庫(kù)技術(shù),并不是云計(jì)算所必需的,但由于云數(shù)據(jù)的信息價(jià)值極大,類(lèi)似一座金礦,我想云服務(wù)商是不可能放過(guò)從這些金礦中提取金子的.4)大數(shù)據(jù)首先所面臨的問(wèn)題就是大數(shù)據(jù)的存儲(chǔ)問(wèn)題,一般都會(huì)綜合運(yùn)用各種存儲(chǔ)技術(shù)(文件存儲(chǔ),數(shù)據(jù)庫(kù)存儲(chǔ)),當(dāng)然,你完全用文件存儲(chǔ)或者數(shù)據(jù)庫(kù)存儲(chǔ)來(lái)解決,也是沒(méi)問(wèn)題的。與云計(jì)算類(lèi)似,數(shù)據(jù)倉(cāng)庫(kù)技術(shù)不是必需的,但對(duì)于數(shù)據(jù)倉(cāng)庫(kù)技術(shù)對(duì)于結(jié)構(gòu)化數(shù)據(jù)進(jìn)行淘金還是非常有用的,當(dāng)然,你不用數(shù)據(jù)倉(cāng)庫(kù)技術(shù)也可以,比如hadoop模式。在云計(jì)算和大數(shù)據(jù)處理中,最基礎(chǔ)的技術(shù)其實(shí)是分布式計(jì)算技術(shù)。而對(duì)于構(gòu)建分布式計(jì)算而言,多線程,同步,遠(yuǎn)程調(diào)用(rpc,rmi等),進(jìn)程管理與通信是其基本技術(shù)點(diǎn)。分布式計(jì)算編程是一種綜合性應(yīng)用編程,不僅需要有基本的技術(shù)點(diǎn),還需要一定的組織管理知識(shí)。就目前來(lái)說(shuō),云計(jì)算和大數(shù)據(jù)處理其實(shí)都沒(méi)有形成一個(gè)統(tǒng)一的標(biāo)準(zhǔn)和定義。希望我的回復(fù)對(duì)您有所幫助。
4,數(shù)據(jù)庫(kù)與數(shù)據(jù)倉(cāng)庫(kù)有啥區(qū)別
簡(jiǎn)而言之,數(shù)據(jù)庫(kù)是面向事務(wù)的設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)是面向主題設(shè)計(jì)的。
數(shù)據(jù)庫(kù)一般存儲(chǔ)在線交易數(shù)據(jù),數(shù)據(jù)倉(cāng)庫(kù)存儲(chǔ)的一般是歷史數(shù)據(jù)。
數(shù)據(jù)庫(kù)設(shè)計(jì)是盡量避免冗余,一般采用符合范式的規(guī)則來(lái)設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)在設(shè)計(jì)是有意引入冗余,采用反范式的方式來(lái)設(shè)計(jì)。
數(shù)據(jù)庫(kù)是為捕獲數(shù)據(jù)而設(shè)計(jì),數(shù)據(jù)倉(cāng)庫(kù)是為分析數(shù)據(jù)而設(shè)計(jì),它的兩個(gè)基本的元素是維表和事實(shí)表。維是看問(wèn)題的角度,比如時(shí)間,部門(mén),維表放的就是這些東西的定義,事實(shí)表里放著要查詢的數(shù)據(jù),同時(shí)有維的id。
單從概念上講,有些晦澀。任何技術(shù)都是為應(yīng)用服務(wù)的,結(jié)合應(yīng)用可以很容易地理解。以銀行業(yè)務(wù)為例。數(shù)據(jù)庫(kù)是事務(wù)系統(tǒng)的數(shù)據(jù)平臺(tái),客戶在銀行做的每筆交易都會(huì)寫(xiě)入數(shù)據(jù)庫(kù),被記錄下來(lái),這里,可以簡(jiǎn)單地理解為用數(shù)據(jù)庫(kù)記帳。數(shù)據(jù)倉(cāng)庫(kù)是分析系統(tǒng)的數(shù)據(jù)平臺(tái),它從事務(wù)系統(tǒng)獲取數(shù)據(jù),并做匯總、加工,為決策者提供決策的依據(jù)。比如,某銀行某分行一個(gè)月發(fā)生多少交易,該分行當(dāng)前存款余額是多少。如果存款又多,消費(fèi)交易又多,那么該地區(qū)就有必要設(shè)立atm了。
顯然,銀行的交易量是巨大的,通常以百萬(wàn)甚至千萬(wàn)次來(lái)計(jì)算。事務(wù)系統(tǒng)是實(shí)時(shí)的,這就要求時(shí)效性,客戶存一筆錢(qián)需要幾十秒是無(wú)法忍受的,這就要求數(shù)據(jù)庫(kù)只能存儲(chǔ)很短一段時(shí)間的數(shù)據(jù)。而分析系統(tǒng)是事后的,它要提供關(guān)注時(shí)間段內(nèi)所有的有效數(shù)據(jù)。這些數(shù)據(jù)是海量的,匯總計(jì)算起來(lái)也要慢一些,但是,只要能夠提供有效的分析數(shù)據(jù)就達(dá)到目的了。
數(shù)據(jù)倉(cāng)庫(kù),是在數(shù)據(jù)庫(kù)已經(jīng)大量存在的情況下,為了進(jìn)一步挖掘數(shù)據(jù)資源、為了決策需要而產(chǎn)生的,它決不是所謂的“大型數(shù)據(jù)庫(kù)”。那么,數(shù)據(jù)倉(cāng)庫(kù)與傳統(tǒng)數(shù)據(jù)庫(kù)比較,有哪些不同呢?讓我們先看看w.h.inmon關(guān)于數(shù)據(jù)倉(cāng)庫(kù)的定義:面向主題的、集成的、與時(shí)間相關(guān)且不可修改的數(shù)據(jù)集合。
“面向主題的”:傳統(tǒng)數(shù)據(jù)庫(kù)主要是為應(yīng)用程序進(jìn)行數(shù)據(jù)處理,未必按照同一主題存儲(chǔ)數(shù)據(jù);數(shù)據(jù)倉(cāng)庫(kù)側(cè)重于數(shù)據(jù)分析工作,是按照主題存儲(chǔ)的。這一點(diǎn),類(lèi)似于傳統(tǒng)農(nóng)貿(mào)市場(chǎng)與超市的區(qū)別—市場(chǎng)里面,白菜、蘿卜、香菜會(huì)在一個(gè)攤位上,如果它們是一個(gè)小販賣(mài)的;而超市里,白菜、蘿卜、香菜則各自一塊。也就是說(shuō),市場(chǎng)里的菜(數(shù)據(jù))是按照小販(應(yīng)用程序)歸堆(存儲(chǔ))的,超市里面則是按照菜的類(lèi)型(同主題)歸堆的。
“與時(shí)間相關(guān)”:數(shù)據(jù)庫(kù)保存信息的時(shí)候,并不強(qiáng)調(diào)一定有時(shí)間信息。數(shù)據(jù)倉(cāng)庫(kù)則不同,出于決策的需要,數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)都要標(biāo)明時(shí)間屬性。決策中,時(shí)間屬性很重要。同樣都是累計(jì)購(gòu)買(mǎi)過(guò)九車(chē)產(chǎn)品的顧客,一位是最近三個(gè)月購(gòu)買(mǎi)九車(chē),一位是最近一年從未買(mǎi)過(guò),這對(duì)于決策者意義是不同的。
“不可修改”:數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)并不是最新的,而是來(lái)源于其它數(shù)據(jù)源。數(shù)據(jù)倉(cāng)庫(kù)反映的是歷史信息,并不是很多數(shù)據(jù)庫(kù)處理的那種日常事務(wù)數(shù)據(jù)(有的數(shù)據(jù)庫(kù)例如電信計(jì)費(fèi)數(shù)據(jù)庫(kù)甚至處理實(shí)時(shí)信息)。因此,數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)是極少或根本不修改的;當(dāng)然,向數(shù)據(jù)倉(cāng)庫(kù)添加數(shù)據(jù)是允許的。
數(shù)據(jù)倉(cāng)庫(kù)的出現(xiàn),并不是要取代數(shù)據(jù)庫(kù)。目前,大部分?jǐn)?shù)據(jù)倉(cāng)庫(kù)還是用關(guān)系數(shù)據(jù)庫(kù)管理系統(tǒng)來(lái)管理的??梢哉f(shuō),數(shù)據(jù)庫(kù)、數(shù)據(jù)倉(cāng)庫(kù)相輔相成、各有千秋。
補(bǔ)充一下,數(shù)據(jù)倉(cāng)庫(kù)的方案建設(shè)的目的,是為前端查詢和分析作為基礎(chǔ),由于有較大的冗余,所以需要的存儲(chǔ)也較大。為了更好地為前端應(yīng)用服務(wù),數(shù)據(jù)倉(cāng)庫(kù)必須有如下幾點(diǎn)優(yōu)點(diǎn),否則是失敗的數(shù)據(jù)倉(cāng)庫(kù)方案。
1.效率足夠高??蛻粢蟮姆治鰯?shù)據(jù)一般分為日、周、月、季、年等,可以看出,日為周期的數(shù)據(jù)要求的效率最高,要求24小時(shí)甚至12小時(shí)內(nèi),客戶能看到昨天的數(shù)據(jù)分析。由于有的企業(yè)每日的數(shù)據(jù)量很大