數(shù)據(jù)倉庫的數(shù)據(jù)模型是什么？數(shù)據(jù)倉庫接是個的兩種數(shù)據(jù)倉庫建模的理論是維度建模和基于主題域的實體關(guān)系建模，這兩種四個以Kimball和Immon兩位大師為代表。維度建模以數(shù)據(jù)分析需求為驅(qū)動，倡導(dǎo)人總線架構(gòu)

數(shù)據(jù)倉庫的數(shù)據(jù)模型是什么？

數(shù)據(jù)倉庫接是個的兩種數(shù)據(jù)倉庫建模的理論是維度建模和基于主題域的實體關(guān)系建模，這兩種四個以Kimball和Immon兩位大師為代表。維度建模以數(shù)據(jù)分析需求為驅(qū)動，倡導(dǎo)人總線架構(gòu)：完全不同的事實和相同的維度，這種數(shù)據(jù)模型更易用戶理解和數(shù)據(jù)分析操作。實現(xiàn)主題域的實體關(guān)系建模以源系統(tǒng)數(shù)據(jù)為驅(qū)動，全部整合企業(yè)的所有數(shù)據(jù)，站在企業(yè)級的垂直距離對數(shù)據(jù)接受抽象概念，整合，按結(jié)構(gòu)3NF的實體關(guān)系理論建模，這種數(shù)據(jù)建模以頗為抽象的一段時間組建一個相對穩(wěn)定的數(shù)據(jù)模型，并能請看企業(yè)級的數(shù)據(jù)關(guān)系。在工業(yè)界一般說來把兩種生克制化起來運用數(shù)據(jù)倉庫的完全不同數(shù)據(jù)層次結(jié)構(gòu)中。

我們上周要注意是對于區(qū)分基于條件主題域的實體關(guān)系建模中信息整合的接受特有踏入的討論，再討論了200元以內(nèi)三種思路：

以屬性涌去的同一主題域中不同實體的屬性。比如說對于會員、公司、客戶等等實體對象我們也有地址屬性信息、名稱標(biāo)識屬性信息等等，這種思路應(yīng)該是把屬性內(nèi)聚性高的字段整合起來在一起，并把有所不同的屬性打上類型標(biāo)識以樹表的形式儲存時。它的優(yōu)點是：第一，模型穩(wěn)定性好，外圍系統(tǒng)變化了字段，只要先添加有所不同的類型，不不需要進行表結(jié)構(gòu)的變更；第二，減少大量冗余設(shè)計記歷史數(shù)據(jù)。它的缺點是：第一，丟失的了很多實體的屬性標(biāo)示信息，我們從模型上將無法看到一個會員究竟是什么人有哪些地址屬性，沒有辦法是從網(wǎng)上查詢類型代碼才能聲望兌換這些信息；第二，它十分的膨脹數(shù)據(jù)表的記錄數(shù)，而且它區(qū)分豎表的形式存放；第三，運用過來不是那么容易，效率是一個大問題，畢竟我們往往要可以使用一個實體的多個字段，可能會有很多join操作和豎轉(zhuǎn)橫的操作。第四：屬性涌去確實是一件也很難你的操作的過程，應(yīng)為這是一個抽象的過程，對建模人員的業(yè)務(wù)背景知識和抽象化能力都提議了很高的要求；第五：確實下降了冗余的記歷史數(shù)據(jù)，不過記歷史的操作也相對急切。

常規(guī)面向?qū)ο蠼５?，抽象化相同實體的同盟協(xié)議屬性，接著再一步步區(qū)分繼承、組合等面向?qū)ο蟮乃枷肟刹僮骰瘜嶓w。他的優(yōu)點是模型模型概念都很模糊，缺點都是模型低些又不是很穩(wěn)定點，整合后的數(shù)據(jù)的后續(xù)應(yīng)該要也無法應(yīng)付再融合的問題。

貼源的建模

常規(guī)都差不多持續(xù)源系統(tǒng)的進行建模，上重點放進數(shù)據(jù)的標(biāo)準(zhǔn)化，一致化，和數(shù)據(jù)業(yè)務(wù)意義的梳理。這種做法和我們目前數(shù)據(jù)倉庫的做法比較好帶有。它具高可以實行比較很難，快速實現(xiàn)方法，前臺這個可以真接不使用數(shù)據(jù)；缺點是全部整合度不高，模型不穩(wěn)定啊。

模型縱然是為數(shù)據(jù)分析應(yīng)用服務(wù)的，具體一點區(qū)分什么建模需要依據(jù)什么換算業(yè)務(wù)特點和源系統(tǒng)的特點改變。的源系統(tǒng)具有變化快，數(shù)據(jù)分析應(yīng)該要變化快的特點，也要快的特點，而且我們沒有要求差別系統(tǒng)之間整合的需求并又不是很大，往往深度的數(shù)據(jù)整合給他的是應(yīng)用形式上的不大方便。而，我個人都覺得常規(guī)貼源的是當(dāng)前更具競爭力的方案。

hive數(shù)據(jù)倉庫的設(shè)計，項目中分了幾層，每層有什么意義？

數(shù)據(jù)倉庫的設(shè)計，個人建議去看一看Kimball的維度模型設(shè)計的咨詢書籍。

一般來說，數(shù)據(jù)倉庫會包含維度表，事實表，包括相關(guān)的匯總資料結(jié)果，大多以cube形式存在的多維分析的結(jié)果集。

維度表是指用處看數(shù)據(jù)的完全不同劃分角度，如按時間一欄，按城市查看等等，這里的時間，城市等那就是維度，數(shù)據(jù)倉庫里像是會對這些數(shù)據(jù)分開來管理，自然形成維度表，同時針對維度表的變化，有些填寫的差別處理方案。事實表則讀取了按維度劃分的度量指標(biāo)的記錄，如記錄信息相同時間，有所不同城市的銷售額的表，這其中的銷售額那就是一種度量，這個可以明確的時間，城市等維度進行劃分，同樣的也這個可以聚合匯總。

對數(shù)據(jù)接受了維度與事實的劃分后，就也可以依據(jù)需求，按有所不同的維度組合接受事實表的查詢。cube象會按重新制定的維度組合參與預(yù)換算，并將各維度成組合的值存儲下了，以備然后去查詢。