在本系列的第1部分和第2部分中，描述了數(shù)據(jù)倉(cāng)庫(kù)（DW）和商業(yè)智能（BI）項(xiàng)目如何成為許多組織的高度優(yōu)先事項(xiàng)。項(xiàng)目發(fā)起人尋求在整個(gè)企業(yè)中授權(quán)更多更好的數(shù)據(jù)驅(qū)動(dòng)決策和行動(dòng)； 他們打算擴(kuò)展其用于BI，分析和數(shù)據(jù)發(fā)現(xiàn)的用戶基礎(chǔ)，以便用戶做出明智的決策。

避免的這一系列錯(cuò)誤集中在幫助組織回避DW項(xiàng)目中遇到的數(shù)據(jù)質(zhì)量問(wèn)題。 此處提供的提示將有助于確保DW團(tuán)隊(duì)計(jì)劃和實(shí)施新功能時(shí)的滿意度。

以下是各種實(shí)踐者遇到的更多錯(cuò)誤：

取決于BI報(bào)告測(cè)試以發(fā)現(xiàn)數(shù)據(jù)倉(cāng)庫(kù)中的缺陷

DW項(xiàng)目充滿挑戰(zhàn)-從倉(cāng)庫(kù)中的數(shù)據(jù)質(zhì)量到BI報(bào)表中的派生值。如果不能及時(shí)解決，那么糟糕的數(shù)據(jù)質(zhì)量（尤其是在數(shù)據(jù)倉(cāng)庫(kù)中）可能會(huì)導(dǎo)致整個(gè)項(xiàng)目停頓。

由于缺乏數(shù)據(jù)質(zhì)量，數(shù)據(jù)倉(cāng)庫(kù)常常不能達(dá)到預(yù)期的效果。 研究表明，將數(shù)據(jù)從源移動(dòng)到數(shù)據(jù)倉(cāng)庫(kù)和數(shù)據(jù)保管庫(kù)的各個(gè)區(qū)域時(shí)，數(shù)據(jù)質(zhì)量通常會(huì)下降。在開(kāi)始加載源時(shí)以及在清理，轉(zhuǎn)換，聚合和集成到數(shù)據(jù)倉(cāng)庫(kù)的每個(gè)步驟中，應(yīng)該對(duì)數(shù)據(jù)質(zhì)量進(jìn)行徹底的評(píng)估。

以下是五個(gè)DW數(shù)據(jù)問(wèn)題（在多項(xiàng)研究中均已確定），這些問(wèn)題發(fā)生的可能性最大，并直接影響項(xiàng)目的成功。請(qǐng)注意，這些風(fēng)險(xiǎn)很少與BI報(bào)告中的缺陷相關(guān)。

• 源數(shù)據(jù)質(zhì)量錯(cuò)誤-來(lái)自內(nèi)部和外部源
• 源到目標(biāo)的數(shù)據(jù)映射和架構(gòu)錯(cuò)誤
• 多個(gè)ETL流程導(dǎo)致的數(shù)據(jù)錯(cuò)誤
• 查詢性能問(wèn)題ETL流程
• 數(shù)據(jù)清理和轉(zhuǎn)換錯(cuò)誤

BI和分析報(bào)告測(cè)試應(yīng)全部關(guān)于確保從數(shù)據(jù)倉(cāng)庫(kù)正確訪問(wèn)數(shù)據(jù)，定義報(bào)告布局，滿足可用性要求，報(bào)告向下鉆取和匯總正常工作。當(dāng)您得知數(shù)據(jù)集市中的數(shù)據(jù)丟失或重復(fù)或者在ETL驗(yàn)證期間應(yīng)該發(fā)現(xiàn)的其他缺陷時(shí)，則不應(yīng)進(jìn)行BI報(bào)告測(cè)試過(guò)程。

無(wú)法充分執(zhí)行DW性能，負(fù)載和壓力測(cè)試

大多數(shù)項(xiàng)目經(jīng)理不會(huì)在其DW項(xiàng)目的開(kāi)發(fā)過(guò)程中延遲功能和數(shù)據(jù)質(zhì)量測(cè)試。但是，太多的DW項(xiàng)目正在開(kāi)發(fā)生命周期的后期階段測(cè)試性能，負(fù)載，壓力，安全性和恢復(fù)-有時(shí)沒(méi)有足夠的時(shí)間來(lái)糾正發(fā)現(xiàn)的任何重要問(wèn)題。

不合格的性能可能是取消DW項(xiàng)目的重要原因。應(yīng)該針對(duì)查詢響應(yīng)時(shí)間和ETL時(shí)間（例如每小時(shí)，每天）探索DW性能。 當(dāng)訪問(wèn)數(shù)百萬(wàn)或更多行進(jìn)行計(jì)算時(shí)，查詢響應(yīng)時(shí)間可能長(zhǎng)達(dá)幾分鐘。 除少數(shù)例外，這是不可接受的。這樣的性能將負(fù)面影響DW對(duì)用戶的可用性。

DW性能在很大程度上取決于數(shù)據(jù)庫(kù)性能。老式的開(kāi)發(fā)方法將性能測(cè)試保留在開(kāi)發(fā)生命周期的后期。 根本不可能提早測(cè)試性能，因?yàn)橹钡接螒蚝笃诓庞写硇缘墓ぷ飨到y(tǒng)。

敏捷數(shù)據(jù)庫(kù)性能測(cè)試的一些最佳實(shí)踐包括：

• 制定績(jī)效測(cè)試計(jì)劃：應(yīng)該確定針對(duì)單個(gè)交易和常見(jiàn)用例的測(cè)試。 測(cè)試負(fù)載應(yīng)配置為在從空閑到斷點(diǎn)應(yīng)力測(cè)試的各種負(fù)載下測(cè)試吞吐量。 并發(fā)測(cè)試應(yīng)改變目標(biāo)數(shù)據(jù)，以識(shí)別應(yīng)用程序框架和數(shù)據(jù)庫(kù)級(jí)別的緩存問(wèn)題。
• 提供足夠的時(shí)間和預(yù)算：用于部署合適的性能測(cè)試環(huán)境。 性能測(cè)試平臺(tái)應(yīng)具有生產(chǎn)規(guī)模或可量化的比例。
• 規(guī)劃實(shí)際可擴(kuò)展的數(shù)據(jù)：這可以是生產(chǎn)快照（對(duì)于現(xiàn)有系統(tǒng)），或者可能需要針對(duì)新的或快速增長(zhǎng)的系統(tǒng)進(jìn)行實(shí)際可擴(kuò)展的綜合數(shù)據(jù)。

無(wú)法向項(xiàng)目團(tuán)隊(duì)提供足夠的測(cè)試結(jié)果指標(biāo)

在測(cè)試團(tuán)隊(duì)中，關(guān)鍵的可交付成果之一是傳遞測(cè)試工作進(jìn)度和測(cè)試狀態(tài)的信息。測(cè)試指標(biāo)對(duì)于了解當(dāng)前的測(cè)試工作并考慮開(kāi)發(fā)和測(cè)試中需要的改進(jìn)至關(guān)重要。

如今，許多DW測(cè)試是由業(yè)務(wù)分析師，數(shù)據(jù)分析師和開(kāi)發(fā)人員進(jìn)行的。結(jié)果，許多DW項(xiàng)目上的可行測(cè)試指標(biāo)可能不可用。許多QA團(tuán)隊(duì)的成員減少了對(duì)DW測(cè)試的參與，部分原因是缺乏與數(shù)據(jù)相關(guān)的技術(shù)技能，這是測(cè)試DW項(xiàng)目所需的技能。

始終需要與質(zhì)量保證相關(guān)的指標(biāo)。您的項(xiàng)目團(tuán)隊(duì)將只能改進(jìn)和控制在計(jì)劃，開(kāi)發(fā)，執(zhí)行和完成測(cè)試時(shí)所測(cè)量的內(nèi)容，這些測(cè)試使用量化進(jìn)度和成功的指標(biāo)來(lái)報(bào)告。

質(zhì)量保證指標(biāo)必須設(shè)計(jì)為值得信賴，并用于制定可行的項(xiàng)目決策。在DW測(cè)試期間開(kāi)發(fā)的度量標(biāo)準(zhǔn)為項(xiàng)目和業(yè)務(wù)經(jīng)理提供了兩個(gè)主要好處：可以查看1）發(fā)布到生產(chǎn)中的成熟度和準(zhǔn)備情況，以及2）開(kāi)發(fā)中的軟件產(chǎn)品的質(zhì)量。測(cè)試報(bào)告通過(guò)清楚地評(píng)估DW項(xiàng)目的質(zhì)量和完整性，可以有效地管理軟件開(kāi)發(fā)過(guò)程。

每個(gè)DW主要質(zhì)量類別的度量標(biāo)準(zhǔn)-數(shù)據(jù)庫(kù)管理質(zhì)量，數(shù)據(jù)模型/架構(gòu)質(zhì)量，數(shù)據(jù)倉(cāng)庫(kù)數(shù)據(jù)質(zhì)量-理想情況下應(yīng)包括：測(cè)試用例通過(guò)/失敗度量標(biāo)準(zhǔn)，生產(chǎn)率度量標(biāo)準(zhǔn)（即計(jì)劃的測(cè)試是運(yùn)行還是未運(yùn)行） ，DW組件的缺陷率密度，按優(yōu)先級(jí)/嚴(yán)重性發(fā)現(xiàn)的缺陷以及測(cè)試未涵蓋的要求。

質(zhì)量檢查團(tuán)隊(duì)?wèi)?yīng)向利益相關(guān)者提供測(cè)試指標(biāo)，以證明其測(cè)試進(jìn)度。而且，質(zhì)量保證指標(biāo)可幫助項(xiàng)目涉眾制定出行與不行項(xiàng)目決策。

慧都 BI 提供Qlik的產(chǎn)品和技術(shù)服務(wù)，更有企業(yè)級(jí)BI業(yè)務(wù)分析解決方案，我們擁有包括Tableau、Power BI和 IBM Cognos全球領(lǐng)先的BI產(chǎn)品，并提供相關(guān)解決方案，讓數(shù)據(jù)創(chuàng)造無(wú)限價(jià)值。詳情可咨詢慧都網(wǎng)在線客服>>