在本系列的第1部分和第2部分中，描述了數(shù)據(jù)倉庫（DW）和商業(yè)智能（BI）項(xiàng)目如何成為許多組織的高度優(yōu)先事項(xiàng)。項(xiàng)目發(fā)起人尋求在整個(gè)企業(yè)中授權(quán)更多更好的數(shù)據(jù)驅(qū)動決策和行動； 他們打算擴(kuò)展其用于BI，分析和數(shù)據(jù)發(fā)現(xiàn)的用戶基礎(chǔ)，以便用戶做出明智的決策。

避免的這一系列錯(cuò)誤集中在幫助組織回避DW項(xiàng)目中遇到的數(shù)據(jù)質(zhì)量問題。 此處提供的提示將有助于確保DW團(tuán)隊(duì)計(jì)劃和實(shí)施新功能時(shí)的滿意度。

以下是各種實(shí)踐者遇到的更多錯(cuò)誤：

取決于BI報(bào)告測試以發(fā)現(xiàn)數(shù)據(jù)倉庫中的缺陷

DW項(xiàng)目充滿挑戰(zhàn)-從倉庫中的數(shù)據(jù)質(zhì)量到BI報(bào)表中的派生值。如果不能及時(shí)解決，那么糟糕的數(shù)據(jù)質(zhì)量（尤其是在數(shù)據(jù)倉庫中）可能會導(dǎo)致整個(gè)項(xiàng)目停頓。

由于缺乏數(shù)據(jù)質(zhì)量，數(shù)據(jù)倉庫常常不能達(dá)到預(yù)期的效果。 研究表明，將數(shù)據(jù)從源移動到數(shù)據(jù)倉庫和數(shù)據(jù)保管庫的各個(gè)區(qū)域時(shí)，數(shù)據(jù)質(zhì)量通常會下降。在開始加載源時(shí)以及在清理，轉(zhuǎn)換，聚合和集成到數(shù)據(jù)倉庫的每個(gè)步驟中，應(yīng)該對數(shù)據(jù)質(zhì)量進(jìn)行徹底的評估。

以下是五個(gè)DW數(shù)據(jù)問題（在多項(xiàng)研究中均已確定），這些問題發(fā)生的可能性最大，并直接影響項(xiàng)目的成功。請注意，這些風(fēng)險(xiǎn)很少與BI報(bào)告中的缺陷相關(guān)。

• 源數(shù)據(jù)質(zhì)量錯(cuò)誤-來自內(nèi)部和外部源
• 源到目標(biāo)的數(shù)據(jù)映射和架構(gòu)錯(cuò)誤
• 多個(gè)ETL流程導(dǎo)致的數(shù)據(jù)錯(cuò)誤
• 查詢性能問題ETL流程
• 數(shù)據(jù)清理和轉(zhuǎn)換錯(cuò)誤

BI和分析報(bào)告測試應(yīng)全部關(guān)于確保從數(shù)據(jù)倉庫正確訪問數(shù)據(jù)，定義報(bào)告布局，滿足可用性要求，報(bào)告向下鉆取和匯總正常工作。當(dāng)您得知數(shù)據(jù)集市中的數(shù)據(jù)丟失或重復(fù)或者在ETL驗(yàn)證期間應(yīng)該發(fā)現(xiàn)的其他缺陷時(shí)，則不應(yīng)進(jìn)行BI報(bào)告測試過程。

無法充分執(zhí)行DW性能，負(fù)載和壓力測試

大多數(shù)項(xiàng)目經(jīng)理不會在其DW項(xiàng)目的開發(fā)過程中延遲功能和數(shù)據(jù)質(zhì)量測試。但是，太多的DW項(xiàng)目正在開發(fā)生命周期的后期階段測試性能，負(fù)載，壓力，安全性和恢復(fù)-有時(shí)沒有足夠的時(shí)間來糾正發(fā)現(xiàn)的任何重要問題。

不合格的性能可能是取消DW項(xiàng)目的重要原因。應(yīng)該針對查詢響應(yīng)時(shí)間和ETL時(shí)間（例如每小時(shí)，每天）探索DW性能。 當(dāng)訪問數(shù)百萬或更多行進(jìn)行計(jì)算時(shí)，查詢響應(yīng)時(shí)間可能長達(dá)幾分鐘。 除少數(shù)例外，這是不可接受的。這樣的性能將負(fù)面影響DW對用戶的可用性。

DW性能在很大程度上取決于數(shù)據(jù)庫性能。老式的開發(fā)方法將性能測試保留在開發(fā)生命周期的后期。 根本不可能提早測試性能，因?yàn)橹钡接螒蚝笃诓庞写硇缘墓ぷ飨到y(tǒng)。

敏捷數(shù)據(jù)庫性能測試的一些最佳實(shí)踐包括：

• 制定績效測試計(jì)劃：應(yīng)該確定針對單個(gè)交易和常見用例的測試。 測試負(fù)載應(yīng)配置為在從空閑到斷點(diǎn)應(yīng)力測試的各種負(fù)載下測試吞吐量。 并發(fā)測試應(yīng)改變目標(biāo)數(shù)據(jù)，以識別應(yīng)用程序框架和數(shù)據(jù)庫級別的緩存問題。
• 提供足夠的時(shí)間和預(yù)算：用于部署合適的性能測試環(huán)境。 性能測試平臺應(yīng)具有生產(chǎn)規(guī)模或可量化的比例。
• 規(guī)劃實(shí)際可擴(kuò)展的數(shù)據(jù)：這可以是生產(chǎn)快照（對于現(xiàn)有系統(tǒng)），或者可能需要針對新的或快速增長的系統(tǒng)進(jìn)行實(shí)際可擴(kuò)展的綜合數(shù)據(jù)。

無法向項(xiàng)目團(tuán)隊(duì)提供足夠的測試結(jié)果指標(biāo)

在測試團(tuán)隊(duì)中，關(guān)鍵的可交付成果之一是傳遞測試工作進(jìn)度和測試狀態(tài)的信息。測試指標(biāo)對于了解當(dāng)前的測試工作并考慮開發(fā)和測試中需要的改進(jìn)至關(guān)重要。

如今，許多DW測試是由業(yè)務(wù)分析師，數(shù)據(jù)分析師和開發(fā)人員進(jìn)行的。結(jié)果，許多DW項(xiàng)目上的可行測試指標(biāo)可能不可用。許多QA團(tuán)隊(duì)的成員減少了對DW測試的參與，部分原因是缺乏與數(shù)據(jù)相關(guān)的技術(shù)技能，這是測試DW項(xiàng)目所需的技能。

始終需要與質(zhì)量保證相關(guān)的指標(biāo)。您的項(xiàng)目團(tuán)隊(duì)將只能改進(jìn)和控制在計(jì)劃，開發(fā)，執(zhí)行和完成測試時(shí)所測量的內(nèi)容，這些測試使用量化進(jìn)度和成功的指標(biāo)來報(bào)告。

質(zhì)量保證指標(biāo)必須設(shè)計(jì)為值得信賴，并用于制定可行的項(xiàng)目決策。在DW測試期間開發(fā)的度量標(biāo)準(zhǔn)為項(xiàng)目和業(yè)務(wù)經(jīng)理提供了兩個(gè)主要好處：可以查看1）發(fā)布到生產(chǎn)中的成熟度和準(zhǔn)備情況，以及2）開發(fā)中的軟件產(chǎn)品的質(zhì)量。測試報(bào)告通過清楚地評估DW項(xiàng)目的質(zhì)量和完整性，可以有效地管理軟件開發(fā)過程。

每個(gè)DW主要質(zhì)量類別的度量標(biāo)準(zhǔn)-數(shù)據(jù)庫管理質(zhì)量，數(shù)據(jù)模型/架構(gòu)質(zhì)量，數(shù)據(jù)倉庫數(shù)據(jù)質(zhì)量-理想情況下應(yīng)包括：測試用例通過/失敗度量標(biāo)準(zhǔn)，生產(chǎn)率度量標(biāo)準(zhǔn)（即計(jì)劃的測試是運(yùn)行還是未運(yùn)行） ，DW組件的缺陷率密度，按優(yōu)先級/嚴(yán)重性發(fā)現(xiàn)的缺陷以及測試未涵蓋的要求。

質(zhì)量檢查團(tuán)隊(duì)?wèi)?yīng)向利益相關(guān)者提供測試指標(biāo)，以證明其測試進(jìn)度。而且，質(zhì)量保證指標(biāo)可幫助項(xiàng)目涉眾制定出行與不行項(xiàng)目決策。

慧都 BI 提供Qlik的產(chǎn)品和技術(shù)服務(wù)，更有企業(yè)級BI業(yè)務(wù)分析解決方案，我們擁有包括Tableau、Power BI和 IBM Cognos全球領(lǐng)先的BI產(chǎn)品，并提供相關(guān)解決方案，讓數(shù)據(jù)創(chuàng)造無限價(jià)值。詳情可咨詢慧都網(wǎng)在線客服>>