為什么企業(yè)在數(shù)據(jù)準(zhǔn)備上浪費(fèi)數(shù)十億美元

確保干凈的數(shù)據(jù)在企業(yè)內(nèi)部流動(dòng)就像監(jiān)視汽車的油位和質(zhì)量一樣;您都不希望在任何一種情況下都變得“骯臟”，因?yàn)樗茏龅闹皇鞘构ぷ髯兊美щy。干凈數(shù)據(jù)可以描述為完整的，準(zhǔn)確的，相關(guān)的，最新的，未損壞的和重復(fù)的，僅用于記錄集，表，對(duì)象存儲(chǔ)量或數(shù)據(jù)庫(kù)中的所需備份目的。

存儲(chǔ)干凈的數(shù)據(jù)是企業(yè)進(jìn)行準(zhǔn)確分析的關(guān)鍵要素，但是許多企業(yè)仍然依靠手動(dòng)且效率低下的流程來(lái)清理和準(zhǔn)備數(shù)據(jù)。這是數(shù)據(jù)管理工具制造商Trifacta于5月17日發(fā)布的一項(xiàng)新調(diào)查的關(guān)鍵發(fā)現(xiàn)。

Trifacta知道這個(gè)市場(chǎng)。其數(shù)據(jù)準(zhǔn)備平臺(tái)可幫助數(shù)據(jù)分析人員探索，評(píng)估和完善數(shù)據(jù)以進(jìn)行分析，并解決其業(yè)務(wù)中的重大問(wèn)題。

這家位于舊金山的公司對(duì)近300名數(shù)據(jù)專業(yè)人士進(jìn)行了一項(xiàng)全球數(shù)據(jù)準(zhǔn)備調(diào)查，以確定阻礙組織使用數(shù)據(jù)和分析的挑戰(zhàn)。

調(diào)查的主要發(fā)現(xiàn)包括：

過(guò)度依賴IT資源進(jìn)行數(shù)據(jù)準(zhǔn)備將使組織損失數(shù)十億美元。65%的IT專業(yè)人員將一半或更多的時(shí)間用于數(shù)據(jù)質(zhì)量保證，清理或準(zhǔn)備工作。根據(jù)Glassdoor的薪資估算和IDC的估算，全球有1800萬(wàn)名IT運(yùn)營(yíng)和管理專業(yè)人員，企業(yè)每年在數(shù)據(jù)準(zhǔn)備方面的支出約為5,000億美元。

59%的受訪者(IT專業(yè)人員和數(shù)據(jù)分析師)認(rèn)為，組織中的大多數(shù)數(shù)據(jù)分析師都依賴IT資源來(lái)準(zhǔn)備或訪問(wèn)數(shù)據(jù)。

83%的分析師認(rèn)為，他們能夠從對(duì)IT的依賴性降低的分析項(xiàng)目中獲得更高的價(jià)值。

業(yè)務(wù)用戶和IT之間不必要的迭代會(huì)加劇數(shù)據(jù)準(zhǔn)備的成本。調(diào)查發(fā)現(xiàn)，依賴IT來(lái)準(zhǔn)備數(shù)據(jù)的分析師經(jīng)常要求修改其初始要求，這很可能是由于原始數(shù)據(jù)內(nèi)容的意外發(fā)現(xiàn)所致。82%的分析師表示，他們定期根據(jù)新要求重新使用IT。其中包括11%的人說(shuō)他們總是這樣做。

Excel仍然是數(shù)據(jù)準(zhǔn)備的主要工具：37%的數(shù)據(jù)分析師和30%的IT專業(yè)人員使用它比其他工具準(zhǔn)備數(shù)據(jù)更多。Trifacta預(yù)測(cè)，依靠手動(dòng)驅(qū)動(dòng)的數(shù)據(jù)準(zhǔn)備工具(如Excel)將繼續(xù)延遲數(shù)據(jù)計(jì)劃并阻止新的見(jiàn)解。

分析人員認(rèn)識(shí)到，數(shù)據(jù)準(zhǔn)備的耗時(shí)性對(duì)他們的組織有害：58%的人認(rèn)為，花費(fèi)在數(shù)據(jù)質(zhì)量保證或數(shù)據(jù)清洗上的總時(shí)間花費(fèi)了他們的組織金錢(qián)，而不是為組織帶來(lái)價(jià)值。

數(shù)據(jù)分析師也花費(fèi)太多時(shí)間準(zhǔn)備數(shù)據(jù)：92%的人選擇專注于另一種分析活動(dòng)而不是數(shù)據(jù)準(zhǔn)備，但65%的人至少花費(fèi)一半的時(shí)間準(zhǔn)備數(shù)據(jù)供分析使用。

關(guān)鍵數(shù)據(jù)有風(fēng)險(xiǎn)。盡管在當(dāng)今的業(yè)務(wù)環(huán)境中，數(shù)據(jù)隱私問(wèn)題到處都是，但仍有74%的數(shù)據(jù)分析人員承認(rèn)，他們的個(gè)人計(jì)算機(jī)是存儲(chǔ)數(shù)據(jù)的前三名之一，而56%的IT專業(yè)人員也這么說(shuō)。

Trifacta對(duì)294位準(zhǔn)備數(shù)據(jù)的個(gè)人進(jìn)行了全球調(diào)查，其中179位IT專業(yè)人員為一組業(yè)務(wù)用戶準(zhǔn)備了數(shù)據(jù)，而115位數(shù)據(jù)分析師則為自己準(zhǔn)備和/或分析數(shù)據(jù)。該調(diào)查于2018年4月4日至4月13日進(jìn)行。