商業(yè)領(lǐng)袖依靠商業(yè)智能。這得益于他們的DataOps團(tuán)隊(duì)的辛勤工作，他們確保數(shù)據(jù)科學(xué)BI流程的復(fù)雜連接始終保持暢通。考慮到數(shù)據(jù)在整個(gè)過程中的中心性，如果不讓業(yè)務(wù)領(lǐng)導(dǎo)首先了解有效的DataOps意味著什么，就不能期望技術(shù)團(tuán)隊(duì)來管理它。否則，隨著戰(zhàn)略方向滿足技術(shù)，時(shí)間，技能和預(yù)算的實(shí)際限制，摩擦?xí)觿?。大?shù)據(jù)和數(shù)據(jù)處理的基本承諾是為組織提供洞察力，以做出更明智的決策。但是，我們很少會(huì)看到組織關(guān)注于如何收集數(shù)據(jù)以及關(guān)注于如何對(duì)數(shù)據(jù)采取行動(dòng)。換一種說法，他們沒有適當(dāng)考慮他們所擁有的數(shù)據(jù)...好吧...收集數(shù)據(jù)。鑒于這些見解可以在操作，可靠性和優(yōu)化資源使用方面帶來多大的改變，因此這似乎是一個(gè)疏忽。

但是，在深入研究如何整理和利用這些數(shù)據(jù)之前，先了解一下可以在數(shù)據(jù)處理和存儲(chǔ)中收集哪種輸入是有益的。如果使用得當(dāng)，它們可以大大改善流程并改善工作負(fù)載管理。

實(shí)際上，開始審查數(shù)據(jù)處理中現(xiàn)有指標(biāo)收集過程的一個(gè)好地方。雖然這聽起來像是一個(gè)陌生的起點(diǎn)，但收集數(shù)據(jù)的方法通常是負(fù)責(zé)數(shù)據(jù)收集的團(tuán)隊(duì)所固有的。為了增加指標(biāo)覆蓋范圍，在組織內(nèi)部塑造這種文化是確保您生成所需洞察力的最佳方法。一個(gè)簡(jiǎn)單的起點(diǎn)是鼓勵(lì)團(tuán)隊(duì)逐個(gè)處理數(shù)據(jù)。組織產(chǎn)生的數(shù)據(jù)量，即使是很小的數(shù)據(jù)量也很大。實(shí)際上，它似乎勢(shì)不可擋。但是，重要的是要記住，并不需要一次全部解決所有問題。相反，確定哪些數(shù)據(jù)將最好地驅(qū)動(dòng)對(duì)您的組織最重要的結(jié)果。這些將產(chǎn)生最大的價(jià)值，并從那里開始，可以對(duì)其他數(shù)據(jù)類型給予更多考慮。另一個(gè)考慮因素是嘗試使開發(fā)人員和分析人員社區(qū)的過程盡可能簡(jiǎn)單和透明。在流程變得混亂的組織中，這些團(tuán)隊(duì)可能會(huì)迷失方向，并且在數(shù)據(jù)收集中會(huì)出現(xiàn)空白。簡(jiǎn)化數(shù)據(jù)收集過程的一種簡(jiǎn)單措施是使其成為將作業(yè)部署到生產(chǎn)中的要求。

在審查組織的數(shù)據(jù)收集過程時(shí)，這也是確保數(shù)據(jù)過程仍符合法律規(guī)定的適當(dāng)時(shí)機(jī)。數(shù)據(jù)保護(hù)和隱私應(yīng)始終是組織的頭等大事，過去幾年中的許多法律都反映了這一點(diǎn)。歐洲的通用數(shù)據(jù)保護(hù)條例(GDPR)和加利福尼亞的消費(fèi)者保護(hù)法也許是最令人難忘的。盡管這些法律中的規(guī)定很多(對(duì)于本文而言，太多了)，但它們圍繞著幾個(gè)簡(jiǎn)單的前提。簡(jiǎn)而言之，他們希望組織：

了解他們正在收集哪些個(gè)人數(shù)據(jù)

了解個(gè)人數(shù)據(jù)存儲(chǔ)在哪里

了解從個(gè)人數(shù)據(jù)中獲得什么見解

了解哪些內(nèi)部/外部組可以訪問個(gè)人數(shù)據(jù)

能夠掩蓋個(gè)人數(shù)據(jù)

能夠告知客戶他們擁有哪些數(shù)據(jù)

能夠根據(jù)要求刪除客戶的個(gè)人數(shù)據(jù)

幸運(yùn)的是，在查看組織應(yīng)收集的不同指標(biāo)時(shí)，其中許多要求自然就會(huì)變得可用。那么組織應(yīng)該優(yōu)先處理哪些數(shù)據(jù)?顯然，某些數(shù)據(jù)比其他數(shù)據(jù)提供了更大的價(jià)值，并且要收集的度量標(biāo)準(zhǔn)點(diǎn)很多，這些都是應(yīng)重點(diǎn)關(guān)注的數(shù)據(jù)?？赡茏钊菀资占闹笜?biāo)是有關(guān)作業(yè)運(yùn)行時(shí)間的信息。查看什么時(shí)間，誰要求運(yùn)行該作業(yè)的運(yùn)行應(yīng)該相對(duì)簡(jiǎn)單。另一個(gè)簡(jiǎn)單的指標(biāo)是特權(quán)。使用的權(quán)限包括什么，正在運(yùn)行的代碼或SQL的運(yùn)行時(shí)間，啟動(dòng)的時(shí)間等。這些類型的指標(biāo)提供了有關(guān)生態(tài)系統(tǒng)中正在進(jìn)行哪些數(shù)據(jù)處理的更詳細(xì)的描述。但是，大多數(shù)組織都不太可能全面解決這些基本問題。