你是否曾不得不與客服代表溝通，去更正個人信息詳情——比如名字拼寫錯誤（例如：“張三”寫成了“張三豐”）、門牌號順序顛倒（例如：“1/34單元”寫成了“34/1單元”），或者其他缺失或不正確的細節(jié)？這些都是數(shù)據(jù)完整性出現(xiàn)問題的情況。

與數(shù)據(jù)完整性缺失相關的其他現(xiàn)實后果包括：

• 由于賬號號碼出錯，難以從一筆金融交易中追回款項。

• 因嵌入了笑臉表情符號，導致移動支付失敗。

• 由于地址有誤，例如在不同省份使用了同一地址名稱但錯誤的郵政編碼，而一直收不到包裹。

實際上，旨在保護正確數(shù)據(jù)的企業(yè)政策使得修正數(shù)據(jù)錯誤變得棘手。而保護個人可識別信息的政府法規(guī)也讓客戶在登記后更改個人可識別信息數(shù)據(jù)變得困難且費力。為避免像上述例子那樣影響客戶體驗，我們需要強有力的數(shù)據(jù)完整性保障。

數(shù)據(jù)完整性是一項必要的業(yè)務執(zhí)行流程，對于應對數(shù)據(jù)在從現(xiàn)實情況及事件中錄入、復制以及以其他方式轉(zhuǎn)錄時出現(xiàn)的錯誤至關重要。

隨著各類組織日益使用的數(shù)據(jù)驅(qū)動型數(shù)字流程，特別是通過機器學習的運用，有效做出數(shù)據(jù)驅(qū)動型業(yè)務決策的能力愈發(fā)受到組織運營數(shù)據(jù)和分析數(shù)據(jù)完整性的影響。

本文將探討數(shù)據(jù)完整性在您所在組織中所起的作用。

什么是數(shù)據(jù)完整性？

完整性意味著數(shù)據(jù)是可信且可靠的。在會計領域，財務結(jié)果的報告標準意味著財務報表中所報告的數(shù)字必須準確、完整且一致。

同樣的標準也適用于數(shù)據(jù)完整性。可以通過以下因素來檢驗數(shù)據(jù)的完整性：

• 數(shù)據(jù)是完整的，不存在缺失的數(shù)據(jù)元素。

• 數(shù)據(jù)是準確的，來源上不存在數(shù)據(jù)錯誤。

• 數(shù)據(jù)在不同情境下是一致的。

• 數(shù)據(jù)是及時且最新的。

當這四個條件未滿足時，數(shù)據(jù)可能就無法通過完整性檢測。其中許多問題并不明顯，有時只有通過業(yè)務流程出現(xiàn)故障或全面的數(shù)據(jù)剖析工作才能發(fā)現(xiàn)這些問題。

數(shù)據(jù)不完整性

由于信息系統(tǒng)的歷史局限性，可能因為字段不足而無法采集到所有數(shù)據(jù)。如今，由于數(shù)據(jù)模式具有可擴展性，這種情況不太常見了，但它可能導致數(shù)據(jù)被采集到錯誤的字段中（分類錯誤），或者在需要多個字段時被壓縮到一個字段里。這會引入干擾因素并降低可用性。

雖然許多系統(tǒng)設有必填字段，但過多的必填字段會拖慢客戶登記流程。這種業(yè)務選擇也可能導致數(shù)據(jù)不完整。

數(shù)據(jù)不準確

許多類型的數(shù)據(jù)，如身份證號碼和駕照號碼，都由一長串數(shù)字組成，容易出現(xiàn)人為錯誤。此外，拼寫錯誤或使用了需要在后續(xù)數(shù)據(jù)整理工作中清理的奇怪字符，也會影響數(shù)據(jù)的可用性。

其他錯誤，比如虛報出生年份（故意把自己說得更年輕或更年長）則更難察覺。帶有業(yè)務邏輯錯誤的派生或推斷字段也會影響準確性。僅支持男/女性別的老舊系統(tǒng)同樣存在問題。

數(shù)據(jù)不準確（以及不完整）偶爾可以通過對照權(quán)威數(shù)據(jù)源進行追溯性的數(shù)據(jù)匹配來修復。但對于大型數(shù)據(jù)集而言，這種方法可能無效，或者會受到法規(guī)限制而無法采用。

數(shù)據(jù)不一致

另一種數(shù)據(jù)完整性問題是自然事實與將這些真實事實轉(zhuǎn)錄到企業(yè)內(nèi)部及跨企業(yè)的數(shù)據(jù)存儲庫和登記系統(tǒng)中的業(yè)務流程之間存在不一致。或者說，記錄系統(tǒng)與存有該數(shù)據(jù)副本的輔助系統(tǒng)之間存在不一致——輔助系統(tǒng)本身成為了一個事實來源，從而導致出現(xiàn)兩個不一致的權(quán)威來源。

某家大型銀行就曾出現(xiàn)過這種情況，該行新建了一個“貴賓”客戶關系管理（CRM）系統(tǒng)，與原有的零售客戶CRM系統(tǒng)并行使用，新的貴賓CRM系統(tǒng)中采集到的更豐富數(shù)據(jù)從未反饋回零售CRM系統(tǒng)，盡管它們共享相同的客戶記錄。

數(shù)據(jù)不及時性

即便數(shù)據(jù)是完整、準確且一致的，仍可能存在完整性方面的問題。

這可能是因為數(shù)據(jù)過時了（由于批處理/抽取、轉(zhuǎn)換、加載（ETL）流程）；有效載荷的時間戳計算有誤（系統(tǒng)時間并非事件時間）；或者計算生效日期的標準與實際日期不同。又或者僅僅是因為數(shù)據(jù)陳舊，需要更新了。

當使用發(fā)票開具日期而非采購訂單日期（采購訂單日期才是合同約定日期）時，就會出現(xiàn)這種情況。這也是客戶聯(lián)絡流程為何要不斷重新確認客戶關鍵主數(shù)據(jù)的原因。

數(shù)據(jù)不真實性

雖然與會計數(shù)據(jù)未必相關，但對于個人可識別信息數(shù)據(jù)而言，我們尤其必須警惕客戶身份是否真實，特別是在登記環(huán)節(jié)。隨著網(wǎng)絡釣魚和詐騙行為日益增多，企業(yè)必須盡力確保客戶身份數(shù)據(jù)首次錄入時就是準確且完整的。

生產(chǎn)系統(tǒng)中存在的一種不真實數(shù)據(jù)是測試數(shù)據(jù)。盡管最佳實踐建議生產(chǎn)系統(tǒng)中不應存在測試數(shù)據(jù)，但實際情況很少如此，因為操作人員為應對日常業(yè)務變更被迫要在生產(chǎn)環(huán)境中進行測試。

數(shù)據(jù)溯源對數(shù)據(jù)完整性的重要性

對數(shù)據(jù)溯源起到強化或削弱作用的業(yè)務流程，與那些為組織增加營收或降低成本的業(yè)務流程一樣，都需要用心維護。

數(shù)據(jù)溯源對于確保數(shù)據(jù)的來源（事實情況）以及數(shù)據(jù)在復制及其他變更過程中所經(jīng)歷的情況（數(shù)據(jù)沿襲）未被篡改或破壞確實非常重要。而且不僅是數(shù)據(jù)本身，數(shù)據(jù)的定義（元數(shù)據(jù)）也必須盡可能保持一致。

許多組織都有健全的事實錄入機制。在銀行業(yè)，這被稱為“了解你的客戶”（KYC）。在醫(yī)療行業(yè)，有FHIR和HL7等高度標準化的患者乃至藥品數(shù)據(jù)。在其他監(jiān)管較寬松的行業(yè)，這一流程體現(xiàn)在客戶360度視圖中。

監(jiān)管較寬松的行業(yè)可能會選擇優(yōu)先考慮錄入速度，而非采集詳盡的客戶細節(jié)（這會影響完整性）。缺失或不一致的數(shù)據(jù)對下游流程的影響在于，充分挖掘客戶關系價值的能力會受到限制，例如開展高度個性化的營銷活動時，由于數(shù)據(jù)缺失，轉(zhuǎn)化率會一直很低，因為營銷活動缺乏足夠的吸引力。

對于任何要在業(yè)務流程間的價值交換中發(fā)揮最大效力的業(yè)務數(shù)據(jù)來說，關鍵數(shù)據(jù)需要與真實（或自然）的事實及事件保持完整、準確且一致，并且在組織業(yè)務范圍內(nèi)的相關數(shù)據(jù)存儲中也需如此。出于監(jiān)管和合規(guī)目的，面向外部世界的這些事實和事件的數(shù)據(jù)完整性同樣至關重要。

了解更多關于數(shù)環(huán)通的應用程序接口集成平臺即服務（iPaaS）如何在進行數(shù)據(jù)集成的同時提升并強化您的數(shù)據(jù)完整性工作的內(nèi)容。