“未知”的數(shù)據(jù)對數(shù)據(jù)分析和可視化有什么影響?好處和壞處是什么?
補(bǔ)充:為什么會出現(xiàn)未知的數(shù)據(jù)? 首先是先弄清楚為什么會產(chǎn)生未知的數(shù)據(jù)?弄清楚原因之后才能更好地對癥下藥。
未知數(shù)據(jù)產(chǎn)生的原因是多種多樣的,其中可能是:
- 1、數(shù)據(jù)的采集問題: - 數(shù)據(jù)在采集到的時候就是未知的,如性別保密、生日保密等; - 數(shù)據(jù)在采集的時候缺少了采集的字段;
- 2、數(shù)據(jù)的加工問題: 在數(shù)據(jù)中間層進(jìn)行加工的時候,由于考慮不周全或者特殊場景要求,在對數(shù)據(jù)進(jìn)行清洗的過程中出現(xiàn)了數(shù)據(jù)同類合并、信息丟失的現(xiàn)象,如廣州、深圳、四川、上海四個地區(qū)的用戶中,可能會將廣州、深圳合為廣東,將四川、上海都并入其他; 也有可能將四川并入其他(廣州、深圳、上海都是城市),這是數(shù)據(jù)在清洗的過程中出現(xiàn)的信息損耗,這種情況也很容易出現(xiàn)未知數(shù)據(jù)(因?yàn)椴恢肋@個”其他“究竟是指哪些地區(qū));
- 3、數(shù)據(jù)的可視化問題: 當(dāng)數(shù)據(jù)在進(jìn)行可視化操作的時候,可能會為了突出某一個字段而將其他字段都并入了其他。
其次是“未知”數(shù)據(jù)對數(shù)據(jù)分析和數(shù)據(jù)可視化會有什么樣的影響?任何事物的存在都有其利與弊,所以對于這個問題我也是從辯證的角度來對它進(jìn)行一個整理與總結(jié):
好處:
- 1、保障了數(shù)據(jù)的完整性。數(shù)據(jù)分析應(yīng)該建立在數(shù)據(jù)的完整性、及時性與準(zhǔn)確性上面,隱藏了未知數(shù)據(jù)或許可以給工作帶來一些小方便,但是如果數(shù)據(jù)本身是殘缺的,那么分析出來的結(jié)果也是值得懷疑的,畢竟缺少了數(shù)據(jù)的完整性就更別提數(shù)據(jù)的準(zhǔn)確性了,而數(shù)據(jù)不準(zhǔn)確的數(shù)據(jù)分析結(jié)果還可靠嗎?
- 2、使數(shù)據(jù)分析結(jié)果更具有說服力。 其實(shí)也是完整性的一個拓展,在數(shù)據(jù)分析的過程中如果出現(xiàn)了問題,至少可以知道應(yīng)該從哪一方面去入手解決這個問題,進(jìn)而可以增加數(shù)據(jù)分析的維度,使分析報(bào)告的展示更加地飽滿。
- 3、在數(shù)據(jù)的可視化展示中,可以減少一些維度,突出重點(diǎn)。
“未知”數(shù)據(jù)有時候是其他數(shù)據(jù)的合并,在數(shù)據(jù)進(jìn)行可視化的時候,為了突出某一方面的重要性或者占比,我們可能會將其他數(shù)據(jù)都合并為“其他”,這是造成未知數(shù)據(jù)的一個原因之一,而這也是“未知”數(shù)據(jù)在數(shù)據(jù)可視化方面所體現(xiàn)出來的優(yōu)點(diǎn)。
壞處:
- 1、增加了數(shù)據(jù)分析的難度。 未知數(shù)據(jù)如果只是一小部分的話就還好,但是如果未知數(shù)據(jù)達(dá)到了一個量級且無法對其進(jìn)行解釋,那么在進(jìn)行數(shù)據(jù)分析的時候就很難進(jìn)行下去了。
未知數(shù)據(jù)太多了,數(shù)據(jù)就會失去參考價(jià)值,進(jìn)而容易加大數(shù)據(jù)分析的難度;
- 2、數(shù)據(jù)的可讀性下降。 如果無法解決未知數(shù)據(jù)所包含的信息有哪些這個問題,就很容易導(dǎo)致數(shù)據(jù)的可讀性下降。
比如說,用戶的性別中男性、女性跟未知的占比,如果未知的占比過大,我們很難在結(jié)果中說明用戶主要是男性居多還是女性居多。 這種情況下,由于未知數(shù)據(jù)隱藏了較多的信息,會直接導(dǎo)致數(shù)據(jù)的可讀性嚴(yán)重下降。