網(wǎng)友解答: 大數(shù)據(jù)是互聯(lián)網(wǎng)的海量數(shù)據(jù)挖掘，而數(shù)據(jù)挖掘更多是針對內(nèi)部企業(yè)行業(yè)小眾化的數(shù)據(jù)挖掘，大數(shù)據(jù)需要分析的是趨勢和發(fā)展，數(shù)據(jù)挖掘主要發(fā)現(xiàn)的是問題和診斷。具體分析如下：1、大數(shù)據(jù)(big

大數(shù)據(jù)是互聯(lián)網(wǎng)的海量數(shù)據(jù)挖掘，而數(shù)據(jù)挖掘更多是針對內(nèi)部企業(yè)行業(yè)小眾化的數(shù)據(jù)挖掘，大數(shù)據(jù)需要分析的是趨勢和發(fā)展，數(shù)據(jù)挖掘主要發(fā)現(xiàn)的是問題和診斷。具體分析如下：

1、大數(shù)據(jù)(big data)：

指無法在可承受的時間范圍內(nèi)用常規(guī)軟件工具進行捕捉、管理和處理的數(shù)據(jù)集合，是需要新處理模式才能具有更強的決策力、洞察發(fā)現(xiàn)力和流程優(yōu)化能力的海量、高增長率和多樣化的信息資產(chǎn);

在維克托·邁爾-舍恩伯格及肯尼斯·庫克耶編寫的《大數(shù)據(jù)時代》 中大數(shù)據(jù)指不用隨機分析法(抽樣調(diào)查)這樣的捷徑，而采用所有數(shù)據(jù)進行分析處理。大數(shù)據(jù)的5V特點(IBM提出)：Volume(大量)、Velocity(高速)、Variety(多樣)、Value(價值)Veracity(真實性) 。

2、數(shù)據(jù)挖掘(英語：Data mining)：

又譯為資料探勘、數(shù)據(jù)采礦。它是數(shù)據(jù)庫知識發(fā)現(xiàn)(英語：Knowledge-Discovery in Databases，簡稱：KDD)中的一個步驟。數(shù)據(jù)挖掘一般是指從大量的數(shù)據(jù)中通過算法搜索隱藏于其中信息的過程。數(shù)據(jù)挖掘通常與計算機科學(xué)有關(guān)，并通過統(tǒng)計、在線分析處理、情報檢索、機器學(xué)習(xí)、專家系統(tǒng)(依靠過去的經(jīng)驗法則)和模式識別等諸多方法來實現(xiàn)上述目標(biāo)。

簡而言之：

大數(shù)據(jù)是范圍比較廣的數(shù)據(jù)分析和數(shù)據(jù)挖掘。

按照數(shù)據(jù)分析的流程來說，數(shù)據(jù)挖掘工作較數(shù)據(jù)分析工作靠前些，二者又有重合的地方，數(shù)據(jù)挖掘側(cè)重數(shù)據(jù)的清洗和梳理。

大數(shù)據(jù)概念更為廣泛，是把創(chuàng)新的思維、信息技術(shù)、統(tǒng)計學(xué)等等技術(shù)的綜合體，每個人限于學(xué)術(shù)背景、技術(shù)背景，概述的都不一樣。

數(shù)據(jù)挖掘

數(shù)據(jù)挖掘是一項使用數(shù)據(jù)探索技術(shù)發(fā)現(xiàn)一些有趣(而不明顯)的模式的技術(shù)。

什么模式？例如：根據(jù)某些特征對數(shù)據(jù)進行分組的方式、異常檢測(罕見值)、某些觀察值與其他值之間的相關(guān)性、某些事件的連續(xù)性、行為的識別等。

數(shù)據(jù)挖掘使用機器學(xué)習(xí)等方法。

這個解釋起來就簡單了：大數(shù)據(jù)就是大量的數(shù)據(jù)。

要定義大數(shù)據(jù)，通常會用3V來解釋，這是產(chǎn)生大數(shù)據(jù)的3個主要原因：

· 容量：收集的數(shù)據(jù)量每分鐘都在巨幅增長，我們需要使用分布式解決方案(使用多臺機器，而不是非常非常昂貴的超級計算機/主機)來調(diào)整我們的存儲和處理工具以適應(yīng)該容量。

· 速度：處理數(shù)據(jù)的緊急程度與產(chǎn)生/獲取數(shù)據(jù)的頻率相關(guān)，還與決策中迫切使用數(shù)據(jù)的需求有關(guān)；即使是實時(或者幾乎實時)。

· 種類：數(shù)據(jù)不再（僅）是結(jié)構(gòu)化的，所以我們得忘記適用于傳統(tǒng)數(shù)據(jù)庫的東西。我們必須為添加各種格式的新數(shù)據(jù)源做準(zhǔn)備；純文本和多媒體內(nèi)容都包括在內(nèi)。

之后更多V被添加進來：真實性 （數(shù)據(jù)必須真實、可靠、可用）、價值（數(shù)據(jù)應(yīng)有商業(yè)或社會價值）、易損性（數(shù)據(jù)必須合法、尊重隱私，并以安全的方式存儲和訪問）。

大數(shù)據(jù)可能是解決這些問題的方案。不要把它和本文解釋的第一個概念混淆了：大數(shù)據(jù)就是實現(xiàn)或促進應(yīng)用數(shù)據(jù)科學(xué)領(lǐng)域先進技術(shù)的事物，是數(shù)據(jù)的本質(zhì)要求。例如，作為數(shù)據(jù)科學(xué)家，我們試圖從數(shù)據(jù)集中得到答案。數(shù)據(jù)集不僅超過了RAM的大小，還超過了硬盤的大小。大數(shù)據(jù)為我們提供了跨多臺機器承載數(shù)據(jù)的分布式存儲技術(shù)，以及并行處理數(shù)據(jù)的分布式處理技術(shù)。

留言 點贊 關(guān)注

我們一起分享AI學(xué)習(xí)與發(fā)展的干貨

歡迎關(guān)注全平臺AI垂類自媒體 “讀芯術(shù)”