大數(shù)據(jù)開發(fā)跟大數(shù)據(jù)平臺(tái)開發(fā)有區(qū)別嗎？簡(jiǎn)單的方法，大數(shù)據(jù)開發(fā)大多指的是設(shè)計(jì)和實(shí)現(xiàn)大數(shù)據(jù)產(chǎn)業(yè)鏈的一系列開發(fā)任務(wù)，牽涉到大數(shù)據(jù)平臺(tái)開發(fā)、大數(shù)據(jù)應(yīng)用開發(fā)、大數(shù)據(jù)分析等，另還和數(shù)據(jù)采集產(chǎn)品的開發(fā)、數(shù)據(jù)整理產(chǎn)品的

大數(shù)據(jù)開發(fā)跟大數(shù)據(jù)平臺(tái)開發(fā)有區(qū)別嗎？

簡(jiǎn)單的方法，大數(shù)據(jù)開發(fā)大多指的是設(shè)計(jì)和實(shí)現(xiàn)大數(shù)據(jù)產(chǎn)業(yè)鏈的一系列開發(fā)任務(wù)，牽涉到大數(shù)據(jù)平臺(tái)開發(fā)、大數(shù)據(jù)應(yīng)用開發(fā)、大數(shù)據(jù)分析等，另還和數(shù)據(jù)采集產(chǎn)品的開發(fā)、數(shù)據(jù)整理產(chǎn)品的開發(fā)等等，假如往上延展的話，部分大數(shù)據(jù)開發(fā)任務(wù)與人工智能開發(fā)任務(wù)也本身密切的聯(lián)系。

大數(shù)據(jù)平臺(tái)開發(fā)大多有兩層含義，一層是通過(guò)大數(shù)據(jù)平臺(tái)自身的開發(fā)，這一類設(shè)計(jì)研發(fā)級(jí)開發(fā)任務(wù)，比如大數(shù)據(jù)平臺(tái)Hadoop那是需要Java語(yǔ)言的新的。整個(gè)大數(shù)據(jù)平臺(tái)還涉及到一系列產(chǎn)品，和HBase、Hive、Avro、Zookeeper、Pig、Mahout、Cassandra等，開發(fā)這些產(chǎn)品也需要一個(gè)龐大無(wú)比的團(tuán)隊(duì)。參與大數(shù)據(jù)平臺(tái)研發(fā)的程序員一般說(shuō)來(lái)要具備相當(dāng)豐富的開發(fā)經(jīng)驗(yàn)，同樣的具備什么較弱的研發(fā)能力，都能夠搭建出個(gè)比較穩(wěn)定的分布式計(jì)算體系。

另一層含義是在大數(shù)據(jù)平臺(tái)下參與應(yīng)用開發(fā)，比如在Hadoop、Spark平臺(tái)下參與詳細(xì)的大數(shù)據(jù)應(yīng)用開發(fā)等，這部分開發(fā)正常情況屬于應(yīng)用到級(jí)開發(fā)，難度要相對(duì)于小有一些，可是而不是需要與具體一點(diǎn)的場(chǎng)景通過(guò)緊密的聯(lián)系，需要開發(fā)者必須具備是有的行業(yè)背景知識(shí)。

前大數(shù)據(jù)應(yīng)用開發(fā)要注意的任務(wù)有兩個(gè)，其一是并且已有軟件產(chǎn)品的大數(shù)據(jù)改造；其二是是對(duì)于具體的大數(shù)據(jù)需求并且全新的大數(shù)據(jù)應(yīng)用開發(fā)，目前的原因是大數(shù)據(jù)落地后應(yīng)用的初期，因?yàn)榇髷?shù)據(jù)改造的開發(fā)任務(wù)會(huì)相對(duì)于多那些，未來(lái)新的大數(shù)據(jù)開發(fā)任務(wù)會(huì)逐漸提升。

比起大數(shù)據(jù)開發(fā)來(lái)說(shuō)，大數(shù)據(jù)分析也必須參與代碼編寫，比如機(jī)器學(xué)習(xí)應(yīng)該是目前比較好常見(jiàn)的數(shù)據(jù)分析。機(jī)器學(xué)習(xí)必須通過(guò)算法設(shè)計(jì)、算法利用、算法訓(xùn)練、算法驗(yàn)證和算法應(yīng)用，確實(shí)算法設(shè)計(jì)是機(jī)器學(xué)習(xí)的核心，可是算法基于也必須程序員來(lái)完成具體詳細(xì)的開發(fā)過(guò)程。

我從事行業(yè)互聯(lián)網(wǎng)行業(yè)多年來(lái)，目前也在帶計(jì)算機(jī)專業(yè)的研究生，通常的研究方向聚集在大數(shù)據(jù)和人工智能領(lǐng)域，我會(huì)先后寫一些關(guān)于互聯(lián)網(wǎng)技術(shù)方面的文章，很有興趣朋友可以關(guān)注我，不會(huì)相信當(dāng)然會(huì)收獲不小。

java編程現(xiàn)在在市場(chǎng)占比最大的框架是什么框架？

傳統(tǒng)ERP應(yīng)該要是springspringmvcmybatis

電商和其他做了分布式的肯定是：

單數(shù)據(jù)庫(kù)、druid直接連接池

shiro原理

nginx基本上不使用及負(fù)載均衡策略

分布式文件系統(tǒng)

mysql主從架構(gòu)

dockerdubbo、dubbo-admin、zk在項(xiàng)目中的應(yīng)用在用dubbo通過(guò)應(yīng)用到拆細(xì)統(tǒng)一配置

中心系統(tǒng)日志處理-ELK原理及

在用docker重新搭建jenkins持續(xù)交付環(huán)境

mycat分庫(kù)分表原理

分布式事務(wù)redis集群

es集群海量藏書搜索靜態(tài)資源緩存、

cdn加速

系統(tǒng)監(jiān)控

能秒殺架構(gòu)

分布式事務(wù)

用戶行為分析