神經(jīng)網(wǎng)絡(luò)用GPU加速訓(xùn)練，用Quadro系顯卡好還是GTX10系好？為什么？主要是CUDA的核數(shù)越多越好。計(jì)算主要依靠它，其次是視頻存儲(chǔ)器、內(nèi)部頻率等。當(dāng)然，也可以考慮性?xún)r(jià)比。這對(duì)錢(qián)不壞。神經(jīng)網(wǎng)絡(luò)最重

神經(jīng)網(wǎng)絡(luò)用GPU加速訓(xùn)練，用Quadro系顯卡好還是GTX10系好？為什么？

主要是CUDA的核數(shù)越多越好。計(jì)算主要依靠它，其次是視頻存儲(chǔ)器、內(nèi)部頻率等。當(dāng)然，也可以考慮性?xún)r(jià)比。這對(duì)錢(qián)不壞。神經(jīng)網(wǎng)絡(luò)最重要的是它的計(jì)算能力。神經(jīng)元節(jié)點(diǎn)的數(shù)量通常是幾千個(gè)，而且是一個(gè)干燥的層。這樣的話(huà)，運(yùn)算量非常大，所以需要一個(gè)好的CPU。目前，CUDA可以加快神經(jīng)網(wǎng)絡(luò)的運(yùn)算速度，因此有必要購(gòu)買(mǎi)一個(gè)好的NVIDIA顯卡。我們一般使用GTX1060或以上的顯卡。如果CPU有經(jīng)濟(jì)許可證，可以作為服務(wù)器CPU使用。PC機(jī)的CPU應(yīng)至少為i5或以上。當(dāng)然，內(nèi)存越多越好，但是CPU和顯卡應(yīng)該是最重要的考慮因素

雖然NVIDIA顯卡有CUDA，amd顯卡也有OpenCL。事實(shí)上，CUDA和OpenCL都是為了滿(mǎn)足通用并行計(jì)算的需求而設(shè)計(jì)的。然而，CUDA是一個(gè)成熟的開(kāi)發(fā)平臺(tái)，它為NVIDIA提供了一個(gè)完整的工具包，相對(duì)來(lái)說(shuō)更加專(zhuān)業(yè)和封閉。OpenCL是一個(gè)開(kāi)放的標(biāo)準(zhǔn)，被許多軟硬件制造商廣泛使用。

就科學(xué)計(jì)算而言，CUDA對(duì)開(kāi)發(fā)人員更友好，應(yīng)用更廣泛。這與CUDA相對(duì)完整的開(kāi)發(fā)工具包有很大關(guān)系。經(jīng)過(guò)多年的開(kāi)發(fā)，CUDA擁有比OpenCL更好的生態(tài)系統(tǒng)，它更易于使用，對(duì)程序員也更友好。雖然OpenCL是開(kāi)放的，但是它的API設(shè)計(jì)很怪異，缺乏一致性，并且它的函數(shù)不是正交的，這并不簡(jiǎn)單，它還遠(yuǎn)遠(yuǎn)不夠成熟。

Amd顯卡目前不支持CUDA，但只能支持OpenCL。在一些科學(xué)計(jì)算程序中，AMD顯卡的計(jì)算效率明顯低于N顯卡。這就是CUDA的優(yōu)勢(shì)。amd之所以沒(méi)有像CUDA那樣開(kāi)發(fā)API，是因?yàn)閍md沒(méi)有足夠的實(shí)力來(lái)制定這個(gè)標(biāo)準(zhǔn)。英偉達(dá)早在2006年就開(kāi)始在gtx8800顯卡上推出CUDA，經(jīng)過(guò)這么多年的發(fā)展，英偉達(dá)已經(jīng)投入了巨大的人力物力取得了今天的成績(jī)，包括一年一度的GTC大會(huì)，在CUDA和相關(guān)技術(shù)推廣方面做了大量的工作，而amd顯然缺乏這樣的工作。

事實(shí)上，作為同時(shí)開(kāi)發(fā)CPU和GPU的半導(dǎo)體制造商，AMD要做到這一點(diǎn)并不容易。在資金不能大幅度增長(zhǎng)的情況下，顯卡業(yè)務(wù)只要做好自己的工作就非常好。至于新的API標(biāo)準(zhǔn)，顯然很難做到。我們只能期待OpenCL有一個(gè)更好的未來(lái)。