python處理大容量csv數(shù)據(jù) 操控excel,選擇Python還是vba?
操控excel,選擇Python還是vba?對于大量數(shù)據(jù),建議使用Python。VBA通常將數(shù)據(jù)存儲在內(nèi)存中。當(dāng)數(shù)據(jù)沒有分割,計算機配置不高時,會出現(xiàn)更多的卡。經(jīng)過數(shù)據(jù)處理后,如果內(nèi)存沒有釋放,電腦也
操控excel,選擇Python還是vba?
對于大量數(shù)據(jù),建議使用Python。VBA通常將數(shù)據(jù)存儲在內(nèi)存中。當(dāng)數(shù)據(jù)沒有分割,計算機配置不高時,會出現(xiàn)更多的卡。經(jīng)過數(shù)據(jù)處理后,如果內(nèi)存沒有釋放,電腦也會多用一卡通。VBA一般啟動兩個CPU核進行數(shù)據(jù)計算,運算效率較低。現(xiàn)在微軟已經(jīng)停止了VBA的更新,建議大家學(xué)習(xí)python更方便。如果只操作excel,兩種學(xué)習(xí)難度相差不大,但是Python會有更好的發(fā)展空間
還有一種更方便的方法,那就是使用power Bi的三個組件進行數(shù)據(jù)處理,使用power query進行數(shù)據(jù)處理,使用PowerPivot進行分析查看的優(yōu)勢數(shù)據(jù)可視化是指學(xué)習(xí)周期短,數(shù)據(jù)可以自動刷新,啟動速度較快。使用這種方法,效率可能比excel快,但速度仍然不如python快。當(dāng)然,為了長期的可持續(xù)性,我們更推薦學(xué)習(xí)Python,但是學(xué)習(xí)周期會比較長
CSV實際上是一個逗號分隔的文本文件,所以它不存在多頁的問題
所以如果需要將它保存為Excel
Python,你可以試試pyexcel
如果你的數(shù)據(jù)是列表格式的,你可以使用迭代器將數(shù)據(jù)寫入一個文件,并添加必要的分隔符來形成一個CSV文件。如果數(shù)據(jù)是字典格式,則需要考慮使用換行符或其他特殊符號來拆分每個字典元素(包括鍵和值)。鍵和值可以被認為是由之前不重復(fù)的分隔符分隔的。操作方法如下:
1。通過讀寫追加打開CSV文件。
2. 找到CSV文件的結(jié)尾。
3. 最后,以與上一個CSV使用的分段相同的格式添加數(shù)據(jù)。
4. 關(guān)閉文件