mysql表數(shù)據(jù)量太大，達(dá)到了1億多條數(shù)據(jù)，除了分庫(kù)分表之外，還有沒(méi)有其他的解決方式？在正常配置下，MySQL只能承載2000萬(wàn)數(shù)據(jù)（同時(shí)讀寫，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過(guò)1億，而且還在

mysql表數(shù)據(jù)量太大，達(dá)到了1億多條數(shù)據(jù)，除了分庫(kù)分表之外，還有沒(méi)有其他的解決方式？

在正常配置下，MySQL只能承載2000萬(wàn)數(shù)據(jù)（同時(shí)讀寫，表中有大文本字段，單服務(wù)器）?，F(xiàn)在已經(jīng)超過(guò)1億，而且還在增加，建議按以下方式處理：

1子表。它可以按時(shí)間或一定的規(guī)則進(jìn)行拆分，以便盡可能地查詢子表中的數(shù)據(jù)庫(kù)。這是最有效的方法。特別是寫，放入一個(gè)新表，并定期同步。如果記錄不斷更新，最好將寫入的數(shù)據(jù)放在redis中，并定期同步表3的大文本字段，將它們分隔成一個(gè)新的獨(dú)立表。對(duì)于較大的文本字段，可以使用NoSQL數(shù)據(jù)庫(kù)

4優(yōu)化體系結(jié)構(gòu)，或者優(yōu)化SQL查詢，避免聯(lián)合表查詢，盡量不要使用count（*）、in、recursion等性能消耗語(yǔ)句

5使用內(nèi)存緩存，或者在前端讀取時(shí)增加緩存數(shù)據(jù)庫(kù)。重復(fù)讀取時(shí)，直接從緩存中讀取。

以上是一種低成本的管理方法，基本上幾個(gè)服務(wù)器就可以做到，但是管理起來(lái)有點(diǎn)麻煩。

當(dāng)然，如果總的數(shù)據(jù)量特別大，并且您不關(guān)心投資成本，那么您可以使用cluster或tidb

1。從存儲(chǔ)器中讀取數(shù)據(jù)是微秒級(jí)的。從磁盤讀取是毫秒級(jí)。它們之間有一個(gè)數(shù)量級(jí)的差異。因此，如果要優(yōu)化數(shù)據(jù)庫(kù)，首先要做的是優(yōu)化io。2、 keyuffersize[global]設(shè)置的內(nèi)存區(qū)域大小緩存MyISAM表的索引。由于MyISAM只在內(nèi)存中緩存索引，不在內(nèi)存中緩存數(shù)據(jù)，如果內(nèi)存允許，這個(gè)參數(shù)應(yīng)該足以保存MyISAM的所有索引以提高性能。另外，在MyISAM表上，所有的查詢條件都應(yīng)該盡量限制在索引中，這樣緩存就可以提高我們的搜索效率。3、 bulkinsertufferSize[thread]僅在MyISAM中用于在插入數(shù)據(jù)時(shí)臨時(shí)緩存數(shù)據(jù)。當(dāng)我們使用下面的write語(yǔ)句時(shí)，我們將使用這個(gè)內(nèi)存區(qū)域來(lái)幫助批量寫入數(shù)據(jù)文件：Insert。。。選擇。。。插入到。。。價(jià)值觀