elasticsearch操作記錄 mysql是否能夠存儲(chǔ)一億條記錄?
mysql是否能夠存儲(chǔ)一億條記錄?ES使用Lucene提供檢索服務(wù),數(shù)據(jù)也會(huì)放在磁盤上。ES有各種存儲(chǔ)數(shù)據(jù)、節(jié)點(diǎn)數(shù)據(jù)、索引數(shù)據(jù)、事務(wù)日志、Luc全文搜索引擎有那些?全文搜索引擎包括:1.全文搜索引擎L
mysql是否能夠存儲(chǔ)一億條記錄?
ES使用Lucene提供檢索服務(wù),數(shù)據(jù)也會(huì)放在磁盤上。ES有各種存儲(chǔ)數(shù)據(jù)、節(jié)點(diǎn)數(shù)據(jù)、索引數(shù)據(jù)、事務(wù)日志、Luc
全文搜索引擎有那些?
全文搜索引擎包括:
1.全文搜索引擎
Lucene 的開發(fā)語(yǔ)言是Java,也是Java家族中最著名的開源搜索引擎。在Java世界中,它已經(jīng)是一個(gè)標(biāo)準(zhǔn)的全文搜索程序。它提供了完整的查詢引擎和索引引擎,沒有中文分詞引擎,需要自己實(shí)現(xiàn)。因此,有必要用Lucene構(gòu)建一個(gè)搜索引擎。此外,它不支持實(shí)時(shí)搜索。不過(guò)linkedin和twitter已經(jīng)改進(jìn)了lucene的實(shí)時(shí)搜索,Lucene有一個(gè)移植版本叫做Lucene,理論上比Lucene快,因?yàn)樗怯肅編寫的.
官方主頁(yè):
CLucene官方主頁(yè):
2.獅身人面像
Sphinx是用C語(yǔ)言編寫的開源搜索引擎,也是目前主流的搜索引擎之一。在索引事件上比lucene快50%,但是索引文件比Lucene大一倍,所以Sphinx在索引上是用空間換事件的策略,在檢索速度上和Lucene相差不大,但是在檢索準(zhǔn)確率上Lucene比Sphinx好。另外,Lucene在中文分詞引擎的加入難度上優(yōu)于Sphinx,其中Sphinx支持實(shí)時(shí)搜索,使用起來(lái)相對(duì)簡(jiǎn)單方便。
官方主頁(yè):
3.夏皮安
Xapian是一個(gè)用c編寫的全文檢索程序,它的api和檢索原理在很多方面與lucene相似,填補(bǔ)了c中的一個(gè)空缺.
官方主頁(yè):
4.上下真空濾器
Nutch是一個(gè)用java實(shí)現(xiàn)的開源web搜索引擎,包括爬蟲、索引引擎和查詢引擎,其中Nutch基于Lucene,Lucene為Nutch提供了一個(gè)用于文本索引和搜索的API。
你是否應(yīng)該使用Lucene或Nutch應(yīng)該是,如果你不 不需要抓取數(shù)據(jù),你應(yīng)該使用Lucene。最常見的應(yīng)用是您有數(shù)據(jù)源,需要為這些數(shù)據(jù)提供一個(gè)搜索頁(yè)面。在這種情況下,最好的方法是直接從數(shù)據(jù)庫(kù)中獲取數(shù)據(jù),并用Lucene API構(gòu)建一個(gè)索引。
官方主頁(yè):
5.數(shù)據(jù)公園搜索
DataparkSearch是一個(gè)用C語(yǔ)言實(shí)現(xiàn)的開源搜索引擎,其中網(wǎng)頁(yè)排序基于神經(jīng)網(wǎng)絡(luò)模型,支持下載HTTP、HTTPS、FTP、NNTP等網(wǎng)頁(yè),包括索引引擎、搜索引擎和中文分詞引擎(這是唯一一個(gè)帶有中文分詞引擎的開源搜索引擎)。它可以單獨(dú)定制搜索結(jié)果,并有完整的日志記錄。
官方主頁(yè):
6.澤泰爾
Zettair是一個(gè)基于Justin Zobel 的研究成果。它是用C語(yǔ)言實(shí)現(xiàn)的。Justin Zobel在全文檢索領(lǐng)域非常有名,他是業(yè)界第一個(gè)系統(tǒng)提出倒排索引差分壓縮算法的人。倒排表的壓縮大大提高了檢索和加載的性能。與此同時(shí),空間膨脹率也降低到了一個(gè)非常好的水平。因?yàn)閆ettair起源于學(xué)術(shù)界,代碼是由RMIT大學(xué)的搜索引擎編寫的,所以它的代碼簡(jiǎn)潔高效,是學(xué)習(xí)倒排索引經(jīng)典算法的一個(gè)非常好的例子。支持linux、windows、mac os等系統(tǒng)。
官方主頁(yè):
7.因德里
Indri是一個(gè)用C語(yǔ)言和C語(yǔ)言編寫的全文檢索引擎系統(tǒng)。它是由麻省大學(xué)和卡內(nèi)基梅隆大學(xué)聯(lián)合推出的開源項(xiàng)目。它的特點(diǎn)是跨平臺(tái)和API接口支持Java,PHP和c。
官方主頁(yè):
8.一種活潑的小狗
Terrier是由格拉斯哥大學(xué)計(jì)算科學(xué)學(xué)院用java開發(fā)的全文檢索系統(tǒng)。
官方主頁(yè):
9.加拉戈
Galago是一個(gè)用java語(yǔ)言編寫的關(guān)于文本搜索的工具集。它包括索引引擎和查詢引擎,還包括一個(gè)叫做TupleFlow的分布式計(jì)算框架(類似于google 的MapReduce)。這個(gè)檢索系統(tǒng)支持多種Indri查詢語(yǔ)言。
官方主頁(yè):
10.斑馬
Zebra是用C語(yǔ)言實(shí)現(xiàn)的檢索程序,其特點(diǎn)是支持大數(shù)據(jù)、EMAIL、XML、MARC等格式。
官方主頁(yè):
11.索爾
Solr是一個(gè)用java開發(fā)的獨(dú)立的企業(yè)級(jí)搜索應(yīng)用服務(wù)器,它提供了一個(gè)類似于Web-service的API接口。它是基于Lucene的全文檢索服務(wù)器,也是Lucene的變種。很多一線互聯(lián)網(wǎng)公司都在用Solr,也是成功的。熟悉的解決方案。
官方主頁(yè):
12.彈性搜索
Elasticsearch是一個(gè)開源的分布式搜索引擎,用java語(yǔ)言開發(fā),基于Lucene構(gòu)建。它是為云計(jì)算設(shè)計(jì)的,可以實(shí)現(xiàn)實(shí)時(shí)搜索、穩(wěn)定可靠。Elasticsearch的數(shù)據(jù)模型是JSON。
官方主頁(yè):
13.呼
Whoosh是一個(gè)用純python編寫的開源搜索引擎。
官方主頁(yè):