Re: [SQL ] 如何改善 LIKE '%search%' 的效能?

作者: DarkKiller (System hacked)   2017-08-15 23:05:02
居然是十年前的文章... (想說居然是 Xapian...)
如果你的資料量還會再增加的話,現在主流的方式是用 Elasticsearch (ES) 架
設,你可以翻翻這本中文書:(雖然是講怎麼分析的,但 ES 本身就有全文搜尋的
能力)
https://www.kingstone.com.tw/book/book_page.asp?kmcode=2013120359772
如果沒辦法另外架設服務的話,另外架一台 MySQL server 跑 replication 同步
,這台 server 獨立給 search 用也是一個方法... (國內某大站台以前是這樣的
架構)
※ 引述《liisi (小心一點)》之銘言:
: 大家午安
: 目前也是遇到 like '%關鍵字%' 效能會變差的問題
: 網站的商品數 超過一百萬筆
: 網站的使用族群 是所有消費者
: 透過關鍵字 來模糊搜尋商品名稱 甚至是二個以上的關鍵字來搜尋
: ( 商品名稱 like '%關鍵字A%' or 商品名稱 like '%關鍵字B%' )
: 測試過時間 需要 2 ~ 2.4秒左右
: 爬文了 也google過 了解如果把%放在前頭 會讓索引無效
: 我也自己試了一下 '關鍵字%' 時間0.0005秒 (也差太多了....)
: 但是關鍵字搜尋 不太可能用 like '關鍵字%'找資料
: 用其他的語法 locate試了一下 也是很慢
: 想請問大家 在語法的部分 目前還沒辦法解決嗎?
: ※ 引述《DarkKiller (System hacked)》之銘言:
: : MySQL 的 %...% 一定是 table scan,如果資料是拉丁語系資料,用 MySQL
: : 提供的 fulltext index 做。
: : 如果是 CJK 用專門的 fulltext search engine 做,像 Lucene (或 CLucene),
: : 另外還需要了解一些目前切詞常用到的基礎原理。
: : ==
: : 另外我自己幫 pixnet 架的是 Xapian,目前已經在內部測試了...
作者: LINGZ (肥兔小欽)   2017-08-16 08:55:00
DK耶!

Links booklink

Contact Us: admin [ a t ] ucptt.com