社区所有版块导航
Python
python开源   Django   Python   DjangoApp   pycharm  
DATA
docker   Elasticsearch  
aigc
aigc   chatgpt  
WEB开发
linux   MongoDB   Redis   DATABASE   NGINX   其他Web框架   web工具   zookeeper   tornado   NoSql   Bootstrap   js   peewee   Git   bottle   IE   MQ   Jquery  
机器学习
机器学习算法  
Python88.com
反馈   公告   社区推广  
产品
短视频  
印度
印度  
Py学习  »  DATABASE

MySQL模糊查询再也用不着like+%了!

鸭哥聊Java • 10 月前 • 214 次点击  

哎我刚才正准备关电脑走人了…你这一句“b”我又坐回来了,我先喝口水,等下…好,继续哈。

刚才在公司楼下那个角落抽烟的时候,那个谁来着,小罗吧,他突然问我,“东哥那个 MySQL 模糊查询是不是非得 like 百分号啊?我怎么感觉慢得跟蜗牛一样?”我当时烟都差点掉地上,我说你这老黄历了,现在都不用那个 like '%xxx%' 那套了,你那是上古写法。

不过我也不是埋汰人,就是…怎么说呢…很多人一直这么写:

select * from user where name like '%东%';

这玩意你们知道吧,就是那个前置百分号嘛,索引直接废掉,查啥都要全表扫,稍微大点的数据量那就完蛋了,CPU 都要被你干到 800%。

我当时跟他说我前两天写需求的时候也踩过坑,就是凌晨一点多我在那儿调接口,越查越慢,后来索引全飘红,我以为又是 DBA 把表搞炸了,结果一看日志全是 like '%xx%'。我说卧槽这还得了?

然后我跟小罗说,现在不是有那个 全文索引 fulltext 嘛,你别搞得好像很高级似的,其实挺简单,就是往表里加一个:

alter table user add fulltext(name);

加完你就能这样写:

select * from user where match(name) against ('东');

你别说,当时我跑了一下,查询速度直接飞起,那感觉跟解锁 120Hz 刷新率一样丝滑,小罗当场人都傻了,说“这玩意跟 like 一个意思吗?”。我说对啊,模糊查,但它能用索引,不香吗?

不过这玩意也不是万能的,中文要分词,你得装插件,不然“程序员东哥”这种三个字,它当成一坨,不给你拆词,你搜“程序”它都匹配不了,你就要搞成 ngram 那种分词方式,就像我之前遇到那个啥来着,算了忘了。

后来我还跟他说另一种办法,就是那个  倒排索引第三方组件,比如 ElasticSearch 啥的,但我懒得展开,每次说到这里我就想到上次我们部门那谁把 ES 配置写炸了,凌晨三点大家在机房看他重启集群,啧…不说了越想越烦。

哦对,我突然想起来一个场景,小李那天问我说“东哥我只是想查手机号后四位,不太可能为这个搞个 ES 吧?”。我说你这属于小需求,就别瞎折腾了,你可以搞个存储列,把倒序、局部 Hash 都存起来,比如:

update user set reversed_phone = reverse(phone);

然后查:

select * from user where reversed_phone like '1234%';

这其实也用到了索引,因为你把那百分号放右边了,MySQL 就能撑住,不像 '%xxxx' 那种直接凉凉的写法。

我说完这些,小罗当时点头跟小鸡啄米一样,说“懂了懂了懂了”。然后他走之前问我,“东哥那正则行不行?”我说正则那个性能你试一下就知道了,就跟我凌晨写 bug 一样,能跑但是很痛苦。

算了我不说了,刚有人喊我去开会…等我回来你要是还想听我再给你讲几个骚操作,比如 trigram 那种,巨好用。

-END-

我为大家打造了一份RPA教程,完全免费:songshuhezi.com/rpa.html

🔥鸭哥私藏精品 🔥

鸭哥作为一名老码农,整理了全网最全《Java高级架构师资料合集》。总量高达  650GB 。

Python社区是高质量的Python/Django开发社区
本文地址:http://www.python88.com/topic/191235