mysql查询效率问题
问题是这样:
数据库中一个字段cate的数据是以逗号分隔存储的,如:1,2,3,4,5,
查询时传入的参数是一个数组,如:array(1,2);
我这比较笨的方法是循环这个数组,然后用like拼接起来实现的,如:
<code>(cate like '%1,%' or cate like '%2,%')</code>
但在数据量很大的时候这个效率就太低了,有没更有效的办法呢?谢谢。。
回复内容:
问题是这样:
数据库中一个字段cate的数据是以逗号分隔存储的,如:1,2,3,4,5,
查询时传入的参数是一个数组,如:array(1,2);
我这比较笨的方法是循环这个数组,然后用like拼接起来实现的,如:
<code>(cate like '%1,%' or cate like '%2,%')</code>
但在数据量很大的时候这个效率就太低了,有没更有效的办法呢?谢谢。。
<code>程序循环你传入的数组,循环体内部调用mysql的find_in_set函数,当字串不是太长时,find_in_set的效率比like快很多。</code>
1.修改字段类型为SET,使用FINd_IN_SET比你用like快得多,但是它也是属于字符串操作,用在字段上,得全表扫描。SET类型有一些限制,比较推荐SET适用于值域小,取值固定,整体查询的状态集合。比如记录某人去过中国哪些省:可以直接比较两个人是否去过相同的省份,或者直接获得差别,可以高效地查询哪些人只去过某省或某些省,但查哪些人去过某省或某些省依然是扫全表。
<code>FIND_IN_SET(str,strlist) 如果字符串str是在的strlist组成的N子串的字符串列表,返回值的范围为1到N。 </code>
SQL> SELECT FIND_IN_SET('b','a,b,c,d'); |
---|
SELECT FIND_IN_SET('b','a,b,c,d') |
2 |
2.
用中间(映射)表,可以借助索引提高查询效率。
不管怎么写,怎么改,用函数也好,这样的数据结构稍微量大效率都很低,索引几乎用不上了
只能改下你们的储存方式,不要把1,2,3,4,5,这种放到一个字段,分开来,或者用nosql
可以考虑下MySQL的正则查询
重新设计数据库吧!!!无论怎么说 字符串匹配的花销都不小。把cate字段抽出来形成一个新的关系表
如果查询的频繁建议缓存数据后用程序来查缓存或者重新设计表,MYSQL里面用正则效率很低的。
你应该去问设计数据表的那个人。
建议修改数据存储格式吧....不是说这么存问题有多大
而是这么存了之后却又需要快捷高效的查...那势必就是自己给自己添堵了 能调整尽快调整
where cate like '%1,%' or cate like '%2,%' 这个条件本身有两个问题都导致无法使用索引:
1、or条件; 2、like '%...'格式。
针对这个查询做优化的:
1、or改为union all
2、在程序里做模糊查询, 将所有数据取出来(或者按10%取,取10次),循环做strpos的模糊匹配。 因为php的array操作时非常快速的,所以这样操作,会比直接入库查询快,但是会耗内存。
另外这样的话,分页这些,也就只有在程序里做了。
其实这个数据库设计是有问题的, 将'1,2,3..'这种格式的字符串设计成字段,mysql效率很低,建议根据位运算去设计cate字段,数据多的话,cate可以为bigint, 这样查询会非常快,也省去了like、 or这些mysql的瓶颈。
不建议使用mysql自带的函数,没太明白你说的1,2 1,2,3,4,5 是具体的什么意思,我猜可能是每条记录所属的类型是哪些,
例如:
<code>老九门 是哪些?包括 语文、数学、英语、化学、生物、物理、地理、历史、政治 这九门都有一个类型是 “老九门”,那么这九门里又有理科和文科, 老九门、理科、文科分别是1、2、3 那么 语文、数学、英语的类型字段是1,2,3 化学、物理、生物的类型字段是1,2 地理、历史、政治的类型字段是1,3</code>
(建议不要把业务逻辑放到mysql中处理,mysql字段类型越简单越好,下面会用到)
<code>语文、数学、英语、化学、生物、物理、地理、历史、政治已经有了各自的类型所属 是否考虑将1,2,3 1,2 1,3 定义成数组格式呢 这里应用php的写法 $arr = array( 1=>array(1,2,3), 2=>array(1,2), 3=>array(1,3) ); 在往表中插入数据时,你的cate字段就存1 2 3就可以了,到时候直接查询1或者2或者3就可以了,业务逻辑去脚本程序 中处理,不要在mysql中做太多的处理,越简单越好 如果还是不太懂的话 也可以 $arr = array( '1,2,3'=>1, '1,2'=>2, '1,3'=>3 ); 在程序中处理完后再去查相应的mysql数据就可以了</code>

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

AI Hentai Generator
免费生成ai无尽的。

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

热门话题

PHP的未来将通过适应新技术趋势和引入创新特性来实现:1)适应云计算、容器化和微服务架构,支持Docker和Kubernetes;2)引入JIT编译器和枚举类型,提升性能和数据处理效率;3)持续优化性能和推广最佳实践。

MySQL是一个开源的关系型数据库管理系统。1)创建数据库和表:使用CREATEDATABASE和CREATETABLE命令。2)基本操作:INSERT、UPDATE、DELETE和SELECT。3)高级操作:JOIN、子查询和事务处理。4)调试技巧:检查语法、数据类型和权限。5)优化建议:使用索引、避免SELECT*和使用事务。

可以通过以下步骤打开 phpMyAdmin:1. 登录网站控制面板;2. 找到并点击 phpMyAdmin 图标;3. 输入 MySQL 凭据;4. 点击 "登录"。

PHP和Python各有优势,选择应基于项目需求。1.PHP适合web开发,语法简单,执行效率高。2.Python适用于数据科学和机器学习,语法简洁,库丰富。

MySQL和SQL是开发者必备技能。1.MySQL是开源的关系型数据库管理系统,SQL是用于管理和操作数据库的标准语言。2.MySQL通过高效的数据存储和检索功能支持多种存储引擎,SQL通过简单语句完成复杂数据操作。3.使用示例包括基本查询和高级查询,如按条件过滤和排序。4.常见错误包括语法错误和性能问题,可通过检查SQL语句和使用EXPLAIN命令优化。5.性能优化技巧包括使用索引、避免全表扫描、优化JOIN操作和提升代码可读性。

PHP不是在消亡,而是在不断适应和进化。1)PHP从1994年起经历多次版本迭代,适应新技术趋势。2)目前广泛应用于电子商务、内容管理系统等领域。3)PHP8引入JIT编译器等功能,提升性能和现代化。4)使用OPcache和遵循PSR-12标准可优化性能和代码质量。

Redis 使用单线程架构,以提供高性能、简单性和一致性。它利用 I/O 多路复用、事件循环、非阻塞 I/O 和共享内存来提高并发性,但同时存在并发性受限、单点故障和不适合写密集型工作负载的局限性。

MySQL是一种开源的关系型数据库管理系统,主要用于快速、可靠地存储和检索数据。其工作原理包括客户端请求、查询解析、执行查询和返回结果。使用示例包括创建表、插入和查询数据,以及高级功能如JOIN操作。常见错误涉及SQL语法、数据类型和权限问题,优化建议包括使用索引、优化查询和分表分区。
