mysql - 如何提高mysql中大文本的查询速度
问题描述
我有以下数据库架构。
CREATE TABLE `std_reslt` (
`student_id` int NOT NULL,
`date` date NOT NULL,
`info` LONGTEXT,
`result ` LONGTEXT,
`result_ids` LONGTEXT,
`sid` int NOT NULL
) ENGINE=InnoDB
PARTITION BY KEY(student_id)
PARTITIONS 50;
CREATE INDEX `student_date`
ON date_uri_pair (`student_id`, `date`);
CREATE INDEX `date_sid`
ON date_uri_pair (`date`, `sid`);
该信息包含序列化的字符串值。序列化的数据是大量 JSON 字符串的集合。这太庞大了,我们需要将同一日期的数据分成多行。现在,当我们尝试使用以下查询查询数据库时,需要很长时间才能获得结果,尤其是当日期范围较大时。
SELECT info, result_ids FROM std_reslt WHERE student_id =30 AND date >= '2019-05-01' and date<= ''2019-05-30'
我需要获取数据,将包含数据的信息反序列化为:
[{"john":35, "john":75, "Haris":30, "Haris":40 .....}]
目标是通过添加 info 的所有值来找到前 N 条记录,例如:
[{"john":110, "Haris":70}]
除了 LongText 之外还有其他数据类型吗,因为我认为 InnoDB 对 LongText 数据使用了不同的方法。如果我尝试反序列化数据并将每个数据存储在单独的列中,那么大小将非常大
解决方案
CREATE INDEX `student_date`
ON date_uri_pair (`student_id`, `date`);
WHERE student_id =30 AND date >= '2019-05-01' and date<= ''2019-05-30'
您有一系列条件,并且有多个列索引。尝试分离索引,一个用于日期,一个用于学生。
推荐阅读
- python - Python嵌套for循环结果的问题
- java - 将响应式响应组合到一个有效负载中
- flutter - NoSuchMethodError:null 上的无效成员:'save' 尝试保存 TextFormField 时
- css - Apps 脚本外部样式表
- nativescript - Nativescript 7 和 Chrome DevTools
- python - TypeError:只能将str(不是“NoneType”)连接到str python boto3
- android - 如何在 Android 9+ 中以编程方式接听或拒绝来电?
- html - 如何在 Web 应用程序中并排放置 Angular 组件
- python - Mac上StudioCode中的Pygame不会blit
- c# - 获取通用委托返回类型