搜索结果
查询Tags标签： 数据量，共有 152条记录-
98、在ORACLE大数据量下的分页解决方法。一般用截取ID方法，还有是三层嵌套方法？
98、在ORACLE大数据量下的分页解决方法。一般用截取ID方法，还有是三层嵌套方法。 一种分页方法 <%int i=1;int numPages=14;String pages = request.getParameter("page");int currentPage = 1;currentPage=(pages==null)?(1):{Integer.parseInt(pages)}sq…
2022/2/11 19:14:32 人评论 次浏览 -
MySQL中使用IN查询到底走不走索引
一、看数据量 EXPLAINSELECT * from users WHERE is_doctor in (0,1); 很明显没走索引，下面再看一个sql。 EXPLAINSELECT * from users WHERE is_doctor in (2,1); 又走索引了，所以IN查询走不走索引需要看rows的数据量，in (0,1)时查询出52万多数据量，全表才54万数据量…
2022/2/10 19:13:59 人评论 次浏览 -
[机器学习算法面试题] 六.训练集、验证集、测试集的理解。
目录 1.训练集2.验证集3.测试集4.训练集、验证集、测试集区别5.训练集、验证集、测试集划分比例5.1.数据量较小5.2.数据量较大1.训练集 训练集（training dataset）：用于模型拟合的数据样本。 2.验证集 验证集（validation dataset）：是模型训练过程中单独留出的样本集，…
2022/2/4 20:13:11 人评论 次浏览 -
Spark分区
默认采用的是Hash分区 缺点：可能导致每个分区中数据量的不均匀，极端情况下会导致某些分区拥有RDD的全部数据Ranger分区 要求RDD中的KEY类型必须可以排序自定义分区 根据需求，自定义分区
2022/1/25 6:07:02 人评论 次浏览 -
为什么redis不适合存储大数据量数据和存储敏感数据？
看法： 1.redis是基于内存存储的，如果数据量很大都存储到内存中会增加成本，而且一般redis都会开启持久化，如果数据量较大，那么持久化的就会变得很多，增加了redis 的压力，同时会降低redis的性能，因为很大一部分资源都用于持久化数据了 2.对于敏感数据的存储，像订单…
2022/1/17 19:07:34 人评论 次浏览 -
为什么redis不适合存储大数据量数据和存储敏感数据？
看法： 1.redis是基于内存存储的，如果数据量很大都存储到内存中会增加成本，而且一般redis都会开启持久化，如果数据量较大，那么持久化的就会变得很多，增加了redis 的压力，同时会降低redis的性能，因为很大一部分资源都用于持久化数据了 2.对于敏感数据的存储，像订单…
2022/1/17 19:07:34 人评论 次浏览 -
环境标识
2022-01-14 22:14:37 一、测试环境 数据量少，用于功能测试 二、预发布环境 数据量比生产环境少一点。 三、生产环境
2022/1/14 23:13:01 人评论 次浏览 -
环境标识
2022-01-14 22:14:37 一、测试环境 数据量少，用于功能测试 二、预发布环境 数据量比生产环境少一点。 三、生产环境
2022/1/14 23:13:01 人评论 次浏览 -
MySQL、Redis、MongoDB三者的优缺点和使用场景
MySQLRedisMongoDB类型RDBMS关系型数据库Nosql非关系型数据库Nosql非关系型数据库 特点 数据通常需要做结构化查询，比如join，这时候，关系型数据库就要胜出一筹 读写性能优异。丰富的数据类型，包括set, zset, list, hash, string 这五种数据类型，操作非常方便。高性能…
2022/1/5 2:03:48 人评论 次浏览 -
MySQL、Redis、MongoDB三者的优缺点和使用场景
MySQLRedisMongoDB类型RDBMS关系型数据库Nosql非关系型数据库Nosql非关系型数据库 特点 数据通常需要做结构化查询，比如join，这时候，关系型数据库就要胜出一筹 读写性能优异。丰富的数据类型，包括set, zset, list, hash, string 这五种数据类型，操作非常方便。高性能…
2022/1/5 2:03:48 人评论 次浏览 -
MySQL两个最常用的存储引擎，MyISAM和InnoDB
缓存讲了一个月《缓存架构，一篇足够》。今天，开始写数据库。第一篇，说说MySQL两个最常用的存储引擎，MyISAM和InnoDB。照自己的理解，把一些知识点总结出来，不只说知识点，多讲“为什么”。一、关于count(*)知识点：MyISAM会直接存储总行数，InnoDB则不会，需要按行扫…
2021/12/31 2:07:35 人评论 次浏览 -
MySQL两个最常用的存储引擎，MyISAM和InnoDB
缓存讲了一个月《缓存架构，一篇足够》。今天，开始写数据库。第一篇，说说MySQL两个最常用的存储引擎，MyISAM和InnoDB。照自己的理解，把一些知识点总结出来，不只说知识点，多讲“为什么”。一、关于count(*)知识点：MyISAM会直接存储总行数，InnoDB则不会，需要按行扫…
2021/12/31 2:07:35 人评论 次浏览 -
MySQL5.7版本单节点大数据量迁移到PXC8.0版本集群全记录-1
一个5.7版本的MySQL单点数据库，版本信息是： Server version: 5.7.31-log MySQL Community Server (GPL) 数据量已达到760G，日常存在性能问题，需迁移到PXC集群，由于之前几年实施使用的都是8.0版本PXC集群，这次也想当然的想直接迁移到PXC8.0。 鉴于数据量比较巨大，采…
2021/12/23 19:12:14 人评论 次浏览 -
MySQL5.7版本单节点大数据量迁移到PXC8.0版本集群全记录-1
一个5.7版本的MySQL单点数据库，版本信息是： Server version: 5.7.31-log MySQL Community Server (GPL) 数据量已达到760G，日常存在性能问题，需迁移到PXC集群，由于之前几年实施使用的都是8.0版本PXC集群，这次也想当然的想直接迁移到PXC8.0。 鉴于数据量比较巨大，采…
2021/12/23 19:12:14 人评论 次浏览 -
简谈数据库分库分表
为何分表 当一张表的数据达到千万级时甚至亿级时，查询一次所花的时间会变多，如果有联合查询的话可能会死在那儿了。分表的目的就在于此，减小数据库的负担，缩短查询时间。 大数据量并且访问频繁的表，将其分为若干个表:比如对于某些网站平台的数据库表，数据量很大，这…
2021/12/15 19:51:01 人评论 次浏览
