admin管理员组

文章数量:1532476

2024年6月28日发(作者:)

中国水资源缺乏,是世界13个缺水国家之一,全国670个城市中目前大约一半的城市缺水,且水

污染严重,全国75%的湖泊出现了不同程度的富营养化,90%的城市水域污染严重,南方城市总缺水量的

60%-70%是由于水污染造成的。我国水体污染主要来源于超标排放的工业废水和大量未经处理直接进入

水体的城市生活污水。城市生活污水正成为水污染的最大“公害”之一。因此,城市生活污水的处理对

于改善城市环境质量与居民生存环境,促进社会的可持续发展具有十分重要的意义。与国际相比,我国

城市污水处理率较低,其主

Redis是一个基于内存的高性能key-value数据库。(有空再补充,有理解错误或不足欢迎指正)

Reids的特点

Redis本质上是一个Key-Value类型的内存数据库,很像memcached,整个数据库统统加载在内

存当中进行操作,定期通过异步操作把数据库数据flush到硬盘上进行保存。

因为是纯内存操作,Redis的性能非常出色,每秒可以处理超过10万次读写操作,是已知性能

最快的Key-ValueDB。

Redis的出色之处不仅仅是性能,Redis最大的魅力是支持保存多种数据结构,此外单个value

的最大限制是1GB,不像memcached只能保存1MB的数据,因此Redis可以用来实现很多有用的功能,

比方说用他的List来做FIFO双向链表,实现一个轻量级的高性能消息队列服务,用他的Set可以做

高性能的tag系统等等。

另外Redis也可以对存入的Key-Value设置expire时间,因此也可以被当作一个功能加强版的

memcached来用。

Redis的主要缺点是数据库容量受到物理内存的限制,不能用作海量数据的高性能读写,因此

Redis适合的场景主要局限在较小数据量的高性能操作和运算上。

Redis支持的数据类型

Redis通过Key-Value的单值不同类型来区分,以下是支持的类型:

Strings

Lists

Sets求交集、并集

SortedSet

hashes

为什么redis需要把所有数据放到内存中?

Redis为了达到最快的读写速度将数据都读到内存中,并通过异步的方式将数据写入磁盘。所

以redis具有快速和数据持久化的特征。

如果不将数据放在内存中,磁盘I/O速度为严重影响redis的性能。在内存越来越便宜的今天,

redis将会越来越受欢迎。

页脚内容

1

中国水资源缺乏,是世界13个缺水国家之一,全国670个城市中目前大约一半的城市缺水,且水

污染严重,全国75%的湖泊出现了不同程度的富营养化,90%的城市水域污染严重,南方城市总缺水量的

60%-70%是由于水污染造成的。我国水体污染主要来源于超标排放的工业废水和大量未经处理直接进入

水体的城市生活污水。城市生活污水正成为水污染的最大“公害”之一。因此,城市生活污水的处理对

于改善城市环境质量与居民生存环境,促进社会的可持续发展具有十分重要的意义。与国际相比,我国

城市污水处理率较低,其主

如果设置了最大使用的内存,则数据已有记录数达到内存限值后不能继续插入新值。

Redis是单进程单线程的

redis利用队列技术将并发访问变为串行访问,消除了传统数据库串行控制的开销

虚拟内存

当你的key很小而value很大时,使用VM的效果会比较好.因为这样节约的内存比较大.

当你的key不小时,可以考虑使用一些非常方法将很大的key变成很大的value,比如你可以考

虑将key,value组合成一个新的value.

vm-max-threads这个参数,可以设置访问swap文件的线程数,设置最好不要超过机器的核数,如

果设置为0,那么所有对swap文件的操作都是串行的.

可能会造成比较长时间的延迟,但是对数据完整性有很好的保证.

自己测试的时候发现用虚拟内存性能也不错。如果数据量很大,可以考虑分布式或者其他数据

分布式

redis支持主从的模式。原则:Master会将数据同步到slave,而slave不会将数据同步到master。

Slave启动时会连接master来同步数据。

这是一个典型的分布式读写分离模型。我们可以利用master来插入数据,slave提供检索服务。

这样可以有效减少单个机器的并发访问数量。

读写分离模型

通过增加SlaveDB的数量,读的性能可以线性增长。为了避免MasterDB的单点故障,集群一般

都会采用两台MasterDB做双机热备,所以整个集群的读和写的可用性都非常高。

读写分离架构的缺陷在于,不管是Master还是Slave,每个节点都必须保存完整的数据,如果

在数据量很大的情况下,集群的扩展能力还是受限于单个节点的存储能力,而且对于Write-intensive

类型的应用,读写分离架构并不适合。

数据分片模型

为了解决读写分离模型的缺陷,可以将数据分片模型应用进来。

可以将每个节点看成都是独立的master,然后通过业务实现数据分片。

页脚内容

2

中国水资源缺乏,是世界13个缺水国家之一,全国670个城市中目前大约一半的城市缺水,且水

污染严重,全国75%的湖泊出现了不同程度的富营养化,90%的城市水域污染严重,南方城市总缺水量的

60%-70%是由于水污染造成的。我国水体污染主要来源于超标排放的工业废水和大量未经处理直接进入

水体的城市生活污水。城市生活污水正成为水污染的最大“公害”之一。因此,城市生活污水的处理对

于改善城市环境质量与居民生存环境,促进社会的可持续发展具有十分重要的意义。与国际相比,我国

城市污水处理率较低,其主

结合上面两种模型,可以将每个master设计成由一个master和多个slave组成的模型。

Redis的回收策略

volatile-lru:从已设置过期时间的数据集([i].expires)中挑选最近最少使用的

数据淘汰

volatile-ttl:从已设置过期时间的数据集([i].expires)中挑选将要过期的数据

淘汰

volatile-random:从已设置过期时间的数据集([i].expires)中任意选择数据淘汰

allkeys-lru:从数据集([i].dict)中挑选最近最少使用的数据淘汰

allkeys-random:从数据集([i].dict)中任意选择数据淘汰

no-enviction(驱逐):禁止驱逐数据

1.使用Redis有哪些好处?

速度快,因为数据存在内存中,类似于HashMap,HashMap的优势就是查找和操作的时间复杂度

都是O(1)

支持丰富数据类型,支持string,list,set,sortedset,hash

支持事务,操作都是原子性,所谓的原子性就是对数据的更改要么全部执行,要么全部不执行

丰富的特性:可用于缓存,消息,按key设置过期时间,过期后将会自动删除

相比memcached有哪些优势?

memcached所有的值均是简单的字符串,redis作为其替代者,支持更为丰富的数据类型

redis的速度比memcached快很多

redis可以持久化其数据

常见性能问题和解决方案:

Master最好不要做任何持久化工作,如RDB内存快照和AOF日志文件

如果数据比较重要,某个Slave开启AOF备份数据,策略设置为每秒同步一次

为了主从复制的速度和连接的稳定性,Master和Slave最好在同一个局域网内

页脚内容

3

中国水资源缺乏,是世界13个缺水国家之一,全国670个城市中目前大约一半的城市缺水,且水

污染严重,全国75%的湖泊出现了不同程度的富营养化,90%的城市水域污染严重,南方城市总缺水量的

60%-70%是由于水污染造成的。我国水体污染主要来源于超标排放的工业废水和大量未经处理直接进入

水体的城市生活污水。城市生活污水正成为水污染的最大“公害”之一。因此,城市生活污水的处理对

于改善城市环境质量与居民生存环境,促进社会的可持续发展具有十分重要的意义。与国际相比,我国

城市污水处理率较低,其主

尽量避免在压力很大的主库上增加从库

主从复制不要用图状结构,用单向链表结构更为稳定,即:Master

这样的结构方便解决单点故障问题,实现Slave对Master的替换。如果Master挂了,可以立

刻启用Slave1做Master,其他不变。

里有2000w数据,redis中只存20w的数据,如何保证redis中的数据都是热点数据

相关知识:redis内存数据集大小上升到一定大小的时候,就会施行数据淘汰策略。

redis提供6种数据淘汰策略,上文已经列出。

he与Redis的区别都有哪些?

1)、存储方式

Memecache把数据全部存在内存之中,断电后会挂掉,数据不能超过内存大小。

Redis有部份存在硬盘上,这样能保证数据的持久性。

2)、数据支持类型

Memcache对数据类型支持相对简单。

Redis有复杂的数据类型。

3)、使用底层模型不同

它们之间底层实现方式以及与客户端之间通信的应用协议不一样。

Redis直接自己构建了VM机制,因为一般的系统调用系统函数的话,会浪费一定的时间去移动

和请求。

4)、value大小

redis最大可以达到1GB,而memcache只有1MB

常见的性能问题都有哪些?如何解决?

1).Master写内存快照,save命令调度rdbSave函数,会阻塞主线程的工作,当快照比较大时

对性能影响是非常大的,会间断性暂停服务,所以Master最好不要写内存快照。

页脚内容

4

本文标签: 数据内存城市支持