Please enable JavaScript.

Coggle requires JavaScript to display documents.

redis性能 - Coggle Diagram

- - - - 程序运行在新的cpu会重新加载L1L2缓存，运行时信息
      - 使用taskset命令把一个程序绑定在一个核上运行。
      - 如果网络中断处理程序和Redis实例各自所绑的
        CPU核不在同一个CPU Socket上，消耗性能
    - - 过期key操作
        
        默认情况下，Redis每100毫秒会删除一些过期key，
        
        采样ACTIVE_EXPIRE_CYCLE_LOOKUPS_PER_LOOP个数的key，并将其中过期的key全部删除；
        
        如果超过25%的key过期了，则重复删除的过程，直到过期key的比例降至25%以下。
        
        频繁使用带有相同时间参数的EXPIREAT命令设置过期key
      - AOF回写
        
        问题
        
        everySec/always会触发fsync，主线程会等待fsync完成，才能处理下一个请求如果发生AOF重写占据大量磁盘IO，可能会导致主线程阻塞
        
        解决方法
        
        可以使用固态硬盘提升磁盘IO
        
        no-appendfsync-on-rewrite yes
        设置AOF重写时不fsync会导致数据丢失
      - swap
        
        增加内存或者使用集群
      - 大页机制
        
        RDB持久化时写时复制，内存大页会消耗内存
        
        关闭大页机制
      - 主从集群
        
        从库RDB复制消耗时间长
        
        每个实例4G左右
    - - 形成原因
        
        redis的内存配分器在分配内存时，如jemalloc
        分配最近2的N次方的内存
        
        大小不一的键值对和键值对修改删除带来的内存空间变化。
      - 如何查看
        
        INFO memeory命令
        mem_fragmentation_ratio>1.5 则碎片多
      - 如何处理
        
        暴力重启
        
        可以通过设置参数，来控制碎片清理的开始和结束时机，
        以及占用的CPU比例
    - - 客户端输入输出缓冲区
        
        bigkey的写入，服务处理慢，堆积
        
        查看缓存CLIENT LIST命令,主要关注qbuf和qbuf-free
        
        当多个客户端连接占用的内存总量，超过maxmemory
        触发key淘汰，redis再取时只能从数据库重读
        
        多个客户端可能造成内存溢出OOM
        
        redis每个客户端的输入缓冲区阈值固定为 1G
        
        输出缓冲区溢出，调整缓存大小，不要发送bigkey,monitor命令
      - 主从节点同步数据时的缓冲区
      - 增量复制缓冲区
        
        调节repl_backlog_buffer 参数到合适根据写入速率
    - - 客户端交互
        
        集合全量查询和聚合操作
        
        bigKey的删除
        操作系统将回收内存写入空闲列表，回收内存很大会导致堵塞
        典型的场景就是删除大量集合的情况
        
        清空数据库
      - 磁盘交互，
        AOF日志同步写，大量同步写会导致阻塞
      - 主从节点交互
        清库或者加载RDB都是阻塞的
      - 切片集群交互
        bigKey 迁移，引起阻塞因为是同步迁移
    - - 主线程启动时会生成3个子线程
      - AOF日志写操作
      - 异步删除bigKey,清库
        需要删除的key先评估工作量不大同步删除，
        大的话会放入一个队列异步删除即lazy free
        即使开启了lazy free DEL 命令仍然同步删，unlink异步
      - 文件的关闭异步执行