session tomcat集群redis
Redis过期Key处理和内存淘汰策略
惰性删除 概述：当访问Key时，才去判断它是否过期，如果过期，直接干掉。这种方式对CPU很友好，但是一个key如果长期不用，一直存在内存里，会造成内存浪费。 set name xxxx 10 get name // 发现name过期了，直接删除 优点：对CPU友好，只会在使用该key时才会进行过期检 ......
redis中如何保证原子性操作
需求：两个客户端同时对[key1]执行自增操作，不会相互影响 操作：下面两个客户端并发操作会导致[key1]输出结果与预期不一致 [客户端一]读取[key1]，值为[1] [客户端二]读取[key1]，值为[1] [客户端一]将[key1]自增1，值为[2] [客户端二]将[key1]自增1，值为[ ......
redis 浅谈2
最近在redis上遇到一个问题，就是刷新redis缓存的时候，缓存里面开始一个map ,但是缓存还没有刷新完成 ，比如 map里面有n 个filed ，但是刷新了 m 个就被别的线程使用了，导致数据不完善 解决办法： map 设置完成后在写入缓存中 ......
redis 问题浅谈
redis 缓存击穿 redis 如果缓存不存在就会请求到数据库，这里有个问题就是如果请求一个数据库不存在的数据，那么就会一直请求数据库，redis没有起到作用 1 接口过滤，做第一步过滤 2 我们可以把这个不存在的数据也缓存一个null到redis中，设置一个过期时间 3 布隆过滤器，待续 雪崩 ......
Redis缓存三剑客
缓存穿透 概念：查询一个不存在的数据，mysql查询不到数据也不会直接写入缓存，就会导致每次请求查数据库从而使得数据库压力过大，宕机 解决方案一： 缓存空数据，查询返回的数据为空，扔把这个空结果进行缓存例如格式：{key:xxx,value:null} 优点：简单 缺点：消耗内存，可能会发生不一致的 ......
NOSQL redis配置与优化
NOSQL与NOSQL 关系型数据库 关系型数据库是一个结构化的数据库，创建在关系模型（二维表格模型）基础上，一般面向于记录。 SQL 语句（标准数据查询语言）就是一种基于关系型数据库的语言，用于执行对关系型数据库中数据的检索和操作。 主流的关系型数据库包括 Oracle、MySQL、SQL Ser ......
Python Flask session 内容保存到用户浏览器里
前言全局说明 Python Flask session 内容保存到用户浏览器里 一、安装flask模块 官方源： pip3 install flask==2.3.2 国内源： pip3 install flask==2.3.2 -i http://pypi.douban.com/simple/ -- ......
Redis常见阻塞原因总结
Redis常见阻塞原因总结 1. O(n) 命令 Redis 中的大部分命令都是 O(1)时间复杂度，但也有少部分 O(n) 时间复杂度的命令，例如： KEYS *：会返回所有符合规则的 key HGETALL：会返回一个 Hash 中所有的键值对 LRANGE：会返回 List 中指定范围内的元素 ......
redis小记
redis 1、redis是一款c语言编写的基于内存的kv存储，是目前市面上最流行的nosql开源项目，常用于缓存场景（优点高性能/寻址更快，缺点易失存储/价格更高） 2、redis快的原因：纯内存操作、单线程避免上下文切换、采用非阻塞IO多路复用机制（1个线程监控多个连接，一旦某个连接就绪，就能够 ......
搭建MySQL集群-1(搭建单节点MySQL)
突发奇想，想做一个微信小程序，于是买了云服务器，准备尝试自己搭建MySQL集群。 系统版本：Ubuntu 22.04.3 LTS 一、通过apt包管理器安装MySQL。 sudo apt install mysql-server 二、安装成功后，mysql-service会启动。可用以下命令查看： ......
Redis内存碎片
Redis内存碎片（不会影响 Redis 性能，但会增加内存消耗） 1. 什么是内存碎片？ 你可以将内存碎片简单地理解为那些不可用的空闲内存 举个例子：操作系统为你分配了 32 字节的连续内存空间，而你存储数据实际只需要使用 24 字节内存空间，那这多余出来的 8 字节内存空间如果后续没办法再被分配 ......
Elasticsearch专栏 集群管理
Elasticsearch 集群管理 简介 Elasticsearch 是一个开源的分布式搜索和分析引擎，用于处理大规模的结构化和非结构化数据。集群管理是确保 Elasticsearch 在生产环境中高效运行的关键任务之一。 集群基础知识 节点（Nodes）： Elasticsearch 集群由一个 ......
Elasticsearch专栏 集群分片管理
Elasticsearch 集群分片管理 简介 Elasticsearch 是一个分布式搜索和分析引擎，数据在集群中被分割成多个分片，以实现高性能和可伸缩性。在管理 Elasticsearch 集群时，分片的合理分配和监控是至关重要的。 分片基础知识 主分片（Primary Shard）： 每个索引 ......
Elasticsearch专栏 集群安全认证
Elasticsearch 集群安全认证 简介 Elasticsearch 的安全认证功能用于确保只有经过授权的用户才能访问集群和执行特定操作。这有助于保护集群中的数据和资源。 安全认证组件 1. X-Pack Security 插件 X-Pack 是 Elastic 提供的官方插件，包含了 Ela ......
TDSQL(MySQL版本)集群增加hdfs节点
一、需求：1、在原有集群上面增加3个hdfs节点，替换掉之前的hdfs；2、将替换掉的3台hdfs中2台 变成proxy节点，增加到第一套集群 二、参考文档：腾讯云数据库 TDSQL MySQL版_V10.3.19.x.x_部署指南（注意不要使用其中的nokey.sh脚本） 三、操作步骤：1、启动a ......
redis
redis 安装教程 Centos7安装Redis - heqiuyong - 博客园 (cnblogs.com) 基本操作 通用指令是部分数据类型的，都可以使用的指令，常见的有如下表格所示 指令 描述 KEYS 查看符合模板的所有key，不建议在生产环境设备上使用 DEL 删除一个指定的key E ......
Redis实战篇
实战篇Redis 开篇导读 hutol工具使用 对象bean 和JsonStr 互转 //功能： java bean 转jsonstr 用途：存入到redis String jsonstr=JSONUtil.toJsonStr(shopType) //功能： jsonstr 转java bean 用 ......
mariadb集群切换成mysql5.7集群
mariadb集群安装 yum list | grep galera yum install galera mariadb-server-galera rsync systemctl start mariadb 仓库源查看可以安装的包 添加yum源 [galera] name = Galera ba ......
tomcat
tomcat 安装 设置java环境 jdk8 openjdk9 openjdk8 存档的 OpenJDK GA 版本 (java.net) tar xf jdk-8u391-linux-x64.tar.gz -C /opt ln -svf /opt/{jdk1.8.0_391,jdk} expor ......
Redis持久化机制详解
Redis持久化机制详解 1. RDB 持久化 Redis 可以通过创建快照来获得存储在内存里面的数据在 某个时间点 上的副本。Redis 创建快照之后，可以对快照进行备份，可以将快照复制到其他服务器从而创建具有相同数据的服务器副本（Redis 主从结构，主要用来提高 Redis 性能），还可以将快 ......
elasticsearch集群red恢复损坏的索引
背景 客户磁盘损坏，修复磁盘后，重启机器，发现elasticsearch启动成功，ES状态正常green，但是历史数据都没有加载进，查看ES存储数据目录，发现数据还在。 解决方案 首先，需要确认indices目录下的lucene 索引正常。需要关闭ES（实际操作索引处于close状态也可以）。 # ......
Kubernetes高可用集群二进制部署v1.28.0版本
一、集群环境准备 1.1 主机规划 主机IP地址 主机名 主机配置 主机角色 软件列表 192.168.198.144 k8s-master1 2C4G master kube-apiserver、kube-controller-manager、kube-scheduler、etcd、kubectl ......
修改Zabbix源码实现监控数据同时写入数据库和ES集群
写在开篇 玩过 Zabbix 的朋友都了解，Zabbix 提供了与 Elasticsearch（ES）的集成，允许用户将历史数据存储在 Elasticsearch 中，而无需使用传统数据库。在高监控负载的生产环境中，这种架构带来了多重好处。首先，它有效减轻了数据库的负担，从而提高了整体性能。其次，通 ......
Redis 打怪升级进阶成神之路（2023 最新版）！
前面我们学习：MySQL 打怪升级进阶成神之路（2023 最新版）！，然后我们就开始了 NoSQL 卷王之路。从第一篇文章开始，我们逐步详细介绍了 Redis 基础理论与安装配置、9 种数据类型和应用场景、常用管理命令、发布与订阅、事件、事务机制、持久化、主从复制与数据恢复实践、哨兵模式原理与数据恢 ......
CloudCanal x Redis 数据同步指令集丰富与细节优化
简述 CloudCanal 前一段时间支持了 Redis 到 Redis 数据迁移同步能力，并支持其双向同步，但是支持的指令种类有限。 随着用户使用，指令支持不全面成为一个比较大的问题，所以最近的版本，我们对此能力，结合用户实际碰到的问题，进行了新一轮优化。 此轮优化的特点是： 增加数据初始化的类型 ......
Redis 7.0性能大揭秘：如何优化缓存命中率？
Redis 7.0，这货不仅仅是一个简单的缓存工具，它更是一款高性能的数据结构服务器。现在，大家都知道缓存命中率对性能影响特别大，但怎么优化它呢？ 本文，已收录于，我的技术网站 ddkk.com，有大厂完整面经，工作技术，架构师成长之路，等经验分享 1、合理设计键值结构 Redis的数据结构和键的设 ......
Windows安装多个Tomcat部署项目
前言 在实际生产环境中，经常会有一个tomcat部署多个应用程序的场景，但多个项目应用同一个基础框架时，会出现某些文件路径相同的情况导致管理混乱（例如附件，日志，缓存文件），并且更新有时需要关闭tomcat导致多个项目同时失效，本文提供同时安装多个tomcat的方案，独立部署每个项目便于管理 下载 ......
rabbitmq 集群docker玩法
属于一个简单测试玩的，rabbitmq 实际最近几年变化还是挺大的（主要是一些新特性，核心amqp 是一致的） 环境准备 测试一个基于raft 选举的rabbitmq 集群队列 docker-compose version: "3" services: mq: build: ./ container ......
Redis 分片集群
1.Redis分片集群 1.1.搭建分片集群 主从和哨兵可以解决高可用、高并发读的问题。但是依然有两个问题没有解决： 海量数据存储问题 高并发写的问题 使用分片集群可以解决上述问题，如图: 分片集群特征： 集群中有多个master，每个master保存不同数据。 每个master都可以有多个slav ......
Redis - (7) 分片集群
前言 哨兵集群由于自身存在的问题，因此出现了分片集群。 分片集群 （1）集群中有多个master，每个master保存不同的数据。【可以解决数据海亮的问题】 （2）每个master也可以有多个slave节点。 （3）master之间可以互相ping监测彼此的健康状态【即master自己之间实现了哨兵 ......