MapReduce on Yarn（包含MapReduce执行详细流程）_CLAY157 1. MapReduce 1.1 MapReduce任务在Yarn中执行流程 MapReduce作为一种分布式计算框架，它在Yarn中执行的流程为： （1）客户端提交job； 细节： ① org.apache.hadoop.mapreduce.Job类配置job； ② mapred-site.xml中mapreduce.fra... 1 大大的周 2244 02-07
linux下搭建redis集群_下雨天的太阳_linux搭建redis集群 目录 1. 准备三台服务器2. 配置服务器3. 安装redis4. 配置集群5. 测试集群 1. 准备三台服务器 这是准备的三台服务器IP地址如下，首先需要执行ping ip地址，检查三台服务器之间是否能够相互通信，如下图所示，说明相互之间能够通信,这一点很重要... 1 irpas 4448 02-07
Redis深入学习（二）使用SpringBoot连接Redis_一路向茜_springboot连接redis 1. 新建SpringBoot项目 创建一个maven项目spring-boot。 2. 添加相应依赖 修改项目的pom.xml文件配置。 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="htt... 1 未知 1021 02-07
MySQL 锁表后快速解决方法 及 锁表原因_黑帽子技术 前几天同事在晚上上线的时候执行sql语句造成锁表，想总结一下以避免后续发生。 (1) 遇到锁表快速解决办法 依次执行1-6步，运行第6步生成的语句即可。 如果特别着急，运行 1 2 6 步 以及第6步生成的kill语句 即可。 1. ?第1步 查看表是否在使用 1 2 show... 1 网络 6683 02-07
Docker 安装 redis,并配置持久化,redis默认的redis.conf文件_是小晴晴呀_docker redis默认配置文件 ?1.? ?docker pull redis:6.0.8 ?2.命令提醒：容器卷记得加入??--privileged=true 3.本机建立文件夹，用来映射容器卷 ? ? ? ?建立 /mytest-docker/redis? ? 建立? redis.conf文件? 修改里面的内容 （随便拷贝一个已经安装过的redis.conf? 如果没有&#x... 1 irpas 6330 02-07
MySQL主从复制原理_牛奔 1. 数据库主从概念、优点、用途 主从数据库是什么意思呢，主是主库的意思，从是从库的意思。数据库主库对外提供读写的操作，从库对外提供读的操作。数据库为什么需要主从架构呢？ 高可用，实时灾备，用于故障切换。比如主库挂了，... 1 网络 8358 02-07
Linux中Redis使用认证密码登录_无薪法师_linux redis 登录 Redis默认配置是不需要密码认证的，也就是说只要连接的Redis服务器的host和port正确，就可以连接使用。这在安全性上会有一定的问题，所以需要启用Redis的认证密码，增加Redis服务器的安全性。 1. 修改配置文件 Redis的配置文件默认在/etc/redis.con... 1 大大的周 2816 02-07
redis远程连接不上问题_Coding_Fly__redis远程连接不上 1. 检查防火墙是否关闭 2. 检查端口是否开放 如果是云服务器，那么需要配置安全组 6379，检查是否开放相应端口 3. 是否配置密码和更改配置文件的端口 3.1 首先要在redis.conf里面将密码配置上 3.2 需要更改bind套接字 默认安装是绑定的本地回环地址 如果是这样我... 1 网络 7821 02-07
Redis7.0 新特性（超详细）_mooddance_redis7新特性 前言 从 2022 年 1 月 31 日发布了 Redis 7.0 RC1 开始，经过几个 RC 版本的快速上线。Redis 7.0.0 GA 版于 2022 年 4 月 27 日正式发布，代表 Redis7.0 进入了稳定版(Stable)时代。 本文将针对 Redis 7.0 的新特性进行展开，尝尝鲜。 一 配置项变动 1. 多... 1 大大的周 2311 02-07
SeaTunnel_moooooze SeaTunnel 版本：V1.0 第 1 章 Seatunnel 概述 1.1 SeaTunnel 是什么 SeaTunnel 是一个简单易用的数据集成框架，在企业中，由于开发时间或开发部门不通 用，往往有多个异构的、运行在不同的软硬件平台上的信息系统同时运行。数据集成是把 不同来源、... 1 网络投稿 1171 02-07
【运行报错】使用BeanUtil做beanToMap时，转换字段（可能为null）的属性为String类型_coolcoo1cool 1. 报错信息： 使用Redis代替session做缓存时，需要将redis中未命中的数据，从数据库查出再存入redis缓存首先得将对象转为hashmap（这里使用得是hutool的BeanUtil）且使用StringRedisTemplateredis需要转换成的map的各个字段都是String类型&#... 1 网络投稿 3703 02-07
大数据的下一代变革-数据湖之Iceberg_Keven He_iceberg 数据湖 1. 什么是数据湖 1.1 什么是数据湖 数据湖是一个集中式的存储库，允许以任意模式存储多个来源，所有结构化和非结构化数据，可以按照原样存储数据，无需对数据进行结构化处理，并运行不同类型的分析，对数据进行加工，例如：... 1 irpas 6687 02-07
02 - Flink启动_敲代码的卡普罗尼_flink 启动 1. 背景 在[01 - Flink源码编译] 文章中介绍了Flink源码如何编译，这篇文章主要介绍源码编译后的启动验证。 2. 说明 （1）Flink编译后的可执行jar包在flink-dist目录下，具体如下： 查看目录内容： a. bin目录：Flink的执行命令所... 1 网络投稿 7694 02-07
RabbitMQ常见问题与解决方案_蝎子莱莱爱打怪_rabbitmq常见问题及解决 原文： https://juejin.cn/post/7008456373931343908 面试中MQ是常问的，我认为这并不属于八股文，而是对复杂业务场景下的总结和思考，还有对MQ机制的认知。 1. RabbitMQ如何保证消息不丢失？ 1.1 (生产者需要做的) 生产者重写 RabbitTemplat... 1 网络投稿 3376 02-07
Spark基础学习笔记05：搭建Spark Standalone集群_howard2005_spark standalone搭建 文章目录 零、本讲学习目标 一、Spark Standalone架构 （一）client提交方式 （二）cluster提交方式 二、Spark集群拓扑 （一）集群拓扑 （二）集群角色分配 三、搭建三节点集群 （一）在私有云上创建三台虚拟机 （二）利用FinalShell登录三台虚拟机 1、创建SSH连接 1、登录m... 1 网络投稿 734 02-07
一文搞懂 RabbitMQ 延时队列（订单定时取消为例）_Ayue、_rabbitmq延迟队列取消订单 1. 死信及死信队列 1.1 什么是死信 一般来说，生产者将消息投递到队列中，消费者从队列取出消息进行消费，但某些时候由于特定的原因导致队列中的某些消息无法被消费，这样的消息如果没有后续的处理，就变成了死信(Dead Letter)，所有的... 1 未知 3442 02-07
SpringBoot2.3整合RocketMQ实现消息发送和接收_乘着清风写程序 1. 概述 RocketMQ是一个统一消息引擎、轻量级数据处理平台。更多介绍可参阅RocketMQ官网 1.1. 基本概念 消息(Message)：消息系统所传输信息的物理载体，生产和消费数据的最小单位，每条消息必须属于一个主题 主题(Topic)：一类消息的集合，每... 1 大大的周 658 02-07
RabbitMQ使用方法最详细攻略_Liu_Shihao_rabbitmq使用方法 目录 一、简介二、安装部署2.1 yum方式安装2.2 docker方式安装 三、RabbitMQ架构消息投递消费流程（重要）： 四、RabbitMQ通讯方式4.0 建立Maven项目4.1 HelloWord4.1.1 创建连接工具类4.1.2 生产消息4.1.3 监听消息 4.2 Work Queue4.2.1 一个生产者4.2.2... 1 大大的周 7946 02-07
Linux搭建RabbitMQ单机/集群步骤_newIdea_xx_linux rabbitmq集群搭建 文章目录 1. 搭建RabbitMQ单机环境1.1. 版本1.2. 资源下载1.3. 搭建步骤1.3.1. 安装Erlang1.3.2. 安装socat1.3.3. 安装RabbitMQ1.3.4. 关闭防火墙1.3.5. 测试安装结果 2. 搭建RabbitMQ集群环境2.1. 搭建环境2.2. 搭建步骤2.3. 验证集群效果2.4. 添加镜像队列策略 3. 卸载Rab... 1 网络投稿 7122 02-07
消息队列的介绍及配置_乘浪初心_消息队列配置参数 一、消息队列详解 消息队列（Message Queue），是分布式系统中重要的组件，其通用的使用场景可以简单地描述为：当不需要立即获得结果，但是并发量又需要进行控制的时候，差不多就是需要使用消息队列的时候 主要解决：应用耦... 1 网络投稿 2683 02-07
