Spark SQL 工作流程源码解析(二)parsing 阶段(基于 Spark 3.3.0)_Shockang_spark sql 源码 前言 本文隶属于专栏《1000个问题搞定大数据技术体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出,谢谢! 本专栏目录结构和参考文献请见1000个问题搞定大数据技术体系 目录 Spark SQL 工作流程源码解析(... 源码 网络 2049 02-07
Spark数据分区的源码分析_Elevenzzxp_spark 分区 源码 这里我们主要分析一下 在Spark中创建RDD时候数据是如何分区的。 以一个集合数据为例:val listRdd = sc.makeRDD(List(1,2,3,4))点进makeRDD方法 makeRDD方法有两个参数: Seq:传入的序列 numSlices:切片数,没有制定的会有默认的defaul... 源码 irpas 6832 02-07
Redis从精通到入门——数据类型Zset实现源码详解_zhibo_lv_redis zset 源码 Redis数据类型之Zset详解 Zset简介Zset常用操作应用场景 Zset实现源码阅读Zset—ziplist实现图解Zset—ziplist Zset—字典(dict) + 跳表(zskiplist)实现源码阅读图解zskiplist Zset简介 ????Redis 有序集合和Set集合一样也是 string 类型元素的集合,且不允许重复的成员。... 源码 大大的周 4165 02-07
OpenFeign 源码解析_寒山道杳_openfeign 源码 一、核心组件与概念 关于OpenFeign源码阅读,可从两个方面来进行。首先是被@FeignClient注解修饰的接口类(FeignClient 接口类)是如何创建的,就是其Bean实例是如何被创建的。然后是调用FeignClient 接口类网络请求相关的函数时,OpenFe... 源码 大大的周 6485 02-07
Zookeeper源码分析_enterpc_zookeeper 源码 目录 一. 源码环境搭建 (一)源码下载 1. 官方下载网址: 2. 百度网盘下载地址 (二)配置ANT ?(三)编译zookeeper源码 1. 修改配置文件 2. 编译 ?(四)将编译后的源码直接open方式导入idea (五)ve... 源码 网络 6252 02-07
IDEA中debug Elasticsearch源码之环境搭建_pilaf1990_elasticsearch idea 源码 准备合适版本的JDK 以Elasticsearch 7.17版本为例,在本地搭建debug环境的时候,需要jdk 16以上的版本,可以下载jdk 17的版本。Apple M1的用户,可以下载zulu jdk,下载链接https:///downloads/?package=jdk,Apple M1用户建议下载... 源码 网络投稿 5624 02-07
RocketMQ源码简单梳理_May Hacker_rocketmq 源码 文章目录 前言一、NameServer启动流程1.创建NameSrvController2.初始化NameSrvController3.启动NameSrvController 二、Broker 启动流程创建BrokerController初始化、启动BrokerController 三、消费者消费流程 前言 RocketMQ的启动主要涉及NameServer、Broker、Producer、Con... 源码 网络 3315 02-07
Maxwell 源码部分解读_小雾最秀_maxwell 源码 全个人理解-mark 有错误望指出 当我们部署完成一个maxwell服务 我们想要监听某个mysql表。其官方为我们提供的脚本 ? 可以看到是使用 bin 目录下面maxwell 这个脚本进行启动的, 接着我们来看这个脚本。 可以看到其都是通过调用 com.zendesk.maxwell.Maxwell 进行的 ja... 源码 大大的周 5236 02-07
Spring源码概述_快乐的星球_spring 源码 文章目录 前言一:Spring源码核心结构1.1 图示1.2 Spring框架基本使用方式 二:配置文件的信息如何加载并解析成IOC容器2.1 大致流程2.2 Bean定义信息的定义方式2.3 BeanDefinition对象2.4 BeanDefinitionReader接口2.5 从BeanDefinition对象实例化Bean对象2.6 自... 源码 大大的周 7436 02-07
ZooKeeper 分布式锁 Curator 源码 05:分布式读写锁和联锁_程序员小航 前言 Curator 同样支持分布式读写锁 和联锁,只需要使用 InterProcessReadWriteLock 即可,来一起看看它的源码以及实现方式。 使用方式 public class CuratorDemo { public static void main(String[] args) throws Exception { String connectString = ... 源码 irpas 5023 02-07
flink kafka connector源码解读(超详细)_杨林伟_flink kafka 源码 文章目录 01 引言02 Kafka-Connector 源码分析2.1 项目结构2.2 工厂(源码解读入口)2.2.1 KafkaDynamicTableFactory2.2.2 UpsertKafkaDynamicTableFactory2.2.3 KafkaTableSourceSinkFactory 2.3 序列化和反序列化工厂2.3.1 DeserializationFormatFactory2.3.1... 源码 大大的周 623 02-07
潘多拉开发板——emwin5.44裸机移植记录(ST7789驱动)_碎步湖_emwin 源码 一、emwim5.44的获取 1、打开STM32CubeMX,通过主界面help-Update Setting查看 点击后在弹出的界面可以看到路径,以我的电脑为例,可以找到以下的文件夹 正点原子的潘多拉使用的是STM32L475的的单片机,这里选择STM32Cube_FW_L4_V1.16.0文件夹ÿ... 源码 大大的周 7690 02-07
redis源码 【sds】【redis源码】_.Passion_redis源码 redis string 源码解析 具体可以参考 redis 源码 sds.h 这个文件 /* Note: sdshdr5 is never used, we just access the flags byte directly. * However is here to document the layout of type 5 SDS strings. */ /* 所有的结构体中: * len 表示已使用长度 * alloc 表示可... 源码 大大的周 7032 02-07
8 张图 | 剖析 Eureka 的首次同步注册表_悟空聊架构_eureka注册表结构 大家好,我是悟空。 Eureka 注册中心系列文章汇总: 领导让我研究 Eureka 源码 | 启动过程 领导“叕”让我研究 Eureka 源码:注册过程 值得收藏的 Eureka 控制台详解 原来一个 Map 就能搞定注册表了 一、前言 注册表对于注册中心尤为重要,所有的功... 源码 网络 6047 02-07
Apache Kudu 从源码开始构建并部署 Kudu 集群_Yore Yuen_kudu 源码 官网 ?? | 文档 ?? | 源码 目录 1 概述1.1 架构及概念和术语1.2 支持的列类型1.3 编码类型1.4 列压缩1.5 关于主键 2 编译2.1 安装需要的依赖库2.2 构建文档时需要的依赖(可选)2.3 编译 Kudu2.4 安装2.5 构建文档(可选)2.6 单独构建 Java Client(可选) 3 部署3.1 开始部署3.2... 源码 未知 581 02-07
Doris FE启动流程源码详细解析_齐木木9406_doris 源码 Doris FE启动流程源码详细解析 一、简介 Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Doris的分布式架构非常简洁,易于运维,并且可以支持10PB以上的超大数据集。 Apache Doris... 源码 未知 8216 02-07
基于CNN的动物识别系统[完整实战源码]_Together_CZ_cnn 源码 在图像识别领域中CNN是非常重要的模型,前面我写了一些关于识别系统的文章,后面有很多人陆陆续续在问源码,因为很多时候的博文都是我自己做项目或者是做实验的过程记录,过去时间久了可能就没有办法找到了,今天我以动物识别数据集为例讲解完整的项目开发过程,同时提供能够... 源码 网络投稿 2848 02-07
【Android App】物联网中指南针、计步器、感光器、陀螺仪的讲解及实战演示(附源码 超详细必看)_showswoller_android 指南针 源码 需要源码请点赞关注收藏后评论区留言~~~ 一、指南针-磁场传感器 顾名思义,指南针只要找到朝南的方向就好了。 可是在App中并非使用一个方向传感器这么简单,事实上单独的方向传感器已经弃用,取而代之的是利用加速度传感器和磁场传感器。 获得加速度和磁场... 源码 网络 2100 02-07
Qt数据库练习之Qt SQLITE的使用(从无到有,含源码+注释)_lw只吃亿点._qt sqlite 源码 文章目录 一、操作示例1.1 创建数据表1.2 添加记录(数据) 二、了解SQLITE三、源码3.1 CDBTest.h3.2 CDBTest.cpp 总结相关文章 一、操作示例 1.1 创建数据表 下图为创建数据表的操作,其步骤分为: 确保当前没有数据表创建数据表查看数据表是否创建... 源码 大大的周 4037 02-07
postgresql源码学习(26)—— Windows vscode远程调试Linux上的postgresql_Hehuyi_In_postgresql 源码 本篇纪念小白第一次用开发工具调试源码成功~ ? ? ? ?gdb使用命令行调试感觉还是有诸多不便,本来想简单点找找怎么直接调试Windows下的pg源码,找了半天只有用vs,太重而且步骤比较复杂。大多数实际环境还是运行在Linux的,所以最好还是调试Linux下的... 源码 未知 2650 02-07