hive 日期和时间戳互相转化_大数据界的扛把子_hive时间戳转换日期格式 一 . 日期转时间戳 1 unix_timestamp()???获取当前时间戳 ?select unix_timestamp(); --1636462239 ?2 unix_timestamp() ?输入日期参数? 输入的时间格式必须符合 yyyy-MM-dd HH:mm:ss select unix_timestamp('2021-11-11 11:11:11'); --1636600271 ?3??unix_timesta... 一 irpas 3724 02-07
MySQL 高级(进阶) SQL 语句 (一)_放弃?怎么活! 目录 环境:创建表一、order by语句二、升序与降序(ASC和DESC)三、select查询四、and/or-且/或五、where六、distinct(查询不重复记录)七、group by(对结果进行分组)八、limit九、alias(设置别名) 环境... 一 irpas 3541 02-07
大数据实验一:大数据系统基本实验(第三部分:熟悉常用的 HBase 操作)_EGNIR_大数据实验一 一、 实验目的 1)理解 HBase 在 Hadoop 体系结构中的角色。 2)熟练使用 HBase 操作常用的 shell 命令。 3)熟悉 HBase 操作常用的 Java API。 二、 实验平台 1)操作系统:Linux(Ubuntu18.04); 2)Hadoop 版本&... 一 未知 2497 02-07
如何使用docker搭建Hadoop集群_码猿小菜鸡_docker搭建hadoop集群 一. 环境: 1.Ubuntu20 2.Hadoop3.1.4 3.Jdk1.8_301 二. 具体步骤 拉取最新版本ubuntu 镜像利用挂载将jdk,hadoop 等安装包通过xftp 或者使用命令行scp 命令传到挂载目录。进入ubuntu 镜像容器docker exec -it 容器id /bin/bash更新apt-get 系统源apt-get update更新完... 一 网络投稿 792 02-07
MongoDB 备份与还原 mongodump、mongorestore_dawang325_mongodump 一、 MongoDB 备份 1、mongodump mongodump 是 MongoDB 官方提供的备份工具,它可以从 MongoDB 数据库读取数据,并生成 BSON 文件,mongodump 适合用于备份和恢复数据量较小的 MongoDB 数据库,不适用于大数据量备份。 ? 默认情况下 mongodump 不获... 一 网络 6630 02-07
Windows 安装 Zookeeper 详细步骤_唱跑雨淋淋_windows安装zookeeper 一、 Zookeeper 安装包下载 1、官网地址 https://zookeeper.apache.org/index.html 2、安装包下载 这里选择目前的稳定版 3.6.3 下载 可以看到有两个选项 Apache ZooKeeper 3.6.3(asc, sha512):不带源码 Apache ZooKeeper 3.6.3 Source Release(asc, sha512):带... 一 未知 2680 02-07
linux查看指定目录下各个文件大小以及总体大小_健康平安的活着_linux查看目录下文件大小 一 查看目录下各个文件的大小 1.查询文件的大小 [Devops@localhost kafka_2.11-2.3.1]$ du -h --max-depth=1 240K?? ?./bin 72K?? ?./config 64M?? ?./libs 3.3M?? ?./site-docs 2.6G?? ?./data 14M?? ?./logs 2.7G?? ?. 2.查询该目录下所有资源的大小,包括压... 一 irpas 2566 02-07
开启kafka密码认证_雅冰石_kafka 密码 Kafka默认未开启密码认证,可以免密登录,太不安全,因此需要开启密码认证。 一 kafka认证方式类型 kafka提供了多种安全认证机制,主要分为SSL和SASL大类。其中SASL/PLAIN是基于账号密码的认证方式,比较常用 1.1 SSL ?1.2 SASL 1.2.1 SASL/K... 一 未知 729 02-07
DolphinScheduler 简介及安装部署(集群)_落花雨时_dolphinscheduler安装部署 一、 DolphinScheduler简介 1.1 DolphinScheduler概述 ??Apache DolphinScheduler是一个分布式、易扩展的可视化DAG工作流任务调度平台。致力于解决数据处理流程中错综复杂的依赖关系,使调度系统在数据处理流程中开箱即用。 1.2 DolphinScheduler核心架构 DolphinSche... 一 未知 5868 02-07
数仓及其维度(分层)建模(ODS DWD DWS DWT ADS)_FordwardSummer_ads 数仓 一. 数仓及其维度 1. 什么是数仓? ????????数据仓库,简称数仓,( Data Warehouse )。从逻辑上理解,数据库和数仓没有区别,都是通过数据库软件实现存放数据的地方,只不过从数据量来说,数据仓库要比数据库更庞大。 数仓... 一 未知 2156 02-07
【参赛作品11】过程化SQL以及openGauss存储过程、函数、触发器_Gauss松鼠会_sql触发器的使用及语法 一、 过程化SQL 基本的SQL是高度非过程化的语言。嵌入式SQL将SQL语句嵌入程序设计语言,借助高级语言的控制功能实现过程化。过程化SQL是对SQL的扩展,使其增加了过程化语句功能。 简单来说,从标准SQL语句到嵌入式SQL再到过程化SQL,就是使SQL功能不... 一 irpas 1256 02-07
MySQL安装配置教程(超级详细、保姆级)_SoloVersion_mysql安装配置教程 一、 下载MySQL Mysql官网下载地址https://downloads.mysql.com/archives/installer/ 1. 选择想要安装的版本,点击Download下载 ????????本篇文章选择的是5.7.31版本 二、 安装MySQL 1. 选择设置类型 双击运行mysql-installer-community-5.7.31.0.msi,这里选择... 一 未知 1874 02-07
JMeter—json提取器使用方法_檬柠wan_json提取器用法 一、 json path 语法 在使用json提取器之前,我们先用在线网站学习一下。网站地址:链接 1、提取lastName的值可以写$.lastName $: 代表整个json,根节点. : 点代表下个节点$.lastName 意思就是,找到根节点下的lastName的值 2、提取根节点下的 address... 一 未知 771 02-07
hive基础【hive项目实战】_hike76_hive项目实战 文章目录 一 数据结构1 视频表2 用户表3 ETL原始数据3.1 导入依赖3.2 创建log4j2.xml配置文件3.3 ETLMapper3.4 ETLDriver3.5 提交集群运行 4 准备工作4.1 创建外部ori表4.2 创建内部orc表4.3 向orc表插入数据 5 业务分析5.1 统计视频观看数Top105.2 统计视频类别热度top105.... 一 大大的周 3779 02-07
IOS开发之——数据库-常见操作(02)_PGzxc_ios 数据库 一 概述 SQL语句SQL表格操作SQL数据操作 二 SQL语句 2.1 SQL语句 什么是SQL SQL(structured query language):结构化查询语言SQL是一种对关系型数据库中的数据进行定义和操作的语言SQL语言简洁,语法简单,好学好用 什么是SQL语句 使用SQL语... 一 未知 2354 02-07
Django将数据库从sqlite3切换为mysql_heehoo-ai_django换mysql 要把Django正在使用的数据库从sqlite3切换为mysql,基本思路就是先把sqlite3数据库里的数据使用Django的方式导出来,然后将Django的settings文件中的database 改为mysql,最后再使用Django的方式将数据导入。 一 导出数据 Django的settings/databases为sqlite3时导出数据 py... 一 网络投稿 5751 02-07
[Spark]PySpark入门学习教程---介绍(1)_Vinkin~Fight 一 安装指引 (91条消息) [Hadoop] mac搭建hadoop3.X 伪分布模式_小墨鱼的专栏-CSDN博客https://zengwenqi.blog.csdn.net/article/details/122427729 二 Spark基础概念 Spark的核心概念 ? ? ? ? ?Spark 是 UC Berkeley AMP lab 开发的一个集群计算的框架,类似于 Hadoo... 一 irpas 3688 02-07
Pyspark DataFrame操作笔记_ASKED_2019_pyspark 打印dataframe Pyspark数据基础操作集合 1.1 创建DataFrame1.2 DataFrame基础操作1.2.1 数据的筛选1.2.2 增加、删除、修改列1.2.3 排序1.2.4 去重1.2.5 空值的判断与处理1.2.6 数据联结1.2.7 其他行列相关高级操作1.2.8 GroupBy(1) GroupBy基本操作(2) 与pandas的结合 1.2.9 一切操作之前需... 一 irpas 7915 02-07
Flink实操 : DataSource操作_张伯毅 . 一 .前言二 .四种读取类型2.1. 基于本地集合的source(Collection-based-source)2.2. 基于文件的source(File-based-source)2.2.1. readTextFile2.2.2. readCsvFile2.3. 基于网络套接字的source(Socket-based-source)2.4. 自定义的sourc... 一 irpas 7098 02-07
在HBase中创建学生成绩数据库_fear_yue_hbase创建学生表 一 .这里用一个学生成绩表作为例子,对HBase的基本操作和基本概念进行讲解。下面是学生的成绩表结构。 name grad course:math course:art Tom 1 87 97 Jerry 2 100 80 这里grad对于表来说是一个列,course对于表来说是一个列族,这个列族由两个列组成... 一 irpas 7516 02-07