本篇的配置环境 https://www.jianshu.com/p/6c086c0ab2a9[https://ww...[作者空间]
操作环境: mysql 8.0.27、windows10、datax3.0 、python3.7.3、Navica...[作者空间]
一、软件安装 Git下载:版本2.34.1-windows64位链接: https://pan.baidu.co...[作者空间]
近期有业务需要用到SM3加密方法,HIVE没有自带的SM3加密算法,故此建立此UDF函数 使用到的pom.xml文...[作者空间]
原始测试数据准备 nameseq_numa1a2b4b5c1c3c4 创建测试表 结果计算 预计过程结果 name...[作者空间]
20210923转2021-09-23 2021-09-23转20210923 获取hive当前时间[作者空间]
每次都有重复的工作,将这些内容整理成一个脚本, 每次只需要传入参数即可[作者空间]
仅针对hive内表,查看表(分区)创建时间 用法 脚本名: hdfsls.sh在~/.bashrc 中添加,wor...[作者空间]
我们在使用大数据集群时,时间越长越发现有大量的冗余数据表,删除却发现所有人的使用情况不一样,删除的话可能会影响当前...[作者空间]
显示所有带ods字样的数据库show databases like '*ods*' 显示所有带ods字样的某个库下...[作者空间]
多人用同一个数据库,有人表名命名不规范导致视图和表无法分离开来,当想查看那些是表,那些是视图时,遇到了问题。网上有...[作者空间]
整体写法 分步解释 url一定有'.'存在 : 在点的前后一定有字母、数字、冒号、斜杠等字符(无中文)按这个想法可...[作者空间]
hive 建多分隔符表 hive 版本1.2.1以上,jdk 1.8 一、测试外表: 在hdfs:///user/...[作者空间]
查看hdfs 集群容量hadoop fs -df -h输出示例:size列为集群总空间,used列为已使用空间集群...[作者空间]
本文主要是讲述flink单机版的搭建及测试 前期准备jave要配置好,版本最好1,8以上 首先在官网下载需要的版本...[作者空间]
在上一篇文章中我们提到了两个脚本,一般会出现一些问题在执行xcall jps会不能用此时有两个问题 1、权限问题 ...[作者空间]
xcall脚本 同步脚本 脚本命令都放在/usr/local/bin下面可全局使用 具体用法见下一篇文章[作者空间]
问题描述 在用远程工具连接虚拟机,或者在虚拟机里操作时经常会遇到,自己输入的命令下面会回来一堆的东西,都找不到从哪...[作者空间]
1、mapmap方法可以将某个函数应用到集合中的每个元素并产出其结果的集合,比如 可以用 2、foreachfor...[作者空间]