记录头属性是记录头中的属性,您可以根据需要在管道逻辑中使用这些属性。 有些stage为特定目的创建记录头...[作者空间]
Flink系统组成 Flink是一个分层系统,从下到上分为:系统部署层、任务运行层、API层以及基于API开发的通...[作者空间]
1 架构 1.1 概述 Alluxio作为大数据和机器学习生态系统中的一个新的数据访问层,配置在任何持久性存...[作者空间]
Kafka Connect是一个用于将数据流输入和输出Kafka的框架。Confluent平台附带了几个内置...[作者空间]
本篇文章描述了开发人员如何为Kafka Connect编写新的connector。 核心概念与API Con...[作者空间]
原创,转载请标明出处: https://www.jianshu.com/p/c39596da86bb 本文主要关于...[作者空间]
背景 yarn默认使用的是最简单的FIFO调度器,即一个default队列,所有用户共享,分配资源也是先到先得,没...[作者空间]
Ambari安装部署Hadoop Apache Ambari是一种基于Web的工具,支持Apache Hadoop...[作者空间]
声明:作者原创,转载注明出处。作者:帅气陈吃苹果 一、安装Sqoop 1、下载sqoop,解压、文件夹重命名 2、...[作者空间]
下载全部视频和PPT,请关注公众号(bigdata_summit),并点击“视频下载”菜单 Building Ev...[作者空间]
Hadoop YARN 源码组织结构 YARN API(对应hadoop-yarn-api目录):给出了YARN内...[作者空间]
Spark Streaming是架构在Spark Core上的一个“应用”,SparkStreaming主要由DS...[作者空间]
以下大部分题目是从网上搜索得来,答案是笔者给的,若有错误,烦请指出,谢谢。 1 每天百亿数据存入HBase,如何保...[作者空间]
搭过Hadoop的人都知道,Hadoop的搭建过程非常的繁琐,需要配置大量的环境,修改大量的配置文件,因此搭建一个...[作者空间]
如果你还没看过Flume-ng源码解析系列中的启动流程、Channel组件和Sink组件,可以点击下面链接:Flu...[作者空间]
如果你还没看过Flume-ng源码解析系列中的启动流程和Channel组件,可以点击下面链接: Flume-ng源...[作者空间]
如果还没看过Flume-ng源码解析之启动流程,可以点击 Flume-ng源码解析之启动流程 查看 1 接口介绍 ...[作者空间]
HBase、HDFS和MapReduce架构异同[作者空间]
1 ZooKeeper的一致性特点 2 ZK的设计目标 3 ZK的系统模型 4 ZK的ZAB协议(原子广播协议) ...[作者空间]