一,介绍 Luigi 是一个 Python 模块,可以帮你构建复杂的批量作业管道。处理依赖决议、工作流管理、可视化...[作者空间]
下载安装airflow 使用pip 安装 pip install apache-airflow 将默认的数据库sq...[作者空间]
管理Hadoop作业的官方工作流程调度程序是Apache Oozie。与许多其他Hadoop产品一样,Oozie是...[作者空间]
环境配置 Ubuntu Python 2.7 安装步骤 设置基础的默认路径:export AIRFLOW_HOME...[作者空间]
基础Task每个任务模块以class的形式存在,继承luigi.Task class TestTask(luig...[作者空间]
简述 前端时间尝试着搭建了airflow的高可用(HA)环境,为避免自己遗忘,现将安装过程整理成文档。公司环境没有...[作者空间]
连接区块链就要了解其历史,那么说到区块链的技术和历史,仍然要从比特币开始说起。 1、比特币概况 区块链技术的首次也...[作者空间]
一直想写一篇关于加密猫的文章,想来想去没有什么独到的见解可写,直到最近看到火爆的《旅行青蛙》,突然有了一些自认为可...[作者空间]
凡事总须研究,才会明白。古来时常吃人,我也还记得,可是不甚清楚。我翻开历史一查,这历史没有年代,歪歪斜斜的每页上都...[作者空间]
古老的“拜占庭将军问题” 01 让人生,让人死,让人痴迷,让人疯狂。 这就是传说中繁华与没落,绝望...[作者空间]
【汇新云】为大家定期更新文章,【汇新云】IT人的产业链平台 如果你对于以太坊智能合约开发还没有概念(本文会假设你已...[作者空间]
声明:本文转自我的个人博客,有兴趣的可以查看原文。转发请注明来源。 最近工作需要,使用airflow搭建了公司的E...[作者空间]
前言 在生信的领域中,无论是哪一个领域的事情,其实在大多数的时候都是遵循一个流程进行的。包括其中gatk所推荐一些...[作者空间]
在最近的工作中,涉及到很多的数据流程,需要去维护和监控,耗费了不少的人力,但是效果却不理想。数据接入作为工作中基础...[作者空间]
article 一个故事告诉你比特币的原理及运作机制 The Proof-of-Work Concept 比特币白...[作者空间]
区块链技术不仅将深刻地影响和改变金融行业,在物联网领域也将起到革命性的作用。物联网(Internet of Thi...[作者空间]
PBFT是Practical Byzantine Fault Tolerance的缩写,意为实用拜占庭容错算法。该...[作者空间]
原文地址:李启雷的博客 以太坊是什么? 以太坊(ethererum)是一个开放的区块链平台,任何人都可以基于以太坊...[作者空间]
原文地址 2.1 Fabric构架 Fabric的构架由成员服务(Membership)、区块链服务(Blockc...[作者空间]
原文地址 这篇文章介绍了Hyperledger区块链技术的原理、构架和协议。 1.1 Fabric介绍 Fabri...[作者空间]