美文网首页大数据开发
[Spring] XD 1.1: 简化大数据一如Spring之于

[Spring] XD 1.1: 简化大数据一如Spring之于

作者: 葡萄喃喃呓语 | 来源:发表于2016-10-22 14:52 被阅读21次

    Spring XD 1.1: 简化大数据一如Spring之于Java EE
    http://www.infoq.com/cn/news/2015/03/spring-xd-1.1?utm_campaign=infoq_content&utm_source=infoq&utm_medium=feed&utm_term=global
    Pivotal最近发布了Spring XD 1.1 GA新功能包括使用Reactor、RxJava、Spark Streaming和Python进行流处理。此外,支持Kafka、批量处理和RabbitMQ压缩, 以及支持运行在YARN上的容器组管理的功能。Spring XD项目为开发者提供了应用示例超过25个。

    作为发布的一部分,Pivotal的产品经理写到:“大数据应用的开发不应该如此耗时且复杂”。在Spring XD: Data-Driven Connectivity Within a Unified Platform一文中,Anandan强调可以通过命令行使用XD的高级DSL构建数据流,不再需要安装IDE或者构建脚本。他还提到可以使用内置的管理界面实现远程监控和管理流、批量任务和整个集群。

    在宣布Spring XD发版后没多久,Pivotal开源了他们的大数据套件。在此前的InfoQ的文章中,Abel Avram写到:

    相比早期进入大数据市场的HortonWorks、Cloudera和MapR,Pivotal姗姗来迟。但是现在,为解决大数据空间的“碎片化和供应商锁定(fragmentation and vendor lock-in)”问题,Pivotal已经决定从大数据套件中开源数个产品,包括命名为Greenplum Database的平行计算数据仓库、HAWQ--Hadoop查询引擎上兼容ANSI的SQL,GemFire --分布式的NoSQL内存数据库。

    简而言之,这意味着Spring XD简化了配置和构建Map/Reduce和其他YARN查询的样板工作。曾经Spring为Java EE做了同样的事情,Spring简化了折磨企业应用的开发者十余年的、无尽的配置和XML文件。

    相关文章

      网友评论

        本文标题:[Spring] XD 1.1: 简化大数据一如Spring之于

        本文链接:https://www.haomeiwen.com/subject/rkkhuttx.html