值得关注的开源软件

作者: Maker在杭州 | 来源:发表于2018-05-26 20:18 被阅读140次

    看了值得关注的开源软件推荐,感觉很不错,作者接触开源软件十几年,协作开发了10多个开源项目,对开源软件的认识和实践确实让人大开眼界。

    应用类:框架、企业应用、编辑器

    数据类:数据科学、大数据、机器学习、汽车机器人

    服务类:云计算、数据库、消息队列、服务器

    系统类:操作系统、编译器、虚拟机、编程语言

    作者按上面四类介绍了45个开源软件的特性和要点,包括目前工作中常用到的JVM、Nginx、Tomcat、Kafka等,估计是工作技术栈原因,里面没有讲到Spring、Spring Boot、SpringCould、Redis等也很常用的开源项目。

    看过文章才感觉个人技术视野的狭窄,工作中主要关注框架应用层的技术,对现在流行的数据类、云计算基础实施类的技术了解大少。以后在加深工作中应用技术深度的同时,也要注意扩展自己技术的广度才行。

    https://github.com/huihoo/wiki有相关开源技术的资料索引,有时间要学习一下。

    最后摘录一下作者列出的45个开源软件的特性要点,感兴趣的朋友建议看原文更精彩。

    1. Django

    Django和Flask是使用最广泛的Python Web框架;

    Django提供Web一站式解决方案:会话、缓存、ORM、验证、表单处理、后台管理等,但系统耦合度高,替换内置功能比较麻烦,学习曲线较陡;

    Django和Flask都基于WSGI,这是同步阻塞接口,不能使用异非阻塞的编程模式,你可考虑使用Klein微框架,用法很像Flask,可以异步方式编写Web应用。

    2. Meteor

    一个面向Web和App的应用框架和构建平台

    Meteor 7大原则;

    超过12000个包的生态系统。

    3. Qt

    Qt核心:元对象系统、属性系统、对象模型、对象树、信号槽(Signal/Slot),Qt的Signal/Slot很好解决了对象间通讯的问题,被其它语言框架借鉴;

    Qt使用QML定义用户界面,使用C++编写业务逻辑;

    Qt在在汽车行业有广泛应用,是GENIVI汽车联盟的推荐技术。

    4. odoo

    odoo不仅仅是开源ERP/CRM;

    还是一套伴随企业成长可扩展的商业运营支撑系统;

    一个巨大的应用生态系统,有近12500个Apps可供选用。

    5. iDempiere

    iDempiere = OSGi + Adempiere;

    OSGi是Java模块化一个领先的解决方案;

    Adempiere是一个世界级的集成的ERP/CRM开源软件。

    6. Moqui

    Apache OFBiz作者的又一力作;

    快速的企业应用原型系统开发;

    一个框架、一个生态系统。

    7. Emacs

    Emacs是迄今为止功能最为强大的文本编辑器,Emacs是一种信仰,它是神一般的编辑器;

    Emacs是模块化的,遵循do one thing, and do it well原则,需要什么就安装什么,你可以像搭积木的方式搭建自己的环境和系统;

    Everything Emacs,你可以在Emacs完成你几乎所有的工作:编程、写作、浏览网页、收发邮件、日程、娱乐游戏、它是个人操作系统。

    8. Vim

    Vim模式:普通模式,插入模式,可视模式,命令行模式;

    Vim的使用主要放在定位操作上;

    常见定位命令如:上下左右的操作,k 上行、j 下行、h 左、l 右;定位后就是操作,vim操作命令是原子性的,可随意组合操作命令,如:daw(delete a word)、caw(change a word)。

    9. Atom

    Atom由GitHub开发维护;

    Atom使用的Electron framework已有一个庞大的生态系统;

    微软Visual Studio Code和Facebook Nuclide都基于Atom/Electron框架构建。

    10. Jupyter

    Jupyter is the new front end for data science and AI.

    Jupyter的操作过程可存档、传播、分享;

    Jupyter的核心是IPython,Jupyter是未来。

    11. Pandas

    在数据科学领域,Pandas是一个非常重要的Python软件包;

    Pandas基于NumPy构建,让以NumPy为中心的应用变得更简单;

    Pandas使用的两个主要数据结构:Series和DataFrame。

    12. Anaconda

    Anaconda是一个企业级Python发行版,面向大规模数据处理、预测分析和科学计算;

    Anaconda 以 Red Hat 和 Debian Linux 发行版的方式来分发 Python;

    Anaconda 包含近500个最流行的科学、数学、工程和数据分析的Python软件包。

    13. HDP

    Hortonworks公司拥有最多的Apache大数据相关项目开发者和贡献者,开发、发行100%开源的大数据平台;

    Hortonworks Data Platform (HDP)和Hortonworks DataFlow (HDF)是两大产品;

    通过整合、交付统一的 Apache Spark 和 Hadoop,将 Spark 驱动的敏捷分析工作流程与 Hadoop 的海量数据集和经济性相结合,企业可以使用行业最佳安全性、管制和运营能力来部署 Apache Spark。

    14. CDH

    CDH可能是商业化运作最好的大数据平台和解决方案;

    开发维护了多个流行大数据开源软件,是HDP最主要的竞争对手;

    Impala一个C++开发的Hadoop实查询引擎,值得关注。

    15. HPCC

    一套C++开发的大数据处理和分析平台;

    ECL (Enterprise Control Language) 和KEL (Knowledge Engineering Language) 是两个High Level的脚本语言;

    HPCC比Apache Hadoop历史更加悠久,在并行架构上也有自己的独到之处:Data Parallelism、Pipeline Parallelism、System Parallelism

    16. Caffe(Caffe2)

    Caffe2 是贾扬清对Caffe的重新思考和重构,目前在Facebook,是Caffe2的核心开发者;

    Caffe2对移动端的良好支持,15行代码Support WatchOS build 确实够简单;

    Caffe2可在手机与树莓派上训练和部署模型。

    17. MXNet

    比TensorFlow更加轻量、高效小巧,更适合自定义需求高的公司和研究者;

    MXNet允许用户自由把图计算和过程计算混合起来使用;

    MXNet正在Apache基金会孵化,相信很快孵化成顶级项目。

    18. TensorFlow

    TensorFlow体格庞大,代码量大,抽象层多,深度自定义会很困难;

    TensorFlow也是一个商业行为,背后是Google,它带来的可行度和高质量;

    一个事实:Google内部版的TensorFlow和Google Cloud深度绑定优化与开源的TensorFlow在速度和性能上会又巨大差异,美国的大厂都或多或少的在拒绝它。

    19. Automotive Grade Linux(AGL)

    Automotive Grade Linux(AGL) 是 Linux基金会发布的开源Linux车载系统,AGL 基于 Tizen 构建;

    AGL + Tizen IVI + GENIVI = AGL UCB(Unified Code Base));

    Qt Automotive Suite based on GENIVI or Automotive Grade Linux。

    20. ROS

    ROS是一个广泛使用的机器人操作系统和软件框架,ROS的基本原理是无需改动就能在不同的机器人上复用代码;

    随着ROS 2.0的开发,ROS能够兼容除Linux之外的更多操作,如Windows、Android;能够支持从工业计算机到Adruino开发板等各种硬件;

    百度无人车阿波罗平台基于ROS构建。

    21. Apollo Auto

    百度 Apollo(阿波罗)是一个开放的、完整的的平台,将帮助汽车行业及自动驾驶领域的合作伙伴结合车辆和硬件系统,快速搭建一套属于自己的自动驾驶系统,采用Apache v2许可协议;

    阿波罗平台基于ROS构建;

    阿波罗核心核心基于Linux Kernel 4.4.32构建。

    22. OpenStack

    OpenStack是开源云平台的事实标准;

    OpenStack + Kubernetes 开启云计算的新时代;

    OpenStack尽管非常好,国内也有很多厂商是自研云计算平台的,如:腾讯。

    23. OpenShift

    OpenShift is Enterprise-Ready Kubernetes;

    Docker容器和Kubernetes容器编排已成为企业交付软件和服务的行业标准,OpenShift可直接作为企业DevOps & CI/CD的基础设施, 成为部署微服务的多租户平台;

    OpenShift是BlockApps区块链平台的PaaS基础设施。

    24. SaltStack

    SaltStack提供了一种全新的基础设施管理方式,部署轻松,在几分钟内可运行起来,扩展性好,很容易管理上万台服务器,速度快,服务器之间秒级通讯;

    SaltStack使用ZeroMQ,带来极高的通讯效率;

    SaltStack或许是构建、管理、运营云计算基础设施的最佳方式,它支持广泛的云平台。

    25. Riak

    Riak 是使用 Erlang 开发的开源(Apache V2) 分布式 NoSQL 键/值(K/V) 存储数据库系统;

    有 Riak Core、Riak KV 键值存储、Riak TS 时序存储、Riak S2 对象存储的完整产品线;

    Riak拥有Erlang语言带来的分布式、消息、并发、可伸缩、容错方面的天然优势。

    26. OrientDB

    OrientDB 是一个Java开发的开源(Apache v2)NoSQL文档和图形数据库,也通过 OrientDB SQL 支持 SQL;

    OrientDB是一个拥有对象模型 键/值模型 文档模型 图模型的多模型数据库;

    多范式编程语言(面向对象、模板、函数式编程、过程式 )C++带来极高的生产力,多模型数据库OrientDB能否也带来类似效果。

    27. Apache Kylin

    Apache Kylin:商业数据仓库、商业OLAP引擎的替代品;

    Kylin是为减少在Hadoop上百亿规模数据查询延迟而设计,Kylin为Hadoop提供标准SQL支持大部分查询功能,通过Kylin,用户可以与Hadoop数据进行亚秒级交互;

    一个开源数据仓库、商业智能生态系统。

    28. RabbitMQ

    RabbitMQ是Advanced Message Queuing Protocol (AMQP)标准的Erlang语言实现;

    RabbitMQ是部署最广泛的开源消息代理;

    可以把ZeroMQ看作RabbitMQ这类消息队列系统的补充,而不是替代品。

    29. Apache Kafka

    Apache Kafka:下一代分布式消息系统;

    Apache Kafka 是一个高吞吐量的分布式消息系统,使用 Scala 开发,最初被用于 LinkedIn;

    Apache Kafka 解耦企业应用的复杂性,是信息和流数据的交换枢纽。

    30. Ejabberd

    与RabbitMQ实现的AMQP相比,XMPP广泛应用于即时通信领域;

    Ejabberd是XMPP Server的首选;

    Ejabberd支持Elixir编程语言

    31. Nginx

    epoll(freebsd的kqueue)网络IO模型是Nginx高性能的根本理由;

    与Apache相比较,最核心的区别在于Apache是同步多进程模型,一个连接对应一个进程;Nginx是异步的,多个连接可以对应一个进程;

    对于后端动态服务来说,比如Java和PHP。这类服务器(如JBoss和PHP-FPM)的IO处理能力往往不高。Nginx有个好处是它会把Request在读取完整之前buffer住,这样交给后端的就是一个完整的HTTP请求,从而提高后端的效率,而不是断断续续的传递(互联网上连接速度一般比较慢)。同样,Nginx也可以把response给buffer住,同样也是减轻后端的压力。(此条信息来自:知乎叔度

    32. Jetty

    Eclipse Jetty,一个更轻量、更易扩展和定制的Java Web Server;Jetty架构基于Handler,扩展更容易,而Tomcat是基于容器设计,不易扩展;

    Google GAE选择Jetty,定制足够小的Java Web Server支撑GAE业务;

    Apache Tomcat和Eclipse Jetty背后是两大开源基金会的合作与竞争。

    33. Cowboy

    Cowboy适合构建嵌入式应用,它没有配置文件,也不会生成日志,一切都由Erlang控制。

    Cowboy支持的协议有:HTTP/2、HTTP/1.1、WebSocket、HTTP/1.0、SPDY/3.1、SPDY/3;

    Erlang很适合开发Web server,可基于Cowboy做扩展和定制;

    34. GNU/Linux

    Linux基金会不仅仅有Linux项目,还有众多其它的开源项目,如AGL;

    可更多关注类似Robot Operating System(ROS)这样的机器人操作系统和嵌入式系统;

    相比Android系统,OpenWrt被认为是更加适合智能设备和机器人的软件平台。

    35. XNU/Darwin

    XNU是XNU is Not Unix的首字母缩写,GNU是GNU's Not Unix的缩写;

    XNU/Darwin与FreeBSD都有着BSD的血统,苹果会持续投资和推动FreeBSD项目?

    更深入的学习、研究iOS和macOS,就从Hack XNU开始吧。

    36. FreeBSD

    FreeBSD TCP/IP协议栈实现是个经典;

    Facebook的WhatsApp是一个FreeBSD + Erlang 的公司,大量的路由器、交换机、防火墙、金融系统在使用FreeBSD,SONY PS4游戏机操作系统基于FreeBSD构建;

    苹果与FreeBSD的关系应该是最密切的。

    37. GCC

    GCC:最重要的开源软件(从1987的1.0到2017年7.2历经30年,对整个自由、开源软件贡献卓著),后来者LLVM(14岁)很出色,前途无量;

    GCC的基本语言是C语言,整个编译系统由C编程程序开始,然后逐渐加入其它语言的支持;

    C++是C语言的直接扩展,它是GCC的第一个附加语言。C++能够完成的所有事情C语言都可以做到,所以编译器的后端保持不变,只需在前端加入一个新的语法语义分析器就可以了。一旦产生中间语言,编译程序的其它部分就和C语言完全一样了,其它语言的处理方式也类似。

    38. LLVM

    FreeBSD从10.0开始,使用LLVM替换GCC作为默认的编辑器,除了一些技术的考量外,GCC的GPL v3与FreeBSD项目的不兼容性,LLVM/Clang的许可协议是BSD,兼容FreeBSD;

    Azul Systems推出Falcon,一个基于LLVM的新的Java即时编译器

    Clang是LLVM的前端,用来编译C,C++,Objective-C。

    39. Babel

    Babel 下一代 JavaScript 编译器(转译器);

    简单讲,Babel 就是把一个版本的 JavaScript 转变为其他版本的 JavaScript;

    The Super Tiny Compiler可能是最小的编译器,先感受和普及下JavaScript编译器的知识。

    40. JVM

    JVM是最大规模的编程语言虚拟机生态系统,有超过200多种编程语言运行在JVM上;

    Android Dalvik VM不是一个Java虚拟机,它没有遵循JVM规范,不能直接运行Java Class文件,它执行的Dex(Dalvik Executable)可通过Class文件转换而来;

    由John Rose领导的the Da Vinci Machine Project正致力于让JVM成为动态语言的最佳归宿。

    41. .NET Core

    .NET Core 是一个通用目的、模块化、跨平台的 .NET 开源实现;

    核心项目:.NET Core Libraries (CoreFX)、.NET Core Runtime (CoreCLR)、.NET Compiler Platform (Roslyn);

    .NET Core 会包含 .NET Framework 的类库,但与 .NET Framework 不同的是 .NET Core 采用包 (Packages) 的管理方式,应用程序只需要获取需要的组件即可,与 .NET Framework 大包式安装的作法截然不同,同时各包也有独立的版本线 (Version line),不再硬性要求应用程序跟随主线版本。

    42. Erlang VM(BEAM)

    Elixir是一门运行在Erlang VM上的编程语言;

    可在Erlang VM创建自己的语言

    可关注下Erjang:A JVM-based Erlang VM。

    43. Erlang

    Erlang的世界观是一切都是进程(一个Erlang进程包括PCB进程控制块和堆栈只有几K),进程通过消息传递相互通讯;

    Erlang是参与者模型(Actor model)最佳实践;

    可在一台笔记本上轻松跑出几百万个Erlang进程。

    44. Clojure

    Clojure 是一种运行在 Java 平台上的 Lisp 方言;

    Clojure is about Data, Scala is about Types, Java is about Objects;

    ClojureScript: Clojure to JavaScript compiler。

    45. F

    F#和OCaml是ML函数式编程语言的两种主要方言;

    F# = Objects + Functional ,F#混合面向对象和函数式编程,可“对应”JVM平台的Scala语言;

    F#支持高阶函数、柯里化、惰性求值、Continuations、模式匹配、闭包、列表处理和元编程,F#作为一门适合于金融和计算密集型的语言而闻名。

    相关文章

      网友评论

        本文标题:值得关注的开源软件

        本文链接:https://www.haomeiwen.com/subject/jrdsjftx.html