美文网首页
Flink基础系列10-Flink Environment

Flink基础系列10-Flink Environment

作者: 只是甲 | 来源:发表于2021-10-18 16:43 被阅读0次

    一.Environment概述

    一个Flink的程序是从一个Environment开始的


    image.png

    1.1 getExecutionEnvironment

    创建一个执行环境,表示当前执行程序的上下文。如果程序是独立调用的,则此方法返回本地执行环境;如果从命令行客户端调用程序以提交到集群,则此方法返回此集群的执行环境,也就是说,getExecutionEnvironment会根据查询运行的方式决定返回什么样的运行环境,是最常用的一种创建执行环境的方式。

    ExecutionEnvironment env = ExecutionEnvironment.getExecutionEnvironment(); 
    StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); 
    

    如果没有设置并行度,会以flink-conf.yaml中的配置为准,默认是1。


    image.png

    1.2 createLocalEnvironment

    返回本地执行环境,需要在调用时指定默认的并行度。

    LocalStreamEnvironment env = StreamExecutionEnvironment.createLocalEnvironment(1); 
    

    1.3 createRemoteEnvironment

    返回集群执行环境,将Jar提交到远程服务器。需要在调用时指定JobManager的IP和端口号,并指定要在集群中运行的Jar包。

    ExecutionEnvironment env = ExecutionEnvironment
            .createRemoteEnvironment("flink-master", 8081, "/home/user/udfs.jar");
    

    这种方法开发调试完成,打包前都得替换为远程的路径,比较麻烦,这类使用的会比较少。

    参考:

    1. https://www.bilibili.com/video/BV1qy4y1q728
    2. https://ashiamd.github.io/docsify-notes/#/study/BigData/Flink/%E5%B0%9A%E7%A1%85%E8%B0%B7Flink%E5%85%A5%E9%97%A8%E5%88%B0%E5%AE%9E%E6%88%98-%E5%AD%A6%E4%B9%A0%E7%AC%94%E8%AE%B0?id=_51-environment

    相关文章

      网友评论

          本文标题:Flink基础系列10-Flink Environment

          本文链接:https://www.haomeiwen.com/subject/amvuiltx.html