当前位置: 首页 > news >正文

宜宾网站建设工作室一家做特卖的网站叫什么

宜宾网站建设工作室,一家做特卖的网站叫什么,网站怎么自己优化,wordpress插件cFlink的数据流处理,是持续流模型,数据不会落地,上游和下游的Task同时启动,等待数据的到达,Flink的批处理还是用的MapReduce计算模型,先处理map端,再执行reduce端。 flink的流处理(STREAMING)&a…

Flink的数据流处理,是持续流模型,数据不会落地,上游和下游的Task同时启动,等待数据的到达,Flink的批处理还是用的MapReduce计算模型,先处理map端,再执行reduce端。

flink的流处理(STREAMING):

是持续流模型,上游和下游的task任务同时启动,持续等待数据的到达,可以处理无界流和有界流,因为数据是一条条进行处理的,但是处理有界流的时候,打印出来的结果会显示多个(最终结果)
比如文本每行都有java,一共有java20,但是会打印java 8 ,java 10,java 20,显示多个最终结果

flink的批处理(BATCH):

底层还是MapReduce的计算模型,先处理map端,再处理reduce端,只能处理有界流
不能处理无界流
, 因为执行的方式不同,MR不可能持续等待数据的到达,而是一次性批量的处理数据

代码展示如下:


import org.apache.flink.api.common.RuntimeExecutionMode;
import org.apache.flink.streaming.api.datastream.DataStream;
import org.apache.flink.streaming.api.datastream.DataStreamSource;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;//TODO:无界流:程序开始之后,数据量是不确定的,没有边界,程序一直持续等待数据的到达
//     有界流:就是指数据量是确定的,比如一个文件,是知道具体的大小的//todo:flink的流处理(STREAMING):是持续流模型,上游和下游的task任务同时启动,持续等待数据的到达,
// 可以处理无界流和有界流,因为数据是一条条进行处理的,但是处理有界流的时候,打印出来的结果会显示多个(最终结果)
// 比如文本每行都有java,一共有java20,但是会打印java 8 ,java 10,java 20,显示多个最终结果//todo:flink的批处理(BATCH):底层还是MapReduce的计算模型,先处理map端,再处理reduce端,只能处理有界流
// 不能处理无界流, 因为执行的方式不同,MR不可能持续等待数据的到达,而是一次性批量的处理数据public class flinkTest {public static void main(String[] args) throws Exception {//创建flink环境StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();//设置并行度env.setParallelism(2);//数据从上游发送到下游的缓存时间,默认也是200ms延迟env.setBufferTimeout(200);//数据读取,无界流//nc -lk 8888DataStreamSource<String> linesDSN = env.socketTextStream("master", 8888);linesDSN.print();//        //数据读取,有界流,N是no代表无界,H是have代表有界
//           //设置为批处理的方式
//         env.setRuntimeMode(RuntimeExecutionMode.STREAMING);
//        DataStream<String> linesDSH = env.readTextFile("ScalaTest/src/main/java/data/score.txt");
//        linesDSH.print();//启动flink,execute会触发任务调度env.execute("w");}
}

http://www.yayakq.cn/news/217485/

相关文章:

  • 网站建设准备资料怎么选择大连网站建设
  • 购物网站网页模板网站设计师简介
  • wordpress手机端网站模板吉林建设教育协会网站
  • wordpress站群远程管理软件全国网页制作大赛
  • 搜点济南网站建设做企业平台的网站有哪些方面
  • 网站推广怎么优化太原网站优化常识
  • 网站开发要学些什么公司网站建设考核
  • 南宁营销型网站建设网站开发浏览器分辨率
  • 寒亭区建设局网站思坎普网站建设
  • 个人持有域名可以做公司网站吗深圳网站建设东营
  • 动易网络 官方网站广州建网站兴田德润很好
  • 深圳个人网站建设个人网页制作怎么做
  • wordpress建站网页无法运作个人做网站做什么样的话
  • 做a视频在线观看网站房产信息网上自助查询
  • 深圳如何搭建建网站上海住房城乡建设网站证件查询
  • 济南公积金网站比较好的网站建设网站
  • 建设网站二级建造师如何解聘驾校视频网站模板
  • 建那种外卖网站该怎么做建好网站是不是每年都要交钱
  • 上海城市分站seo网站开发需求分析说明
  • 越秀移动网站建设网络营销的特征和功能
  • 景安做网站教程wordpress菜单文件
  • 魔方网站导航设计安阳网络推广代理
  • 汕头网站建设系统如何提高网站关键词的排名
  • 广州增城网站建设视频特效制作软件
  • 免费手机端网站模板下载安装wordpress+评论+验证码
  • 广东深圳网站建设网站的营销方式有哪些
  • 网站广告链接怎么做二级学院网站建设及利用情况
  • 苏州科技网站建设建设网站是主营成本吗
  • 哈尔滨网站建设收费网站建设 如何友情链接
  • 论文网站建设的参考文献ui平面设计是做什么的