Flink的MaxBy怎么用

本篇内容介绍了“Flink的MaxBy怎么用”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

你所需要的网站建设服务,我们均能行业靠前的水平为你提供.标准是产品质量的保证,主要从事成都网站制作、成都做网站、企业网站建设、手机网站制作设计、网页设计、品牌网站制作、网页制作、做网站、建网站。成都创新互联公司拥有实力坚强的技术研发团队及素养的视觉设计专才。

maxBy聚合:获取一组数据流算子中最大的记录行(和max的区别,max是返回计算字段的最大值)

示例环境

java.version: 1.8.x
flink.version: 1.11.1

 示例数据源 (项目码云下载)

Flink 系例 之 搭建开发环境与数据

MaxBy.java

import com.flink.examples.DataSource;
import org.apache.flink.api.common.typeinfo.Types;
import org.apache.flink.api.java.functions.KeySelector;
import org.apache.flink.api.java.tuple.Tuple3;
import org.apache.flink.streaming.api.datastream.DataStream;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;
import java.util.List;
/**
 * @Description maxBy聚合:获取一组数据流算子中最大的记录行(和max的区别,max是返回计算字段的最大值)
 */
public class MaxBy {
    /**
     * 遍历集合,返回每个性别分区下最大年龄数据记录
     * @param args
     * @throws Exception
     */
    public static void main(String[] args) throws Exception {
        final StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();
        List> tuple3List = DataSource.getTuple3ToList();
        DataStream> dataStream = env.fromCollection(tuple3List)
                .returns(Types.TUPLE(Types.STRING, Types.STRING,Types.INT))
                .keyBy((KeySelector, String>) k ->k.f1)
                //按数量窗口滚动,每3个输入数据流,计算一次
                .countWindow(3)
                //注意:计算变量为f2
                .maxBy(2);
        dataStream.print();
        env.execute("flink MaxBy job");
    }
}

打印结果

4> (刘六,girl,32)
2> (吴八,man,30)

“Flink的MaxBy怎么用”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注创新互联网站,小编将为大家输出更多高质量的实用文章!


名称栏目:Flink的MaxBy怎么用
URL标题:http://bzwzjz.com/article/pcshih.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 成都企业网站建设公司 营销网站建设 自适应网站设计 成都网站设计 成都网站制作 成都网站设计 app网站建设 移动网站建设 手机网站制作设计 移动手机网站制作 手机网站建设 手机网站设计 成都网站建设 成都网站建设公司 成都定制网站建设 梓潼网站设计 高端网站建设 品牌网站建设 企业网站设计 成都网站设计 定制网站设计 网站建设