flink自定义source数据源

命运对每个人都是一样的,不一样的是各自的努力和付出不同,付出的越多,努力的越多,得到的回报也越多,在你累的时候请看一下身边比你成功却还比你更努力的人,这样,你就会更有动力。

导读:本篇文章讲解 flink自定义source数据源,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

前言

在很多情况下,业务上读取的数据源渠道可能有很多种,比如前文的读取外部文件,读取来自kafka的数据等,如果现有的输入数据源仍然不能满足要求的情况下,就可以考虑自定义source 数据源

代码展示

自定义数据源中,flink提供了一个 addSource的方法,通过传入自定义的函数类(该函数类需要实现SourceFuntion接口),然后再在自定义的这个类中编写自身的处理逻辑即可,下面看具体的代码实现

1、自定义source类

public static class MySensorSource implements SourceFunction<SensorReading> {

        private boolean running = true;

        @Override
        public void run(SourceContext<SensorReading> ctx) throws Exception {
            Random random = new Random();
            Map<String, Double> tempMap = new HashMap<>();
            for (int i = 0; i < 10; i++) {
                tempMap.put("sensor_" + (i + 1), 60 + random.nextGaussian() * 20);
            }
            while (true) {
                for (Strin

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

文章由半码博客整理,本文链接:https://www.bmabk.com/index.php/post/143328.html

(0)

相关推荐

  • CompletableFuture使用详解(全网看这一篇就行)

    导读:本篇文章讲解 CompletableFuture使用详解(全网看这一篇就行),希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com

    后端笔记 2023年3月2日
    00
  • 【Redis】持久化之RDB和AOF

    命运对每个人都是一样的,不一样的是各自的努力和付出不同,付出的越多,努力的越多,得到的回报也越多,在你累的时候请看一下身边比你成功却还比你更努力的人,这样,你就会更有动力。

    导读:本篇文章讲解 【Redis】持久化之RDB和AOF,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

    后端笔记 2023年5月24日
    00
  • 软件测试复习06:基于经验的测试

    追求适度,才能走向成功;人在顶峰,迈步就是下坡;身在低谷,抬足既是登高;弦,绷得太紧会断;人,思虑过度会疯;水至清无鱼,人至真无友,山至高无树;适度,不是中庸,而是一种明智的生活态度。

    导读:本篇文章讲解 软件测试复习06:基于经验的测试,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

    后端笔记 2023年4月6日
    00
  • 安装mingw+Theano+keras(多警告、错误解决办法)

    导读:本篇文章讲解 安装mingw+Theano+keras(多警告、错误解决办法),希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com

    后端笔记 2023年2月26日
    00
  • Spring MVC参数传递(重点)

    导读:本篇文章讲解 Spring MVC参数传递(重点),希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com

    后端笔记 2023年2月20日
    00
  • List 集合通过创建stream 流的方式转成map集合

    导读:本篇文章讲解 List 集合通过创建stream 流的方式转成map集合,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com

    后端笔记 2023年3月3日
    00
  • python内置函数compile用法详解

    命运对每个人都是一样的,不一样的是各自的努力和付出不同,付出的越多,努力的越多,得到的回报也越多,在你累的时候请看一下身边比你成功却还比你更努力的人,这样,你就会更有动力。

    导读:本篇文章讲解 python内置函数compile用法详解,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

    后端笔记 2023年5月10日
    00
  • 如何查看本地Maven仓库地址

    书读的越多而不加思考,你就会觉得你知道得很多;而当你读书而思考得越多的时候,你就会越清楚地看到,你知道得很少。

    导读:本篇文章讲解 如何查看本地Maven仓库地址,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

    后端笔记 2023年3月4日
    00
  • 【LeetCode】9. 回文数 – Go 语言题解

    导读:本篇文章讲解 【LeetCode】9. 回文数 – Go 语言题解,希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com

    后端笔记 2023年2月26日
    00
  • 利用剪枝降低bfs算法的时空复杂度(一道OJ题目)

    追求适度,才能走向成功;人在顶峰,迈步就是下坡;身在低谷,抬足既是登高;弦,绷得太紧会断;人,思虑过度会疯;水至清无鱼,人至真无友,山至高无树;适度,不是中庸,而是一种明智的生活态度。

    导读:本篇文章讲解 利用剪枝降低bfs算法的时空复杂度(一道OJ题目),希望对大家有帮助,欢迎收藏,转发!站点地址:www.bmabk.com,来源:原文

    后端笔记 2023年4月6日
    00

发表回复

登录后才能评论