Flink

发布于 2023-09-11

文章目录 概述 特点 应用场景 Flink VS Spark Streaming Flink是什么？ Apache Flink 是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。 A...

阅读(3079)赞 (0)标签：API / Flink / 大数据 / 数据分析 / 数据结构

发布于 2023-04-20

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住给大家分享一下。点击跳转到网站：https://www.captainai.net/dongkelun 前言 记录总结自己第一次如何使用Flink SQL读写Hudi并同步Hive，以及遇到的问题及解决过程。 关于...

阅读(2093)赞 (0)标签：Flink / JAR / spark / SQL / 数据库

发布于 2023-04-17

前些天发现了一个巨牛的人工智能学习网站，通俗易懂，风趣幽默，忍不住给大家分享一下。点击跳转到网站：https://www.captainai.net/dongkelun 前言 上篇文章Flink SQL操作Hudi并同步Hive使用总结总结了如何使用Flink SQL读写Hudi...

阅读(3028)赞 (0)标签：Flink / Hive / spark / SQL / 大数据

发布于 2023-04-11

目录 一、背景 二、概念 三、特性 四、工作原理 五、快速开始 1.数据同步任务模版 kafka to kudu mysql to hive  2.数据同步执行命令 flinkx老版本命令参数： flinkx老版本执行命令：  chunjun新版本执行命令：（明显看出命令还是减少...

阅读(636)赞 (0)标签：Flink / https / 分布式 / 大数据 / 网络安全

发布于 2023-04-11

目录 一、背景 二、流程 三、案例 1.flink sql读取 Kafka 并写入 MySQL source sink insert 2.flinksql读kafka写入kudu source sink insert 四、注意点 1.断点续传 2.实时采集 3.回溯问题 2.实时...

阅读(1031)赞 (0)标签：Flink / Kafka / SQL / 大数据 / 对象存储

发布于 2023-03-17

导语 Pulsar Summit 是 Apache Pulsar 社区年度盛会，它将分布在世界各地的 Apache Pulsar 项目 Contributor、Committer 和各企业 CTO/CIO、开发者、架构师、数据科学家，以及消息和流计算社区的精英召集在一起。于此盛会...

阅读(298)赞 (0)标签：Apache / Flink / SQL / 大数据