【flink-flink1.18源码本地调试环境】此文章归类为:[ "flink", "大数据" ]。 01 源码本地调试环境搭建 1. 从github拉取源码创建本地项⽬ https://github.com/apache/flink.git 可以拉取github上官⽅代码 https://githu
原创 周杰伦 7个月前 阅读: 229 阅读时长: 9分钟
【数据仓库-一文了解和区分数据中台、数据平台、数据湖、数据仓库】此文章归类为:[ "数据仓库" ]。 在当今数字化时代,数据已经成为推动科技发展和商业创新的关键要素之一。数据中台、数据平台、数据湖和数据仓库是构建现代数据架构的重要组成部分。然而,这些概念之间往往容易混淆。本文将深入介绍并区分这些概念,通过生动的例
原创 周杰伦 7个月前 阅读: 163 阅读时长: 9分钟
【深度优先-利用Spark将Kafka数据流写入HDFS】此文章归类为:[ "深度优先", "linq", "spark", "kafka", "大数据" ]。 利用Spark将Kafka数据流写入HDFS
原创 周杰伦 7个月前 阅读: 183 阅读时长: 9分钟
【c#-canal部署】此文章归类为:[ "c#", "linq" ]。 定义 canal组件是一个基于mysql数据库增量日志解析,提供增量数据订阅和消费,支持将增量数据投递到下游消费者
原创 周杰伦 7个月前 阅读: 124 阅读时长: 9分钟
【activemq-Kafka、ActiveMQ、RabbitMQ 及 RocketMQ区别比较】此文章归类为:[ "activemq", "kafka", "rabbitmq", "分布式" ]。 消息队列中间件是分布式系统中重要的组件,主要解决应用耦合、异步消息、流量削锋等问题。它可以实现高性能、高可用、可伸缩和最终一致性架
原创 周杰伦 7个月前 阅读: 182 阅读时长: 9分钟
【云原生-云原生周刊:Kubernetes v1.30 一瞥 | 2024.3.25】此文章归类为:[ "云原生" ]。 开源项目推荐 Retina Retina 是一个与云无关的开源 Kubernetes 网络可观测
原创 周杰伦 7个月前 阅读: 140 阅读时长: 9分钟
【中间件-中间件-消息队列】此文章归类为:[ "中间件" ]。 消息队列基础知识 什么是消息队列 本处提到的消息队列是指各个服务以及系统组件/模块之间的通信,属于一种中间件。参与消息传递的双方称为生产者和
原创 周杰伦 8个月前 阅读: 199 阅读时长: 9分钟
【kafka-Kafka简介】此文章归类为:[ "kafka", "分布式" ]。 Kafka是由Apache软件基金会管理的一个开源数据流处理平台。Kafka最初由LinkedIn公司开发,用来作为一个
原创 周杰伦 8个月前 阅读: 119 阅读时长: 9分钟
【分布式-分布式简介】此文章归类为:[ "分布式" ]。 来简单介绍一下分布式 文章目录 目录 一、分布式是什么? 二、分布式的特点 三、常见的后端分布式框架 总结 一、分布式是什么? 分布式系统(Distributed System)是由一组相互
原创 周杰伦 8个月前 阅读: 152 阅读时长: 8分钟
【架构-怎么建设数据中台?详解数据中台架构内的三大平台】此文章归类为:["架构"]。 一、什么是数据中台? 要知道“中台”是什么,就得先了解“前台”和“后台”。 前台,就是我们日常使用的过程中可以直接看到和感知到的东西,比如你打开某东app买了个3080显卡,在这个过程中你看到的页面以及搜索、点击详情之类的交互操作都属于前台。 后台,就是支撑这些展示的算法、数据、流程等,这些是看不
原创 周杰伦 8个月前 阅读: 160 阅读时长: 9分钟