【数据仓库-一文了解和区分数据中台、数据平台、数据湖、数据仓库】此文章归类为:[ "数据仓库" ]。 在当今数字化时代,数据已经成为推动科技发展和商业创新的关键要素之一。数据中台、数据平台、数据湖和数据仓库是构建现代数据架构的重要组成部分。然而,这些概念之间往往容易混淆。本文将深入介绍并区分这些概念,通过生动的例
原创 周杰伦 7个月前 阅读: 163 阅读时长: 9分钟
【aigc-AIGC,ChatGPT,Prompt 万能提示词】此文章归类为:[ "aigc", "prompt", "chatgpt" ]。 AIGC ChatGPT 职场案例 AI 绘画 与 短视频制作 PowerBI 商业智能 68集 Mysql 8.0 54集 Oracle 21C 142集 Office 202
原创 周杰伦 7个月前 阅读: 210 阅读时长: 2分钟
【科技-StarRocks实战——云览科技存算分离实践】此文章归类为:["科技","r语言","开发语言"]。 目录 背景 一、平台现状&痛点 1.1 使用组件多,维护成本高 1.2 链路冗长,数据时效性难以保证 1.3 服务稳定性不足 二、StarRocks 存算分离调研 2.1 性能对比 2.2 易用性 2.3 存储
原创 周杰伦 8个月前 阅读: 307 阅读时长: 9分钟
【数据仓库-ETL的数据挖掘方式】此文章归类为:["数据仓库","人工智能","etl","数据挖掘"]。 ETL的基本概念 数据抽取(Extraction):从不同源头系统中获取所需数据的步骤。比如从mysql中拿取数据就是一种简单的抽取动作,从API接口拿取数据也是。 数据转换(Transformation):清洗、整合和转化原始数据以适应目标存储或分析系统的阶段。从m
原创 周杰伦 8个月前 阅读: 162 阅读时长: 6分钟
【运维-语义化与自动化——第三代指标平台两大核心能力详解(内含Q&A)】此文章归类为:["运维","自动化"]。 【作者简介】杜雪芳,Aloudata 合伙人兼首席业务架构师。12 年数据业务从业经验,3 年管理咨询经验。历任阿里集团淘宝商业分析负责人、阿里音乐商业智能中心负责人、蚂蚁集团用户增长分析与洞察产品负责人。在数据体系搭建、数据分析、用户标签建设、用户洞
原创 周杰伦 8个月前 阅读: 167 阅读时长: 9分钟
【大数据-大数据常用名词Number-1】此文章归类为:["大数据"]。 1. 月份库 “月份库”通常是指在数据库设计中,以月份为单位划分的数据库或者数据表。主要是为了解决大数据量下的存储和查询效率问题。 以下是为什么会有月份库的一些原因: 数据分离:将不同月份的数据存储在不同的库或表中,有利于数据的分离和管理。如果需要对某个月份的数据进行操作,只需要对应的月
原创 周杰伦 8个月前 阅读: 166 阅读时长: 3分钟
【flink-Flink应用场景】此文章归类为:["flink","数据库","大数据"]。 1、介绍 (1) Apache Flink 功能强大,支持开发和运行多种不同种类的应用程序。它的主要特性包括:批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink 不仅可以运行在包括 YARN、 Mesos、Kubernetes 在内的多种资源管理
原创 周杰伦 8个月前 阅读: 153 阅读时长: 9分钟
【数据仓库-ETL数据仓库的使用方式】此文章归类为:["数据仓库","etl"]。 一、ETL的过程 在 ETL 过程中,数据从源系统中抽取(Extract),经过各种转换(Transform)操作,最后加载(Load)到目标数据仓库中。以下是 ETL 数仓流程的基本步骤: 抽取(Extract):从各种源系统(如数据库、API、日志文件
原创 周杰伦 8个月前 阅读: 200 阅读时长: 8分钟
【python-关于python的数据可视化与可视化:数据读取】此文章归类为:["python","信息可视化","开发语言"]。 带着问题寻找答案可以使自己不再迷茫或者不知所措! 了解什么python的数据可视化? 数据的读取(一般伴随着课程文件中会进行提供和利用) 数据可视化是将Python应用于大气海洋科学中数据处理及分析过程的重要环节,它可以让复杂晦涩的数据变得鲜活
原创 周杰伦 8个月前 阅读: 199 阅读时长: 9分钟
【flink-Flink Catalog 解读与同步 Hudi 表元数据的最佳实践】此文章归类为:["flink","大数据"]。 博主历时三年精心创作的《大数据平台架构与原型实现:数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行,点击《重磅推荐:建大数据平台太难了!给我发个工程原型吧!》了解图书详情,京东购书链接
原创 周杰伦 9个月前 阅读: 267 阅读时长: 9分钟