博客园

高效管理湖仓的开源解决方案-Amoro

首先 Amoro 是湖仓管理系统,这里我们借鉴了数据库管理系统的叫法,可能很多同学乍一听会觉得管理系统会类似于实时计算、离线开发一类的工具平台,这里我稍稍做个澄清:工具的目标是帮助用户更高效、便利地执行某种流程,而Amoro 的目标是将一些流程向用户屏蔽,交给用户一个黑盒,他的定位更多是一个基础软件,所以 Amoro 的 MS 类似于 DBMS 中的 MS,我们经常讲一句话:build a box
Amoro
头像随风 发布于2024年03月26日
270浏览 1点赞

浙江电信基于 Amoro + Apache Iceberg 构建实时湖仓实践

Amoro 是一个构建在 Apache Iceberg 等开放数据湖表格之上的湖仓管理系统,提供了一套可插拔的数据自优化机制和管理服务,旨在为用户带来开箱即用的湖仓使用体验。
Iceberg
头像随风 发布于2024年03月26日
370浏览

深入解读 Flink SQL 实现流处理的核心技术

1w+ 字深入解读 Flink SQL 实现流处理的核心技术!
Flink
头像车车 发布于2024年03月26日
71浏览

【行业资讯】康林松:为电动化提供选择权,向贸易壁垒说不,对中国加大投资

总而言之,这一讲话的很多理念,从优先经济发展的决心,到进一步开放市场和欢迎跨国企业继续在华投资,特别是关于高质量增长和可持续发展,与梅赛德斯-奔驰的理念不谋而合。我们将会进一步在中国加大投入,在华发展,与华共进。
车联网
头像车车 发布于2024年03月26日
92浏览 1点赞

StarRocks 助力金融营销数字化进化之路

平安银行五位一体,做零售金融的领先银行,五位一体是由开放银行、AI 银行、远程银行、线下银行、综合化银行协同构建的数据化、智能化的零售客户经营模式,这套模式以数据为基础,AI 为内核,通过画像识别,基于场景数据分析,通过高效组织内部资源,为客户提供精准服务,实现零售转型业务增长的第二曲线。 通过颠覆传统“以产品为中心”模式,真正实现以客户为中心、以 AI 、大数据为驱动,以 KYC/KYP/KYA
StarRocks金融
头像洪波涌起 发布于2024年03月25日
386浏览

工业企业大数据分析平台解决方案(含数据治理)

当前,工业企业产生的数据与日俱增,如何利用大数据为企业产生驱动力、竞争力成为工业企业面临的重要问题。工业企业大数据平台建设的总体思路是将现有PLC、MES、ERP、CRM、SRM、SCM、电子商务及财务共享服务等信息系统的业务数据,采用大数据技术,抽取到全业务数据中心,建立逻辑关联,整合成大数据仓库。
头像忆往昔 发布于2024年03月25日
99浏览 1点赞

详解数据湖,概念、特征、架构、方案、场景以及建湖全过程(下)

4.各厂商的数据湖解决方案 5.典型的数据湖应用场景 6.数据湖建设的基本过程 7.总结
头像洪波涌起 发布于2024年03月25日
100浏览

详解数据湖,概念、特征、架构、方案、场景以及建湖全过程(上)

1.什么是数据湖 2.数据湖的基本特征 3.数据湖基本架构
头像洪波涌起 发布于2024年03月25日
99浏览

漫画讲解Kafka高效的存储设计

今天,跟大家分享一下kafka 的存储机制及如何根据 offset 查找消息的。
Kafka
头像车车 发布于2024年03月25日
115浏览

帆软BI的三个优点之:数据从分布式数据库实时传到帆软

从A地到B地,我们首先想到的是乘坐什么交通工具,是坐车,坐船,还是坐飞机。遇到问题其实也是一样的,从问题的这头,到那头,也有很多的工具可以使用。选择对的工具,才能更加便捷轻松的解决问题?今天给大家聊聊帆软BI这款工具。
FineReport
头像梦想家 发布于2024年03月22日
112浏览 2点赞

数据治理之元数据管理的利器——Atlas入门实战宝典(7、8)

随着数字化转型的工作推进,数据治理的工作已经被越来越多的公司提上了日程。作为Hadoop生态最紧密的元数据管理与发现工具,Atlas在其中扮演着重要的位置。但是其官方文档不是很丰富,也不够详细。所以整理了这份文档供大家学习使用。
Atlas
头像随风 发布于2024年03月22日
111浏览

数据治理之元数据管理的利器——Atlas入门实战宝典(5、6)

随着数字化转型的工作推进,数据治理的工作已经被越来越多的公司提上了日程。作为Hadoop生态最紧密的元数据管理与发现工具,Atlas在其中扮演着重要的位置。但是其官方文档不是很丰富,也不够详细。所以整理了这份文档供大家学习使用。
Atlas
头像随风 发布于2024年03月22日
198浏览

数据治理之元数据管理的利器——Atlas入门实战宝典(1、2、3)

随着数字化转型的工作推进,数据治理的工作已经被越来越多的公司提上了日程。作为Hadoop生态最紧密的元数据管理与发现工具,Atlas在其中扮演着重要的位置。但是其官方文档不是很丰富,也不够详细。所以整理了这份文档供大家学习使用。
Atlas
头像随风 发布于2024年03月22日
213浏览

AI 算法在大数据治理中的应用

全文目录: 1. 大数据与 AI; 2. 大数据任务健康度评估; 3. Spark 任务智能调参; 4. SQL 任务执行引擎智能选择; 5. AI 算法在大数据治理中的应用展望
头像随风 发布于2024年03月22日
132浏览 1点赞

物流大数据在亚马逊的应用

亚马逊是最早玩转物流大数据的电商企业:亚马逊在业内率先使用了大数据,人工智能和云技术进行仓储物流的管理。创新地推出预测性调拨、跨区域配送、跨国境配送等服务,不断给全球电商和物流行业带来惊喜。
物流
头像随风 发布于2024年03月22日
158浏览

终于有人把主数据讲明白了......

和大家聊聊主数据的二三事~
头像随风 发布于2024年03月22日
50浏览 1点赞

Doris在用户画像人群业务的应用

讲座分为三部分内容: •用户画像群体服务的业务场景 •技术问题、思路与相关业界方案实现情况 •基于Doris的技术实现
用户画像Doris
头像蛇年大吉 发布于2024年03月22日
241浏览 1点赞

Linux 概述

Linux是一套免费使用和自由传播的类Unix操作系统,是一个基于POSIX和Unix的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的Unix工具软件、应用程序和网络协议。它支持32位和64位硬件。Linux继承了Unix以网络为核心的设计思想,是一个性能稳定的多用户网络操作系统。
Linux
头像随风 发布于2024年03月22日
72浏览 2点赞

12条SQL不起眼的数仓调优技巧

12条SQL不起眼的数仓调优技巧
Hive
头像随风 发布于2024年03月22日
175浏览

Hive和Hbase数据互通(用户画像)

依旧是用户画像的项目,现在标签化的数据存放在hive中,而查询是要在hbase上进行查询,所以需要将hive的数据导入hbase中。
HiveHbase用户画像
头像随风 发布于2024年03月22日
212浏览
1 484950515282

微信(交流/反馈)

巨人肩膀初心:站在巨人肩膀上,避免无谓的重复劳动。 生产和汇聚行业技术、 知识经验、 工具组件 、案例产品,提供相关环境,为开发者提高生产效率提供切实有效的支持和帮助。并在这一进程中实现多方共赢。

由 深圳数智领航科技有限公司 提供动力 - 数智化领航者。

©2023-2025 - 巨人肩膀 - 粤ICP备2025395551号-1