2024 年是 Apache SeaTunnel 社区高速成长的一年。从技术创新到用户生态，从版本发布到社区活动，我们见证了无数开发者与企业在数据集成领域的探索与突破。

多点 DMALL 成立于2015年，持续深耕零售业，为企业提供一站式全渠道数字零售解决方案 DMALL OS。作为 DMALL OS 数字化能力的技术底座，大数据平台历经多次迭代平稳支撑了公司 To B 业务的快速开展。随着国家产业升级和云原生技术的成熟，平台架构也从存算一体逐步转向存算分离。本文将以 StarRocks 的升级演进为例，分享这一过程中的探索与实践。

Doris 2025年最新的官方课程及培训认证体系即将推出，狠狠期待！ 正式发布之前，先来个一臻2024的老课预热预热... 今天一起了解下Doris之旅基础篇章、Doris的发展、应用场景和技术架构特点。

Catalog，中文翻译“数据目录”，从字面意思上可以看出，它就像一个可搜索的数据集目录，类似于图书馆目录对书籍的整理方式。广义上讲，数据目录是组织内数据资产的清单。它能帮助用户发现、理解和管理可供使用的数据。数据目录通常包含元数据（关于数据的信息），如数据源、描述、所有者、质量指标、血缘关系和访问控制。

2014年，Gatner 提出了 HTAP ¹（Hybrid Transaction and Analytical Process）混合事务和分析处理，既能支持在线事务处理 OLTP，又能支持在线分析处理 OLAP。

目前，Celeborn 已成为最受欢迎的 Remote Shuffle Service。许多国内外大厂已经在使用 Celeborn，除了阿里云、小红书、B站、Shopee、蔚来等已经登记的用户，也有部分用户出于各种因素暂未正式登记。

在历史长河的一隅，从远古时代祖先传承火种的教导，到现代互联网无垠知识的星辰大海，学习一直是人类不可或缺的生存技巧。

惊险一刻！2024跨年夜里：数据中心突然宕机，Doris CCR却让客户毫无察觉

鸿蒙

鸿蒙

鸿蒙

鸿蒙

鸿蒙

鸿蒙

文章讲述在通用数据开放平台中，新接口开启缓存后报错，经排查是 Redis 缓存数据类型丢失所致。分析发现问题源于 Redis 序列化和反序列化，最终通过自定义序列化器解决，即在写入和读取时处理 Date 类型，同时指出当前判断逻辑有待优化。

StarRocks 集群运行几个月后崩溃，元数据很久未合并，恢复时发现 FE 元数据无法 Checkpoint。排查发现是配置 metadata_journal_skip_bad_journal_ids 导致，相关 bugfix 未合并进出问题版本，升级版本后解决，成功生成新 image 文件，BDB 文件数量大幅减少。

本文深入探讨了博主亲身参与并实践的四代数据同步技术方案。文章不仅追溯了每一代方案的诞生背景，还详尽阐述了它们的设计细节和实施过程。从2020年起步的第一代方案，该方案依托于强大的Spark框架，到最新的第四代方案，该方案采用了先进的CDC（Change Data Capture）技术，每一代方案都在实际应用场景中得到了充分的测试和验证。

湖仓一体之paimon-flink-action同步数据到Paimon

湖仓一体之Flink CDC+Dinky整库同步到paimon

flink专业问题咨询和解决