DolphinScheduler Version 3.2.1 功能介绍

DolphinScheduler使用需知，常见使用问题及高危操作合集

DolphinScheduler（DS）数据库表介绍

持续更新~，纯干货分享！纯干货分享！纯干货分享！大数据技术已经深刻影响了各行各业，包括企业、政府、医疗、金融、科学研究等领域。通过对海量数据的挖掘和运用，人们可以更好地了解市场趋势、客户需求、产品性能等信息，从而做出更明智的决策。

简单介绍了运行数据表、事实数据表、维度数据表三大类表的区别。

操作 ElasticSearch 中数据的常见指令，供您参考使用。

Docker查看日志的三种方式

对动力电池状态进行精准评估，从而更好地了解电池当前的状态。动力电池实时状态分析的应用场景非常广泛，涉及到电动汽车的研发、生产、使用、维护等各个环节，是电动汽车发展的重要支撑技术之一。

Paimon 是流批一体的湖存储格式，首先它只是一个文件格式，只是一堆代码将数据存储在 OSS 或者 HDFS 上，没有任何的服务。 可以使用 Flink CDC 来一键入湖到 Paimon 中，也可以通过 Flink SQL 或 Spark SQL 来批写、流写到 Paimon 当中。Paimon 也支持主流开源引擎，包括几乎现在所有的开源引擎。最后，Paimon 也可以被 Flink 或 Spark 流读，这也是它作为流式数据湖的特有能力之一。

Apache Doris 数仓使用规范（经验版）Apache Doris 数仓使用规范（经验版）Apache Doris 数仓使用规范（经验版）

长安汽车智能车云平台，网联车日活达百万级，车联网平台日均接收信号条数达百亿级。面对海量车联网数据分析的挑战，长安汽车建设了一套具备千万级数据接入能力的智能网联汽车云平台。为保证智能汽车数据类业务的开展，长安汽车从初试到深度使用（1.1.0开始投产），选择DolphinScheduler作为数据平台的核心调度系统，实现数据任务的灵活编排、调度，赋能智能汽车产品研发、故障诊断等业务。

Flink CDC 是基于数据库日志 CDC（Change Data Capture）技术的实时数据集成框架，支持了全增量一体化、无锁读取、并行读取、表结构变更自动同步、分布式架构等高级特性。配合 Flink 优秀的管道能力和丰富的上下游生态，Flink CDC 可以高效实现海量数据的实时集成。Flink CDC 社区发展迅速，在开源的三年时间里，社区已经吸引了 111 位贡献者，培养了 8 位 Maintainer，社区钉钉用户群超过 9800 人。

什么是 Dinky： Dinky 是一个开箱即用 、易扩展 ，以 Apache Flink 为基础，连接 OLAP 和数据湖等众多框架的一站式实时计算平台，致力于流批一体和湖仓一体的探索与实践。 愿景：Dinky 通过提供一站式专业的数据开发、作业监控、资源管理等服务，让FlinkSQL纵享丝滑，以帮助用户在实时计算时代，更好地构建、交付、管理自己的实时计算任务，更专注地分析和挖掘业务数据，更快地交付商业数据的价值。

美团基础研发平台视觉智能部与中科院计算所展开科研课题合作，共同构建大规模数据集Food2K，并提出渐进式区域增强网络用于食品图像识别，相关研究成果已发表于T-PAMI 2023。本文主要介绍了数据集特点、方法设计、性能对比，以及基于该数据集的迁移实验等方面的内容，并对Food2K未来的工作进行了展望。希望能为从事相关工作的同学带来一些帮助或者启发。

外卖场景的用户停留时长低于传统电商，对用户实时需求的理解和反馈有更高的要求。针对业务问题，外卖推荐团队从2021年起开始持续投入，最终摸索出了一套适用于外卖场景的交互式推荐架构和策略，并取得了较好的收益。本文详细介绍了外卖首页Feed在搭建交互式推荐时遇到的挑战和解决思路。

面对在线推理服务使用的GPU资源不断增加、GPU利用率普遍较低的挑战，美团视觉研发团队决定通过模型结构拆分和微服务化进行优化，他们提出一种通用高效的部署架构，来解决这种常见的性能瓶颈问题。以“图像检测+分类”服务为例，优化后的服务压测性能指标GPU利用率由40%提升至100%，QPS也提升超过3倍。本文将会重点介绍推理服务部署架构优化的工程实践，希望对大家能有所帮助或启发。

美团开放平台为整个美团提供了20+业务场景的开放API，为了使开发者能够快速且安全的接入美团开放平台，美团开放平台提供了多种语言的SDK来提高开发者的接入效率。本文介绍了美团开放平台如何自动生成SDK代码的相关技术实现方案，希望对大家能够有所帮助或者启发。

美团外卖推荐团队在推荐算法的长期落地实践中，针对外卖业务情境化特点对排序模型进行深入探索与优化。本文介绍了面向情境化建模的“情境细分+统一模型”建模思路，通过用户行为序列建模以及专家网络两个模块的优化，实现不同场景间对信息独有性的刻画和信息共性的相互传递，进而提升全部流量效率。

近日，美团视觉智能部发布了YOLOv6 2.0版本，本次更新对轻量级网络进行了全面升级，量化版模型 YOLOv6-S 达到了 869 FPS，同时，还推出了综合性能优异的中大型网络（YOLOv6-M/L），丰富了 YOLOv6 网络系列。

分布式系统设计是一项十分复杂且具有挑战性的事情。其中，数据复制与一致性更是其中十分重要的一环。数据复制领域概念庞杂、理论性强，如果对应的算法没有理论验证大概率会出错。如果在设计过程中，不了解对应理论所解决的问题以及不同理论之间的联系，势必无法设计出一个合理的分布式系统。