• AI编程
  • AI应用开发
  • AI大世界
  • Flink
  • Doris
  • SeaTunnel
  • 数据分析
  • Dolphinscheduler
  • StarRocks
  • 车联网
  • PowerData
  • 用户画像
  • Kafka
  • Dinky
  • Hive
  • Agile Query
  • 有趣的开源集市
  • Hadoop
  • Streampark
  • Gravitino
  • Linux
  • 数据仓库/中台
  • 数据治理
  • Paimon
  • Clickhouse
  • MySQL
  • Docker
  • 新零售
  • Spark
  • Web前端
  • Atlas
  • Kubernetes
  • Java
  • Hudi
  • Python开发
  • 嵌入式开发
  • 智能制造
  • Calcite
  • Drools
  • 物理围栏
  • 数据平台架构
  • 金融
  • 规则系统
  • Dbeaver
  • Elasticsearch
  • Nifi
  • Git
  • Linkis
  • Ambari
  • Kettle
  • Redis
  • Datart
  • Hbase
  • MongoDB
  • Zookeeper
  • SQLLineage
  • Celeborn
  • Ranger
  • 游戏
  • Datax
  • Gradle
  • Iceberg
  • Druid
  • OpenMetadata
  • 数据结构和算法
  • Canal
  • maven
  • 指标中台
  • Kyuubi
  • HiDataPlus
  • MQTT
  • Amoro
  • 数据湖
  • FineReport
  • 物流
  • Superset
  • DataHub
  • Griffin
  • Debezium
  • MinIo
  • Zabbix
  • Tidb
  • Airflow
  • 数智化
  • StreamSets
  • Flume
  • 小阳杂说
  • Azkaban
  • Kudu
  • Sqoop
  • Tez
  • Beam
  • Telegraf
  • Oracle
  • Zeppelin
  • Nmon
  • Kylin
  • Prometheus
  • Davinci
  • Maxwell
  • Sentry
  • Storm
  • 大数据启示录
  • Phoenix
  • Filebeat
  • Pulsar
  • Impala
  • Hue
  • Svn
  • Oozie
  • Presto
  • Cassandra
  • Grafana
  • Greenplum
  • 雷达视频设备应用
  • InfluxDB
  • Bigtop
  • 巨人肩膀
  • Golang
  • 提示词工程
  • 网络安全
  • 数智领航
  • 书籍共享
  • asdasd
  • 动力电池
  • d3ed4
  • 测试私密home显示
  • dasdas55555
  • SFF
无匹配社区

博客园

请选择社区

什么?!redis也可以是成本优化利器

交通路况团队主要负责AMAP(高德地图)轨迹收容和实时计算,不仅承担了实时路况的计算和发布,而且利用海量用户轨迹,陆续推出红绿倒计时和V2X(道路预警)等重磅功能,作为海量数据实时计算的基础链路,自然少不了对消息中间件的使用,一直以来我们都是集团MQ团队的重要客户,随着业务的快速发展,数据规模和计算频次进一步提升,MQ成本急剧增加,替换更加合适的消息中间件成为了必然。
Redis
头像
滴滴 发布于 2024年12月16日
51浏览

AI Coding 赛道全景解析:玩家有哪些?新机会在哪里?

AI Coding 可能是今年 AI 领域最热,最快找到 PMF 和商业化落地的赛道了。Github Copilot、Cursor、Bolt、Windsurf以及最近刚刚收费的Devin,诸多产品都实现了ARR 收入的高速增长。「海外独角兽」的这篇赛道全景图的分析,从投资角度详细梳理了目前AI Coding 赛道的代表性产品、竞争壁垒、以及之后发展的方向等,值得细读。授权转载,文章结构略有调整。
头像
滴滴 发布于 2024年12月16日
168浏览

Rust重写万物之——彻底重写SQLite

两年前,我们对 SQLite 进行了分叉。我们非常喜欢 SQLite 的嵌入式特性,但同时我们也渴望探索一种更加开放的开发模式。 在这样的背景下,libSQL 应运而生,作为一个开放的贡献项目,我们诚挚邀请社区成员加入我们,共同构建这个项目。
头像
滴滴 发布于 2024年12月16日
129浏览

拥抱 PyTorch,来自 Gauss 的自我革命

微信 Gauss 团队致力于提供业界领先的推荐工程技术服务,我们将持续跟进、推动关键领域的技术进步,与业界同仁一道,为提升用户价值而不懈努力。
头像
滴滴 发布于 2024年12月16日
101浏览

流存储Fluss:迈向湖流一体架构

在大数据处理领域,Lambda 架构是使用非常广泛的一种架构。Lambda 架构将数据处理分成单独的两条链路,一条是离线计算链路,通常由 Hive 作为离线计算链路的存储,另外一条是实时链路,通常由流存储,如 Kafka 作为实时链路的存储。
Flink
头像
车车 发布于 2024年12月16日
191浏览

Apache SeaTunnel 集群部署详细教程

SeaTunnel Engine 的Master服务和Worker服务分离,每个服务单独一个进程。Master节点只负责作业调度,RESTful API,任务提交等,Imap数据只存储在Master节点中。Worker节点只负责任务的执行,不参与选举成为Master,也不存储Imap数据。
SeaTunnel
头像
车车 发布于 2024年12月13日
77浏览

第三方服务对目标进行被动信息收集

第三方服务或实体通过合法和非侵入性的手段,对特定目标(个人、组织、系统等)进行信息搜集和分析的过程。这种信息收集不涉及直接与目标交互或对其系统进行探测,而是通过公开可用的资源和数据来获取信息。
头像
久安 发布于 2024年12月11日
85浏览1点赞

B站大数据平台故障自愈实践

故障自愈系统通过智能化和自动化技术,显著提升了故障处理的及时性、智能化和可分析性,从而将被动响应转变为主动预防。
数据平台架构
头像
随风 发布于 2024年12月10日
159浏览

Kubernetes 架构学习笔记(下)

在过去的两年中,我协助eBay云计算架构师做eBay云计算部门系统架构设计审核会议的组织协调工作,于是萌生了用我们日常工作中实际的架构设计讨论来深入理解社区 Kubernetes Design Principle 的想法。文中例子来源于真实的设计迭代, 我仅是做了汇总。借此机会感谢所有为云计算系统设计做出贡献的同事, 向你们学习才让我这些年对Kubernetes的设计理念有了进一步的理解。
Kubernetes
头像
滴滴 发布于 2024年12月07日
33浏览

Kubernetes 架构学习笔记(上)

我把eBay 云计算部门的效率看成三个层面,第一层是代码开发的效率(包含持续集成持续发布), 第二层是架构效率,第三层是产品效率。这一篇博客主要讨论第二层架构效率。这件事情的缘起是一些架构讨论悬而不决,三年多前有一天我找到云计算部门的总架构师讨论一个设计困惑,他突然问我说许健你看过 Kubernetes 的设计原则吗?
Kubernetes
头像
滴滴 发布于 2024年12月07日
60浏览

Hadoop平台进阶之路 | eBay Spark测试框架——Woody

新版本的Spark拥有更好的性能和稳定性,对于用户来说,如果长期停留在低版本的Spark,不仅会浪费集群资源,还会进一步加大平台管理团队的工作量。如果进行Spark大版本升级,考虑到版本间可能由于计算行为不一致而导致的数据质量问题,用户就要投入大量的精力去对比重要的job在不同版本下的数据质量,加大了版本升级的困难度。
Hadoop
头像
滴滴 发布于 2024年12月07日
17浏览

一个快速且轻量的 Kafka 可视化工具,从此 Kafak 的运维管理简单化,Star 10K!

Kafka 以其高吞吐量和低延迟的数据传输能力而闻名,作为一个分布式流处理平台,广泛应用于大数据、实时流处理等领域。许多大型企业和开源项目都建立在Kafka之上,在互联网公司、金融行业、物联网(IoT)等多个领域都有广泛应用
有趣的开源集市
头像
随风 发布于 2024年12月06日
124浏览

支持 Flink/Gluten/优雅升级...Celeborn0.3.0 介绍

Apache Celeborn(Incubating)[1] [2] 是阿里云开源的大数据计算引擎通用 Remote Shuffle Service,旨在提升 Shuffle 的性能/稳定性/弹性,目前已广泛运行在包含阿里在内的多家企业,每天服务着生产环境数十P的 Shuffle 数据,可稳定支撑单 Shuffle 超 600T 的大作业。
Celeborn
头像
随风 发布于 2024年12月05日
100浏览

Iceberg x Amoro 在多点 DMALL 数据入湖的探索实践

随着大数据技术的迅猛发展,数据湖作为新兴的数据管理范式应运而生。在此基础上,通过简化架构、优化数据流程、引入创新技术等方式,降低企业数字化转型中的 TCO(总体拥有成本)成为可能。多点 DMALL 作为零售科技领域的先行者,我们持续探索和实践前沿技术,旨在提升数据处理效率,实现数据管理的标准化和自动化。通过这些努力,我们逐步构建了一个更高效、更具成本效益的大数据生态系统,赋能企业决策和生产运营。
AmoroIceberg
头像
随风 发布于 2024年12月05日
103浏览

数据安全:105个必备词汇定义解读!

数据安全:105个必备词汇定义解读!
头像
随风 发布于 2024年12月05日
27浏览

服务器重启后如何自动重启 Docker 容器?

在现代 IT 运维中,容器化技术的普及使得 Docker 成为服务器管理的重要工具之一。然而,在实际生产环境中,服务器因各种原因(如定期维护、意外断电或升级操作系统)重启后,如何让 Docker 容器自动恢复运行成为一个关键问题。本文将详细介绍如何确保 Docker 容器在服务器重启后自动重启,包括相关原理、配置方法以及一些常见的注意事项。
Docker
头像
车车 发布于 2024年12月05日
52浏览

【禁止血压飙升】阿里大佬写的Controller太优雅了!

见过几千行代码的 controller吗?我见过。 见过全是 try catch 的 controller 吗,我见过。 见过全是字段校验的 controller 吗,我见过。 见过全是业务代码的 controller 吗?不好意思,我们公司很多业务写在 controller 的。 看见这些我真的血压高。
Java
头像
春风得意 发布于 2024年12月04日
17浏览

推荐 10 个漏洞管理工具,漏洞猎手必备!

随着网络攻击的日益复杂,漏洞管理已经成为保障信息安全和保护企业资产的核心环节。漏洞管理工具能够有效地帮助企业及时发现、评估、修复系统中的安全漏洞,从而降低数据泄露、网络攻击等风险。漏洞管理不仅仅是一个技术层面的任务,它涉及到企业的各项安全操作,包括资产发现、漏洞扫描、补丁管理、以及合规性检查等。
网络安全
头像
春风得意 发布于 2024年12月04日
41浏览

从3分钟到10秒:Doris统计信息背后不得不说的故事

让我们一起揭开统计信息的神秘面纱,看看这个默默无闻的"幕后英雄"如何让你的查询性能起飞!
Doris
头像
春风得意 发布于 2024年12月04日
40浏览

Flink CDC 3.2.1 发布公告

Apache Flink 社区非常高兴地宣布,Flink CDC 3.2 系列的第一个稳定性修复版本 3.2.1 已经正式发布。
FlinkStarRocks
头像
忆往昔 发布于 2024年12月04日
134浏览
1 111213141560

微信(交流/反馈)

巨人肩膀初心:站在巨人肩膀上,避免无谓的重复劳动。 生产和汇聚行业技术、 知识经验、 工具组件 、案例产品,提供相关环境,为开发者提高生产效率提供切实有效的支持和帮助。并在这一进程中实现多方共赢。

由 深圳数智领航科技有限公司 提供动力 - 数智化领航者。

©2023-2025 - 巨人肩膀 - 粤ICP备2025395551号-1