• AI编程
  • AI应用开发
  • AI大世界
  • Flink
  • Doris
  • SeaTunnel
  • 数据分析
  • Dolphinscheduler
  • StarRocks
  • 车联网
  • PowerData
  • 用户画像
  • Kafka
  • Dinky
  • Hive
  • Agile Query
  • 有趣的开源集市
  • Hadoop
  • Streampark
  • Gravitino
  • Linux
  • 数据仓库/中台
  • 数据治理
  • Paimon
  • Clickhouse
  • MySQL
  • Docker
  • 新零售
  • Spark
  • Web前端
  • Atlas
  • Kubernetes
  • Java
  • Hudi
  • Python开发
  • 嵌入式开发
  • 智能制造
  • Calcite
  • Drools
  • 物理围栏
  • 数据平台架构
  • 金融
  • 规则系统
  • Dbeaver
  • Elasticsearch
  • Nifi
  • Git
  • Linkis
  • Ambari
  • Kettle
  • Redis
  • Datart
  • Hbase
  • MongoDB
  • Zookeeper
  • SQLLineage
  • Celeborn
  • Ranger
  • 游戏
  • Datax
  • Gradle
  • Iceberg
  • Druid
  • OpenMetadata
  • 数据结构和算法
  • Canal
  • maven
  • 指标中台
  • HiDataPlus
  • Kyuubi
  • MQTT
  • Amoro
  • 数据湖
  • FineReport
  • 物流
  • Superset
  • DataHub
  • Griffin
  • Debezium
  • MinIo
  • Zabbix
  • Tidb
  • Airflow
  • 数智化
  • StreamSets
  • Flume
  • 小阳杂说
  • Azkaban
  • Kudu
  • Sqoop
  • Tez
  • Beam
  • Telegraf
  • Oracle
  • Zeppelin
  • Nmon
  • Kylin
  • Prometheus
  • Davinci
  • Maxwell
  • Sentry
  • Storm
  • 大数据启示录
  • Phoenix
  • Filebeat
  • Pulsar
  • Impala
  • Hue
  • Svn
  • Presto
  • Oozie
  • Cassandra
  • Grafana
  • Greenplum
  • 雷达视频设备应用
  • InfluxDB
  • Bigtop
  • 巨人肩膀
  • Golang
  • 提示词工程
  • 网络安全
  • 数智领航
  • 书籍共享
  • asdasd
  • 动力电池
  • d3ed4
  • 测试私密home显示
  • dasdas55555
  • SFF
无匹配社区

博客园

请选择社区

京东零售数据湖应用与实践

当前企业数据处理广泛采用 Lambda 架构。Lambda 架构的优点是保证了数据的完整性,但缺点是系统的复杂性较高,需要维护两套系统,并且服务层的复杂合并逻辑可能会导致延迟。为了解决数据的完整性和实时性之间的矛盾,京东零售在数据架构上做出了一系列的革新。
Hudi数据湖数据平台架构数据仓库/中台
头像
海星之梦 发布于 2024年08月05日
247浏览1点赞

如何基于 Apache SeaTunnel 构建高效数据同步管道

Apache SeaTunnel是一站式数据集成平台,支持离线和实时数据同步,提供了灵活的扩展和高效的并行处理,确保数据一致性。 本文介绍了SeaTunnel的架构设计、核心功能、最佳实践以及如何参与社区共建,帮助用户快速上手并深入了解其强大功能。
SeaTunnel
头像
忆往昔 发布于 2024年08月05日
553浏览3点赞

【消遣阅读】为什么很多人会说:科学的尽头是神学??

为什么很多人会说:科学的尽头是神学??
头像
忆往昔 发布于 2024年08月04日
112浏览2点赞

Apache Doris + Apache Iceberg 快速搭建指南|Lakehouse 使用手册(三)

湖仓一体(Data Lakehouse)融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势,能够更加便捷地满足各种数据处理分析的需求。Apache Doris 持续加深与数据湖的融合,已演进出一套成熟的湖仓一体解决方案。
Doris
头像
忆往昔 发布于 2024年08月04日
164浏览1点赞

官宣|Apache Flink 1.20 发布公告

Apache Flink PMC(项目管理委员)很高兴地宣布发布 Apache Flink 1.20.0。与往常一样,这是一个充实的版本,包含了广泛的改进和新功能。总共有 142 人为此版本做出了贡献,完成了 13 个 FLIPs、解决了 300 多个问题。感谢各位贡献者的支持!
Flink
头像
海星之梦 发布于 2024年08月02日
619浏览1点赞

一文读懂车联网V2X通信技术

车联网技术是车辆信息化的核心内容,是互联网、车际网V2X和车内网技术一体化发展的必然结果。今后,随着5G技术在V2X的运用,V2X通信技术能够实现更加安全、高效、便捷的驾驶体验,同时也是未来高度自动驾驶的基础支撑,是汽车产业融入万物互联时代的重要途径。相信车辆全面智能化、网联化已为时不远了。
车联网
头像
数智先锋 发布于 2024年08月02日
347浏览2点赞

Docker基础命令-网络(network)管理(Docker网络类型、创建与管理自定义网络、DNS与服务发现、网络隔离与安全、网络桥接与路由、高级网络特性)

Docker网络管理涉及从基础配置到高级策略的广泛内容,是构建稳定、可扩展的Docker化应用架构的关键。通过深入理解网络类型、配置自定义网络、优化DNS与服务发现机制、强化网络安全措施,掌握这些技巧,无论是单机环境还是分布式集群,都能确保容器间通信的顺畅与隔离,满足不同应用场景的需求。
Docker
头像
海星之梦 发布于 2024年08月02日
131浏览3点赞

车联网TSP的架构浅谈

随着车联网技术的发展,车联网TSP(Telematics Service Provider)在汽车安全、驾驶行为、智能导航等方面发挥着重要的作用。本文将主要讨论车联网TSP的技术架构方面,包括车联网TSP的组成、通信协议、数据管理等方面的内容。
车联网
头像
巨人肩膀小编 发布于 2024年08月01日
214浏览2点赞

深入浅出之Docker Compose详解

Docker Compose是Docker官方的开源项目,负责实现对Docker容器集群的快速编排。Compose 是 Docker 公司推出的一个工具软件,可以管理多个 Docker 容器组成一个应用。你需要定义一个 YAML 格式的配置文件docker-compose.yml,写好多个容器之间的调用关系。然后,只要一个命令,就能同时启动/关闭这些容器
DorisKubernetes
头像
海星之梦 发布于 2024年07月31日
220浏览

千万级车联网 MQTT 消息平台架构设计

随着整个汽车出行领域新四化(电气化、智能化、网联化和共享化)的推进,各个汽车制造厂商正逐步构建以智能驾驶和智能网联为核心的车联网系统。 新一代的车联网系统对于底层消息采集、传输和处理的平台架构提出了更高的要求。
车联网MQTT
头像
随风 发布于 2024年07月31日
320浏览

数据库表设计的20条黄金规则

在数据库表设计中,虽然没有固定的20个规定,但可以根据广泛接受的数据库设计原则和最佳实践来总结出一些关键规定。本文是对这些规定的详细解释,并附上正反面例子进行对比说明
数据分析MySQL
头像
洪波涌起 发布于 2024年07月30日
76浏览

js实现滑动验证

手指在滑动整个屏幕时,会影响浏览器的行为,比如滚动和缩放。所以在调用touch事件时,要注意禁止缩放和滚动
Web前端js
头像
梦想家 发布于 2024年07月30日
62浏览2点赞

Kubernetes中crictl的详细用法教程与应用实战

Kubernetes(简称k8s)作为云原生技术的核心之一,通过其强大的容器编排能力,极大地简化了分布式应用的部署、扩展和管理。在Kubernetes中,容器的运行和管理离不开底层的容器运行时(Container Runtime),如Docker、containerd、CRI-O等。而crictl作为一个命令行工具,专门用于与这些容器运行时接口(CRI)兼容的容器运行时进行交互,为......
Kubernetes
头像
海星之梦 发布于 2024年07月30日
702浏览

新秀组合 极致体验 | 自如基于 StreamPark + Paimon 实现数据一键入湖最佳实践

本文主要介绍了自如 MySQL 数据迁移至 Hive 的架构升级演进,原有架构涉及到的组件众多,链路复杂,遇到很多挑战,在使用 StreamPark + Paimon 这套组合方案后有效地解决了数据集成中遇到的困境和挑战,分享了 StreamPark + Paimon 在实际应用中具体的实践方案,以及这套新秀组合方案带来的优势和收益。
StreamparkPaimon
头像
巨人肩膀小编 发布于 2024年07月29日
178浏览

HTTPS 的加密过程及其工作原理

HTTPS (HyperText Transfer Protocol Secure) 是一种通过 SSL/TLS 加密保护数据传输安全的 HTTP 协议。HTTPS 的加密机制是保证数据在传输过程中不会被窃取、篡改或冒充的关键。
Linux
头像
海星之梦 发布于 2024年07月29日
45浏览

Redis面试灵魂100问

进阶问题、基础问题、高级问题、更多问题、更高级的问题、实战问题、深入问题、实践问题、终极问题
Redis
头像
忆往昔 发布于 2024年07月29日
91浏览

HTTPS那么强大,仅仅就是比HTTP安全那么简单吗?

随着互联网的普及和发展,数据传输的安全性变得越来越重要。在这个背景下,HTTPS(Hypertext Transfer Protocol Secure)作为一种安全的HTTP协议,逐渐取代了传统的HTTP协议。很多人认为HTTPS的主要优势在于其比HTTP更安全,但HTTPS的强大远不止于此。
Linux
头像
忆往昔 发布于 2024年07月29日
60浏览

Apache Doris + Apache Paimon 快速搭建指南|Lakehouse 使用手册(二)

湖仓一体(Data Lakehouse)融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势,帮助用户更加便捷地满足各种数据处理分析的需求。在过去多个版本中,Apache Doris 持续加深与数据湖的融合,已演进出一套成熟的湖仓一体解决方案。
DorisPaimon
头像
忆往昔 发布于 2024年07月29日
508浏览

Apache Doris + Apache Hudi 快速搭建指南|Lakehouse 使用手册(一)

湖仓一体(Data Lakehouse)融合了数据仓库的高性能、实时性以及数据湖的低成本、灵活性等优势,帮助用户更加便捷地满足各种数据处理分析的需求。在过去多个版本中,Apache Doris 持续加深与数据湖的融合,已演进出一套成熟的湖仓一体解决方案。
DorisHudi
头像
忆往昔 发布于 2024年07月29日
173浏览1点赞

开源免费的数据集成工具 Data Integration

数据集成 (Data Integration) 是指将不同来源的数据整合到一个统一的数据库或数据仓库中,以便进行数据分析和处理。数据集成可以帮助我们从不同的数据源中提取有用的信息,并将其整合到一个统一的视图中,从而更好地理解和分析数据。
NifiCanalDataxDebeziumKettleStreamSets
头像
海星之梦 发布于 2024年07月29日
657浏览
1 202122232460

微信(交流/反馈)

巨人肩膀初心:站在巨人肩膀上,避免无谓的重复劳动。 生产和汇聚行业技术、 知识经验、 工具组件 、案例产品,提供相关环境,为开发者提高生产效率提供切实有效的支持和帮助。并在这一进程中实现多方共赢。

由 深圳数智领航科技有限公司 提供动力 - 数智化领航者。

©2023-2025 - 巨人肩膀 - 粤ICP备2025395551号-1