• AI编程
  • AI应用开发
  • AI大世界
  • Flink
  • Doris
  • SeaTunnel
  • 数据分析
  • Dolphinscheduler
  • StarRocks
  • 车联网
  • PowerData
  • 用户画像
  • Kafka
  • Dinky
  • Hive
  • Agile Query
  • 有趣的开源集市
  • Hadoop
  • Streampark
  • Gravitino
  • Linux
  • 数据仓库/中台
  • 数据治理
  • Paimon
  • Clickhouse
  • MySQL
  • Docker
  • 新零售
  • Spark
  • Web前端
  • Kubernetes
  • Atlas
  • Java
  • Hudi
  • Python开发
  • 嵌入式开发
  • Calcite
  • Drools
  • 智能制造
  • 物理围栏
  • 数据平台架构
  • 金融
  • Dbeaver
  • 规则系统
  • Elasticsearch
  • Nifi
  • Git
  • Linkis
  • Ambari
  • Kettle
  • Redis
  • Datart
  • Hbase
  • Zookeeper
  • MongoDB
  • Celeborn
  • SQLLineage
  • Ranger
  • Datax
  • 游戏
  • Gradle
  • Iceberg
  • Druid
  • OpenMetadata
  • 数据结构和算法
  • HiDataPlus
  • Canal
  • maven
  • Amoro
  • MQTT
  • 指标中台
  • Kyuubi
  • 数据湖
  • FineReport
  • 物流
  • Superset
  • Griffin
  • DataHub
  • MinIo
  • Debezium
  • Zabbix
  • Tidb
  • Airflow
  • 数智化
  • StreamSets
  • Flume
  • 小阳杂说
  • Azkaban
  • Sqoop
  • Kudu
  • Tez
  • Beam
  • Telegraf
  • Zeppelin
  • 大数据启示录
  • Oracle
  • Nmon
  • Kylin
  • Prometheus
  • Davinci
  • Maxwell
  • Storm
  • Sentry
  • Phoenix
  • Filebeat
  • Pulsar
  • Impala
  • Hue
  • Svn
  • Oozie
  • Presto
  • Grafana
  • Cassandra
  • 雷达视频设备应用
  • Greenplum
  • InfluxDB
  • Bigtop
  • 巨人肩膀
  • Golang
  • 提示词工程
  • 网络安全
  • 数智领航
  • 书籍共享
  • asdasd
  • d3ed4
  • 动力电池
  • 测试私密home显示
  • dasdas55555
  • SFF
无匹配社区

博客园

请选择社区

美团图灵机器学习平台性能起飞的秘密(一)

美团图灵机器学习平台在长期的优化实践中,积累了一系列独特的优化方法。本文主要介绍了图灵机器学习平台在内存优化方面沉淀的优化技术,我们深入到源码层面,介绍了Spark算子的原理并提供了最佳实践。希望为读者带来一些思路上的启发。
头像
忆往昔 发布于 2024年01月03日

数字化新业态下数据安全创新——Token化

数据安全最大的挑战是高速扩张前提下,解决数据暴露性问题。Token化让安全成为数据默认属性,让安全性随数据自动扩展,从根本上解决效率和安全合规的矛盾,实现设计安全和默认安全。本文主要介绍了Token化方案、Token化安全性实现以及美团所做的一些工程实践和经验分享。
头像
忆往昔 发布于 2024年01月03日

通用目标检测开源框架YOLOv6在美团的量化部署实战

基于美团目标检测模型开源框架 YOLOv6,本文提供了一种通用的量化部署方案,在保持精度的同时大幅提升了检测的速度,为通用检测的工业化部署探索出一条可行之路,希望能给大家带来一些启发或者帮助。
头像
忆往昔 发布于 2024年01月03日

美团隐私计算平台通过行业权威认证

近日,在2022年隐私计算大会上,中国信通院公布第六批可信隐私计算评测结果,美团隐私计算平台通过“联邦学习安全”和“多方安全计算基础能力”两个专项评测认证。2021年,美团已经通过“联邦学习基础能力”专项评测认证。
头像
忆往昔 发布于 2024年01月03日

图技术在美团外卖下的场景化应用及探索

在外卖广告CTR预估建模中,我们依托图技术在场景化上进行了一系列探索。本文首先介绍了使用图网络技术的出发点,然后从特征层面的抽象图关系到子图扩展以及场景感知子图,逐步介绍如何使用图技术建模业务问题,并针对联合训练的线上服务细节及效果进行解释和分析,希望能给从事相关工作的同学带来一些帮助或启发。
头像
忆往昔 发布于 2024年01月03日
20浏览

基于AI算法的数据库异常监测系统的设计与实现

美团数据库平台研发组,面临日益急迫的数据库异常发现需求,为了更加快速、智能地发现、定位和止损,我们开发了基于AI算法的数据库异常检测服务。本文从特征分析、算法选型、模型训练与实时检测等维度介绍了我们的一些实践和思考,希望为从事相关工作的同学带来一些启发或者帮助。
头像
忆往昔 发布于 2024年01月03日

提升资源利用率与保障服务质量,鱼与熊掌不可兼得?

美团Hulk调度系统团队在集群服务质量与资源利用率运营的长期落地实践中,基于业务实际场景,自主设计研发了集群负载自动调控系统(LAR)以及配套的运营体系,在提升集群整体资源利用率的同时保障了业务服务质量。本文介绍了LAR的设计理念、基本框架以及核心设计,并结合在线和混部场景应用展开思考,并展示了部分落地成果。希望能为从事相关工作的同学带来一些启发或者帮助。
头像
忆往昔 发布于 2024年01月03日

日志导致线程Block的这些坑,你不得不防

研发人员在项目开发中不可避免地要使用日志,通过它来记录信息和排查问题。Apache Log4j2提供了灵活且强大的日志框架,虽然上手比较快,但稍有不慎也非常容易踩“坑”。本文介绍了美团统一API网关服务Shepherd在实践中所踩过的关于日志导致线程Block的那些“坑”,以及我们如何从日志框架源码层面进行分析和解决问题的过程,并在最后给大家分享一些关于日志避“坑”的实践经验,希望能给大家带来一些帮助。
头像
忆往昔 发布于 2024年01月03日

外卖广告大规模深度学习模型工程实践 | 美团外卖广告工程实践专题连载

在外卖广告CTR场景下,深度学习模型正在从简单DNN小模型过渡到千亿参数复杂模型。基于该背景,本文将重点针对大规模深度模型在全链路带来的挑战,从在线时延、离线效率两个方面展开,阐述外卖广告在大规模深度模型上的工程实践经验,希望能为读者提供思路上的借鉴。
头像
忆往昔 发布于 2024年01月03日
6浏览

美团综合业务推荐系统的质量模型及实践

推荐系统是效果导向的数据应用服务,在功能的“有”和“无”之间,有很长的效果“好”和“坏”的光谱。本文以用户请求的粒度建立质量模型,通过数据血缘关联了数据表、算法模型、系统服务和用户请求,并结合美团综合业务的实践进行了拓展泛化,希望能对大家有所帮助或启发。
头像
忆往昔 发布于 2024年01月03日
13浏览

对话摘要技术在美团的探索(SIGIR)

随着互联网产生的文本数据越来越多,文本信息过载问题日益严重,对各类文本进行一个“降维”处理显得非常必要,而文本摘要就是其中一个重要的手段。本文首先介绍了经典的文本摘要方法,包括抽取式摘要方法和生成式摘要方法,随后分析了对话摘要的模型,并分享了美团在真实对话摘要场景中面临的挑战。同时基于实际的场景,本文提出了阅读理解的距离监督Span-Level对话摘要方案(已发表在SIGIR 2021),该方法比强基准方法在ROUGE-L指标和BLEU指标上提升了3%左右。
头像
忆往昔 发布于 2024年01月03日
3浏览

知识图谱可视化技术在美团的实践与探索

知识图谱可视化可以更直观地查看和分析知识图谱的数据。本文主要介绍了美团平台在布局策略、视觉降噪、交互功能、可视化叙事、3D图谱可视化等方面的一些实践和探索,同时沉淀出了uni-graph图可视化解决方案,并支持了美团的很多业务场景,包括美团大脑、图数据库、智能IT运维、组件依赖分析、行业领域图谱等。希望能对从事知识图谱可视化方向的同学有所帮助或启发。
头像
忆往昔 发布于 2024年01月03日

TensorFlow在美团外卖推荐场景的GPU训练优化实践

美团机器学习平台基于内部深度定制的TensorFlow研发了Booster GPU训练架构。该架构在整体设计上充分考虑了算法、架构、新硬件的特性,从数据、计算、通信等多个角度进行了深度的优化,最终其性价比达到CPU任务的2~4倍。本文主要讲述Booster架构的设计实现、性能优化及业务落地工作,希望能对从事相关开发的同学有所帮助或者启发。
头像
忆往昔 发布于 2024年01月03日
9浏览

异构广告混排在美团到店业务的探索与实践

在LBS(Location Based Services, 基于位置的服务)距离约束下,候选较少制约了整个到店广告排序系统的潜力空间。本文介绍了我们从候选类型角度进行候选扩展,通过高性能的异构混排网络来应对性能的挑战,从而提升了本地生活场景排序系统的潜能上限。希望能给从事相关方向的同学以启发。
头像
忆往昔 发布于 2024年01月03日
12浏览

设计模式二三事

设计模式是众多软件开发人员经过长时间的试错和应用总结出来的,解决特定问题的一系列方案。现行的部分教材在介绍设计模式时,有些会因为案例脱离实际应用场景而令人费解,有些又会因为场景简单而显得有些小题大做。本文会根据在美团金融服务平台设计开发时的经验,结合实际的案例,并采用“师生对话”这种相对诙谐的形式去讲解几类常用设计模式的应用。希望能对想提升系统设计能力的同学有所帮助或启发。
头像
忆往昔 发布于 2024年01月03日

美团集群调度系统的云原生实践

本文介绍了美团在如何解决大规模集群管理的难题、设计优秀且合理的集群调度系统方面的实践,阐述了美团在落地以Kubernetes为代表的云原生技术时,比较关心的问题、挑战以及对应的推进策略。同时本文也介绍了针对美团业务需求场景做的一些特色支持,希望本文能够对云原生领域感兴趣的同学有所帮助或者启发。
头像
忆往昔 发布于 2024年01月03日
6浏览

7次KDD Cup&Kaggle冠军的经验分享:从多领域优化到AutoML框架

反馈快速,竞争激烈的算法比赛是算法从业者提升技术水平的重要方式,从若干行业核心问题抽象出的算法比赛具有很强的实际意义。本文结合笔者在7次Kaggle/KDD Cup中的冠军经验,对于多领域建模优化,AutoML技术框架,以及面对新问题如何分析建模三个方面进行了介绍。希望能够让读者收获比赛中的通用高效建模方法与问题理解思路。
头像
忆往昔 发布于 2024年01月03日
5浏览

FlutterWeb性能优化探索与实践

美团外卖商家端基于 FlutterWeb 的技术探索已久,目前在多个业务中落地了App、PC、H5的多端复用,有效提升了产研的整体效率。在这过程中,性能问题是我们面临的最大挑战,本文结合实际业务场景进行思考,介绍美团外卖商家端在 FlutterWeb 性能优化上所进行的探索和实践,希望对大家能有所帮助或启发。
头像
忆往昔 发布于 2024年01月03日
16浏览

TensorFlow在推荐系统中的分布式训练优化实践

美团内部深度定制的TensorFlow版本,基于原生TensorFlow 1.x架构与接口,从大规模稀疏参数的支持、训练模式、分布式通信优化、流水线优化、算子优化融合等多维度进行了深度优化。在推荐系统场景,分布式扩展性提升10倍以上,单位算力性能也有显著提升,并在美团内部业务中大量使用,本文介绍了相关的优化与实践工作。
头像
忆往昔 发布于 2024年01月03日
5浏览

细粒度情感分析在到餐场景中的应用

经典的细粒度情感分析(ABSA,Aspect-based Sentiment Analysis)主要包含三个子任务,分别为属性抽取、观点抽取以及属性-观点对的情感倾向判定三个级联任务。本文介绍了美团到店到餐应用算法团队通过结合学界最先进的阅读理解、注意力机制等方面的实体抽取、情感分析经验,解决到餐(菜品,属性,观点,情感)四元组抽取问题,并在多个业务场景应用落地,希望能对从事相关工作的同学有所帮助或启发。
头像
忆往昔 发布于 2024年01月03日
6浏览
1 404142434461

微信(交流/反馈)

巨人肩膀初心:站在巨人肩膀上,避免无谓的重复劳动。 生产和汇聚行业技术、 知识经验、 工具组件 、案例产品,提供相关环境,为开发者提高生产效率提供切实有效的支持和帮助。并在这一进程中实现多方共赢。

由 深圳数智领航科技有限公司 提供动力 - 数智化领航者。

©2023-2025 - 巨人肩膀 - 粤ICP备2025395551号-1