发现者网
产业经济 科技业界 3C数码 文化传媒 移动智能 家电行业 AI大模型 汽车出行 热点资讯

EdgeAIGC新突破:TD3算法助力边缘缓存命中率大幅提升41%以上

2025-07-29来源:ITBEAR编辑:瑞雪

近年来,随着ChatGPT、Sora、Stable Diffusion等人工智能生成内容(AIGC)工具的兴起,算力需求急剧攀升,全球推理请求量持续增长,云端延迟问题日益凸显。

面对这一挑战,一个创新的解决方案应运而生。广州大学、清华大学与浪潮集团携手,提出了一种将大型AIGC模型切割成“模块化组件”的新方法,利用TD3算法实现实时组装,旨在优化计算需求的同时,确保服务质量不受影响。

该研究的重点在于,在边缘计算的有限存储空间、带宽和计算资源条件下,如何减少用户模型服务请求的响应时间与成本。这一创新框架被命名为EdgeAIGC,并于2025年7月4日在《Digital Communications and Networks》期刊上发表。

EdgeAIGC框架由云服务中心、边缘服务层和用户层构成。云服务中心配备高性能云服务器,存储了多种预训练的AIGC模型,如文本转语音、文本转换等,虽能满足所有用户推理服务请求,但成本和时间消耗较高。

为解决这一问题,研究者设计了包含云服务器(CS)和边缘服务器(ES)的网络架构,其中CS与ES的计算资源以A800 GPU数量表示。考虑到用户关注的效率与成本,以及运营商的成本利润,研究者致力于优化所有请求服务的平均响应时间与成本。

为了实现这一目标,研究者引入了TD3算法。在资源分配中,带宽、计算资源等均为连续变量,TD3算法擅长处理连续动作空间问题,并对高维状态空间具有良好的适应性。通过学习最优连续动作策略,TD3算法能够确定最佳缓存决策和资源分配方案,同时引入延迟更新策略网络机制,确保策略网络更新稳定。

在研究中,问题被形式化为马尔可夫决策过程(MDP),包括状态空间、动作空间和奖励。TD3算法架构包含六个神经网络,通过Actor和Critic网络抑制Q值过估,延迟更新策略网络防止震荡。实验表明,TD3算法对学习率的设置要求较高,但通过双评论家网络和延迟更新策略,显著提高了学习效率和稳定性,相比DDPG算法,在奖励优化方面提高了约1.72%。

随着用户数量的增加,模型命中率也随之提升。在此过程中,TD3算法的模型命中率始终优于其他基准算法,与DDPG、GCRAS、PCRAS相比,最大改善率分别为41.06%、50.93%、57.85%。

EdgeAIGC框架结合动态模型流行度,实现了边缘服务器的模型缓存决策及带宽和计算资源的协调分配。这一创新方法不仅提高了模型命中率,还为边缘计算与AIGC的融合提供了新的思路,有望在未来推动相关技术的发展与应用。

光联携手利元亨,共话新能源制造AI时代网络新路径与新机遇
聚焦企业在全球范围内的多分支互联与云IDC接入问题,方案基于光联自建全球光纤骨干网络及华为SD-WAN设备,支持MPLS、Internet与4G/5G等多种链路融合,并可弹性部署多种拓扑模型,实现总部、分支…

2025-11-15

恒为科技:从可视化到智算,让复杂算力“看得见、管得住”
这家公司从 2003 年起步,长期在“网络可视化”和“智能系统平台”两条看似技术化的赛道上耕耘,逐步在运营商、科研院所、大型行业客户中建立信任与交付能力。它不像爆款公司那样靠一款产品跑路,而是靠一条条项目、…

2025-11-15

6寸LCD显示屏:小身材大能量,技术优势与多元应用前景深度剖析
采用IPS等先进技术的6寸LCD屏,能够实现更广色域覆盖,色彩显示真实自然,更适用于图像监控、医疗设备显示、智能终端等对色彩还原要求较高的场合。 随着技术的不断发展,6寸LCD显示屏将在未来呈现更高清、更智…

2025-11-14

5.5G辐射危害健康?物理学者:比太阳光频率低,基站越密越安全
我当时听了都愣了,太阳光那不是好东西吗,怎么还跟信号辐射扯一块儿了? 最有意思的是,他说大家都觉得基站多了辐射就大,这完全是搞反了。之前吵得最凶的那个阿姨,现在天天用5.5G跟外地的孙子视频,还跟邻居说这新基…

2025-11-14

苹果设备与电信流量卡全攻略:从兼容到技巧,助你畅享无忧网络
•运营商网络覆盖差异•手机版本支持频段不同•套餐类型与设备性能不匹配最新的iPhone 14系列甚至已经支持电信的5GSA组网,网速体验绝对令人惊艳!

2025-11-12

企业宽带选不对,带宽再大也白费!这些关键因素决定实际网速
• 网速(用户感知):即实际访问体验,取决于 3 个核心因素 —— 带宽只是基础,更重要的是网络质量、路由优化和并发处理能力。 真正专业的服务商,会从企业实际业务场景出发提供解决方案,而非一味推销高带宽产品…

2025-11-12

爱立信完成上行L4S技术测试,为5G时延敏感业务提供网络支撑
(全球TMT2025年11月11日讯)近日,在IMT-2020(5G)推进组的组织下,爱立信成功完成了上行L4S技术测试,验证了L4S在提升上行实时交互业务体验方面的显著效果。测试结果表明,L4S技术能够有效…

2025-11-11

上海贝尔发布《2025年AI-ICT赋能与重构白皮书》:剖析趋势、需求与战略方向
《2025年AI-ICT赋能与重构白皮书》由上海贝尔发布,系统剖析了AI与ICT产业融合的核心趋势、技术需求及战略方向,展现了全球AI发展浪潮下ICT基础设施的变革路径与机遇。实施路径上,需夯实数据与模型基础…

2025-11-11

海外游语言障碍终结者:时空壶新T1离线翻译,精准适配复杂场景
时空壶新T1翻译机凭借端侧AI翻译技术与全面的离线功能配置,成为假期中解决无网沟通难题的关键设备,其技术设计精准匹配了海外旅行中的复杂网络环境。这种“离线核心+在线补充”的双模式设计,精准命中了国庆海外游中“…

2025-11-11