您现在的位置是:休闲 >>正文
AMD X3D搞AI居然比打游戏还猛!8核暴打16核 领先达88%
休闲23人已围观
简介据GiggleHD实际测试,AMD X3D处理器在RAG检索增强生成)AI基准测试中展现出远超预期的性能表现,最高领先非X3D芯片达88%。RAG AI通过外部向量数据库检索信息来增强大模型的回答质量 ...
据GiggleHD实际测试,比打AMD X3D处理器在RAG(检索增强生成)AI基准测试中展现出远超预期的游戏性能表现,最高领先非X3D芯片达88%。还猛核暴
RAG AI通过外部向量数据库检索信息来增强大模型的打核达回答质量,与纯LLM推理不同,领先向量搜索的比打大量计算负载落在CPU而非GPU上。
随着Agentic AI工作负载的游戏推进,搜索驱动的还猛核暴任务流越来越多,CPU的打核达延迟瓶颈问题日益突出。
HNSW(分层可导航小世界)搜索算法就是领先典型例子,在GPU执行LLM推理的比打同时,CPU负责图检索,游戏更大的还猛核暴缓存意味着更短的检索时间。
GiggleHD使用开源的打核达X3D RAG基准测试,针对个人PC和小团队单节点场景(约100K-200K向量),领先对AMD锐龙9000X3D系列及多款非X3D芯片进行了实测。


结果显示,在100K向量批量搜索中,X3D CPU最高比非X3D芯片快88%;在200K向量测试中,同为8核的锐龙7 9850X3D比锐龙7 9700X快50%以上,且8核X3D芯片的速度超过了16核的锐龙9 9950X。


索引构建方面,100K向量测试时间缩短50%,200K向量缩短39%,并发RAG吞吐量同样由X3D芯片领跑。


差距较小的项目是TTFT(首Token时间)吞吐量,因为该任务主要依赖GPU而非CPU。

Tags:
相关文章
少儿重疾险有没有必要买,少儿重疾险有必要买吗?
休闲导读: 很多新晋的宝爸宝妈既想给孩子买保险,又很纠结到底有没有必要买。于是经常有宝爸宝妈来咨询小编:少儿重疾险有没有必要买,少儿重疾险有必 ...
【休闲】
阅读更多沪滇协作再结硕果 昭通首个产业学院启动建设
休闲4月30日,昭通市沪滇产业学院合作共建签约活动在昭通职业学院举行。活动现场,昭通职业学院与中国服务集团股份有限公司签订共建意向书,标志着全市首个沪滇协作产业学院正式启动建设。同时,学院还分别与中服集团 ...
【休闲】
阅读更多ECFA後台商大賺 錢多數未回流|天下雜誌
休闲兩岸ECFA簽訂之後,增強台商錢進大陸的企圖,獲利回流卻沒相對增加。 ...
【休闲】
阅读更多