iCreatAI News
跳到正文
Hacker News AI· episod·· 3 天前AI 评分22

Tenstorrent Blackhole 如何在同一芯片上服务 Agentic AI 的 Prefill 与 Decode

Serving Prefill and Decode for Agentic AI (On Tenstorrent Blackhole)

AI 导读

Tenstorrent Galaxy 系统在 Blackhole 芯片上同时处理 prefill 与 decode,让运营方按负载变化在两者间调配容量,而不必在购买硬件时就固定分配。

来源:Hacker News AI · tenstorrent.com