
ET-SoC-1 芯片:一款用于 AI 推理的多核 RISC-V 加速器
行业正在寻求大规模且高效地处理人工智能。ET-SoC-1 通过一种专为现代服务器设计的激进并行架构来满足这一需求。这个芯片不是传统的 CPU,而是一个设计用于高速执行 AI 模型并优化功耗的系统 🚀。
多核架构和专用单元
系统的核心是超过一千个 64 位 RISC-V 核,以其简单性和低功耗而闻名。这些核并非孤立工作;它们伴随着张量加速器。RISC-V 核负责组织任务和控制逻辑,而专用单元执行神经网络所需的繁重矩阵计算。这种工作分工是其高效的关键。
这种混合设计的优势:- 大规模并行:在大量核之间分配负载,允许同时处理数百万请求。
- 设计效率:简单核和优化加速器减少了每个操作所需的能量。
- 可扩展性:架构自然适应密集且易于分割的工作负载。
如果一个核分心,其他一千个核随时准备接替,确保你的视频推荐永不延迟。
数据中心中的实际应用
这个加速器定位于实时推理任务,这是已训练 AI 模型响应请求的阶段。它非常适合我们日常使用的云服务。
主要用例:- 处理自然语言:用于虚拟助手、自动翻译或社交媒体情感分析。
- 推荐内容:数字平台上建议视频、产品或音乐的算法。
- 分析图像和视频:从人脸识别到自动内容审核。
对 AI 基础设施的影响
ET-SoC-1 处理高请求量并具有低延迟的能力,提供了一种替代传统大量服务器扩展的方案,后者可能效率较低且成本更高。行业正在观察这种专用架构如何改变 AI 部署方式,优先考虑每瓦性能和大规模生产环境中的响应能力。其多核设计代表了通往更强大和可持续的 AI 服务器的道路 💡。