微软发布定制AI芯片:Maia 100更多细节曝光

微软发布Maia 100芯片 专为Azure大规模AI工作负载设计

近日,微软在Hot Chip 2024大会上公布了其最新研发的Maia 100芯片的详细规格。这款芯片是台积电5nm制程工艺下制造的最大处理器之一,专为部署在Azure云平台上的大规模AI工作负载而设计。

据悉,Maia 100芯片尺寸达到820平方毫米,封装采用COWOS-S夹层技术的TMC N5工艺HBM BW/Cap;峰值密集Tensor POPS可达1.8TB/s@64GB HBM2E,具备强大的算力支持。此外,它还支持多种数据类型的后端网络BW(12X400Gbe)和主机BW(PCIe Gen5X8),性能优越。

为了实现更高的性能和降低功耗,Maia 100采用了垂直集成的方式,同时配备了专门定制的服务器板、机架和软件堆栈。该芯片支持异步编程,通过硬件semaphores实现高效的数据传输和管理。

值得一提的是,Maia 100芯片还具备矢量处理器,这是一个松散耦合的超标量引擎,采用定制指令集架构(ISA),支持包括FP32和BF16在内的多种数据类型。此外,DMA引擎支持不同的张量分片方案,以提高数据利用率。

据悉,微软已推出Maia软件开发工具包(SDK),允许开发者迅速将PyTorch和Triton模型迁移至Maia。这一SDK为开发人员提供了多个组件,帮助他们轻松地将模型部署至Azure OpenAI服务。

综上所述,作为一款专为大规模AI工作负载设计的芯片,Maia 100在性能、功耗和兼容性等方面表现出色,有望为云计算领域带来更高效的AI解决方案。

发表回复