(网经社讯)9月21日,在华为全联接大会2023上,华为常务董事、华为云CEO张平安宣布昇腾AI云服务已正式上线,企业一键接入即可获取澎湃的AI算力,让千行万业实现大模型普惠。同时昇腾AI云服务“百模千态”专区亦已正式上线,支撑企业和开发者更加快速地创建自己的大模型应用,在大模型时代快人一步。
张平安指出,全智能时代,AI算力的需求急剧增长。但AI服务器的功率密度远超通用服务器,单机柜功耗是过去的6-8倍,且需要专用的液冷系统散热;同时大模型训练需要百卡、千卡甚至万卡支撑,服务器之间的互联、时延、可靠性、运维极为复杂,自建AI数据中心面临诸多挑战。
据网经社云计算台(CC.100EC.CN)获悉,为了更好地支撑“百模千态”,华为云在贵安、乌兰察布、芜湖部署三大AI算力中心,为企业提供澎湃AI算力。企业只需一键接入,即可随取随用AI云服务,不用再费时费力自建或改造传统数据中心。
为保护用户数据,华为云昇腾AI云服务采用数据传输加密、数据存储加密、数据安全清除、数据访问控制、数据水印防泄露等多重技术,保障云上训练的数据全生命周期安全。
同时,华为云昇腾AI云服务“百模千态”专区也已经上线。除了支持盘古大模型,还将适配业界主流的上百个开源大模型,如LLAMA,GLM等。企业既可以基于盘古L0层和L1层能力,建设自己的大模型应用,也可以基于业界开源的大模型技术,打造自己的专属大模型。
此外,华为云昇腾AI云服务还提供高效长稳的大模型训练环境和完备的工具链,实现千卡训练连续30天不中断,任务恢复时长小于30分钟;并可通过30多个可视化调优和部署工具,帮助企业更高效进行数据处理、模型微调、Prompt工程等,完成一个千亿参数行业模型的端到端开发,可从过去的5个月缩短到现在的1个月,整体速度提升5倍。