自(zi)本文作者(zhe)：李丹
来源：硬(ying)AI
宣布(bu)推出Copilot全面融(rong)入Windows系统的Windows 11 AI PC一天后，微软又送上了Copilot的多种功能“大礼包”，进一步推动先进的人工智能（AI）助手与微软的业(ye)务及其合作伙伴结合。
美东时间(jian)5月21日周二开幕的年度Build开发者(zhe)大会(hui)上，微软CEO Satya Nadella开场先提到微软几(ji)十年来有两大梦想：一是能不能让电脑理解人类(lei)，而不是人类(lei)被迫理解电脑，二是在信息日益增加的世界，电脑能不能帮助人类(lei)推理、规划以及更有效(xiao)地运用(yong)所有的信息。他认为，现在这(zhe)波AI浪潮能为微软找到实现这(zhe)两大梦想的答案。
随后，Nadella聚焦Copilot。他提到了包含随时可用(yong)本地API的Copilot库(ku)Windows Copilot Library，称有40多种端侧AI模型“开箱即用(yong)”，展示了将Copilot全面融(rong)入个人电脑（PC）的新型PC Copilot+ PC如何与AI应用(yong)程序（App）密切结合。
周一微软介绍过Windows Copilot Runtime中包含超过40个AI模型。周二Nadella将Windows Copilot Runtime类(lei)比为重磅Windows API Win32，因为它让开发者(zhe)更容易利用(yong)AI打造自(zi)己的Windows App。
Azure AI现已结合GPT-4o Azure将率先使(shi)用(yong)英伟达(da)Blackwell AI芯片
接着Nadella提到AI基础(chu)设施。他表示，微软拥有“世界上最全面的人工智能基础(chu)设施”，有望在2025 年以前实现数据中心 100% 由可再生能源供电，微软云(yun)计算Azure的AI 服务落(luo)地国家(jia)数量已增加三倍。
他说，微软将成为首(shou)批(pi)提供英伟达(da)最新Blackwell AI 芯片的云(yun)服务商之一，与英伟达(da)建立了“深厚的合作伙伴关(guan)系”。
Nadella称，如今，已有超过5万家(jia)组(zu)织使(shi)用(yong)Azure AI。借助 Azure AI，微软提供最广泛的前沿和开源模型选(xuan)择，包括大语言模型（ LLM）和小语言模型（ SLM）。
周一微软称，OpenAI上周最新发布(bu)的旗(qi)舰模型GPT-4o将很快可以加持Copilot。周二微软宣布(bu)，集成文本、图像和音频处理的多模态模型GPT-4o现可在Azure AI Studio中使(shi)用(yong)，也可作为API使(shi)用(yong)。
Nadella在开发者(zhe)大会(hui)现场透露，GPT-4o已经(jing)结合到Azure AI，称OpenAI上周的GPT-4o演示“非常神奇”，OpenAI 是微软“最具战略意义、以及最重要的合作伙伴”。
微软称，在OpenAI官宣GPT-4o 的同一天，微软就在 Azure OpenAI 服务上开放了该模型供测试，本周二微软就宣布(bu)获得GPT-4o 的完整 API 访问(wen)权限(xian)。
在社交媒体X，一些(xie)网友对此感到兴奋(fen)，一个高点赞(zan)评论称，这(zhe)是全新的世界，向Copilot问(wen)好。
有网友呼吁，展示用(yong)于编写(xie)Python代码等原生App，想要说话和编码/复制聊天等内容能同时进行，而且不需要特意下什么命令或者(zhe)按什么按键，就像有人和你待在同一个房间(jian)一样。
Azure AI可用(yong)文图小模型 Phi-3-vision OPPO新手机正测试Azure AI文本语言互转技(ji)术
微软开发的AI SLM Phi-3 系列周二发布(bu)了一款新的多模态小模型Phi-3-vision，它可在 Azure 中使(shi)用(yong)。
微软介绍，Phi-3 模型功能强大、经(jing)济实惠，并针对个人设备进行了优化。Phi-3-vision 有42亿参数，能够输入图像和文本，并接收文本回复。例如，用(yong)户可以就图表提出问(wen)题，或就特定图像提出开放式问(wen)题。
微软还透露，中国手机厂商OPPO正在其新款智能手机上试点Azure AI的语音转文本、快速转录和 Azure AI 文本转语音技(ji)术。
Team Copilot将个人助手变身团队会(hui)议(yi)主持人、聊天协作者(zhe)、项目(mu)经(jing)理
微软推出多种Copilot的AI功能扩展。周二公布(bu)的一大扩展功能是Team Copilot。
作为Copilot系列生成式AI技(ji)术的最新扩展，Team Copilot将Copilot for Microsoft 365从幕后的个人AI助手，扩展为团队新的重要成员。您(nin)将能够在 Teams、Loop、Planner 等协作工具中调用(yong)Copilot。
Team Copilot能够在会(hui)议(yi)中担任(ren)会(hui)议(yi)主持人，管理会(hui)议(yi)议(yi)程、跟踪(zong)会(hui)议(yi)时间(jian)并记录会(hui)议(yi)要点；也可以在聊天中作为协作者(zhe)，提供重要信息、跟踪(zong)行动项目(mu)并解决未决问(wen)题。它还可以担任(ren)项目(mu)经(jing)理，帮助确保每个项目(mu)顺利推进，并及时通知团队进行输入。这(zhe)些(xie)初始体验将在今年晚些(xie)时候推出预览版。
社交媒体X的一条评论称，Copilot的扩展看起来很有趣，微软预览了一些(xie)明显从ChatGPT 复制过来的功能：Builder UI、自(zi)定义函数、GPT Mentions。
Copilot Studio升级 用(yong)户可定制AI代理
微软Copilot Studio升级，推出全新的Agent代理功能，让开发者(zhe)能够根据特定任(ren)务和功能，构建主动响应数据和事件(jian)的Copilot。
基于这(zhe)类(lei)新功能的Copilot通过记忆和知识了解上下文、推理操作和输入，基于用(yong)户反馈进行学习，并在不知道如何处理时寻求帮助，从而独立管理复杂、长期(qi)运行的业(ye)务流程。
从 IT 设备采购到销售和服务的客户接待，用(yong)户都(dou)可以让基于Copilot Studio构建的Copilot为其工作。在部署前，用(yong)户可以先测试自(zi)己设计的Copilot AI 代理，然后在多个渠道使(shi)用(yong)该代理。
GitHub Copilot扩展定制Copilot体验
作为微软生成式AI的首(shou)批(pi)重大运用(yong)，GitHub Copilot目(mu)前拥有180万付费用(yong)户。GitHub本周二推出首(shou)套由微软和第三方合作伙伴开发的GitHub Copilot扩展，现已开启受邀预览。
GitHub Copilot扩展用(yong)于打造智能的第三方生态系统。它的新增功能允许开发者(zhe)、企业(ye)通过其偏好的诸如Azure、Docker、Sentry 等服务，直接在 GitHub Copilot Chat 中定制其GitHub Copilot 体验。
GitHub Copilot for Azure展示了如何利用(yong)自(zi)然语言和更广泛的功能来提高开发速度。通过 Copilot Chat 使(shi)用(yong)该扩展，开发者(zhe)可以探(tan)索和管理 Azure 资源，同时排除故障、查找相(xiang)关(guan)日志(zhi)和代码。
Edge观看YouTube、彭博等网站视频可实时英翻(fan)德意西印(yin)地四语种
微软周二宣布(bu)了一项浏览器的新AI 功能，让用(yong)户您(nin)观看视频时可以通过配音和字幕实时获得翻(fan)译内容。微软的Edge浏览器将“很快”在 YouTube、LinkedIn、Coursera 等网站上提供实时视频翻(fan)译功能。
该功能将支持西班(ban)牙(ya)语翻(fan)译成英语，以及将英语翻(fan)译成德语、印(yin)地语、意大利语、俄语和西班(ban)牙(ya)语。Edge还将支持路透社、CNBC 和彭博社等新闻网站视频的实时翻(fan)译。微软计划未来增加更多语种翻(fan)译以及扩大支持的网站范围。
媒体评论称，除了提供一种将视频翻(fan)译成用(yong)户母语的简洁(jie)方法外，Edge的新AI功能应该还会(hui)让失聪或有听力障碍的用(yong)户更容易观看视频。
有网友评论称，这(zhe)种视频实时翻(fan)译的功能如果推出，绝对值得关(guan)注。问(wen)题是，翻(fan)译的准确性和流畅性如何，如何保留原说话者(zhe)的口气和语调。
首(shou)款基于Arm Azure Cobalt虚拟机预览版 正式发布(bu)Azure ND MI300X v5虚拟机
去(qu)年11月，微软发布(bu)了首(shou)款自(zi)研AI芯片Azure Maia 100和首(shou)款自(zi)研云(yun)处理器Azure Cobalt 100。本周二微软宣布(bu)，在Azure Cobalt 100的基础(chu)上，推出基于Arm架构定制的Cobalt 100虚拟机（VM）预览版。它是第一代采用(yong)微软新Cobalt处理器的虚拟机，对运行通用(yong)工作负载和云(yun)原生工作负载时的效(xiao)率和性能进行了优化。
Nadella介绍，相(xiang)比同类(lei)型Azure 虚拟机，基于Arm的Cobalt 100虚拟机性能可提升多达(da)40%，它是微软Azure推出的功效(xiao)最高计算产品。
微软Azure硬(ying)件(jian)系统及基础(chu)设施负责人Rani Borkar也告诉媒体，其初步测试显示， Azure Cobalt的性能比目(mu)前其数据中心所用(yong)所用(yong)商用(yong)Arm服务器的性能高多达(da)40%。媒体称，微软目(mu)前正在Microsoft Teams 和 SQL Server 等工作负载上测试Cobalt CPU，计划明年向客户提供处理各种工作负载的虚拟机。
Maia 100 目(mu)前正在 GPT 3.5 Turbo 上进行测试， GPT 3.5同样是支持 ChatGPT、Bing AI 工作负载和 GitHub Copilot的模型。与 Cobalt CPU类(lei)似(si)，微软目(mu)前对Maia 100 处于部署的早期(qi)阶段，并未披露其具体规格和性能表现。
微软是首(shou)家(jia)将AMD的MI300X AI加速器芯片用(yong)于客户AI训练和AI推理的云(yun)服务商。本周二微软宣布(bu)，Azure ND MI300X v5虚拟机系列已正式发布(bu)，针对高需求AI，以及诸如Azure OpenAI Service的高性能计算（HPC）工作负载进行了优化。
数据分析(xi)平台Microsoft Fabric推出实时智能
微软的AI支持数据分析(xi)平台Microsoft Fabric也有新功能发布(bu)。该平台的用(yong)户可以利用(yong)实时智能（Real-Time Intelligence）进行即时决策(ce)，提供了端到端的软件(jian)即服务（SaaS）解决方案，让客户能够对海量的、时间(jian)敏(min)感的高颗粒度数据采取行动，更快、更明智地制定业(ye)务决策(ce)。
实时智能现已开启预览，它不仅(jin)帮助数据分析(xi)人员获得简单的低代码/无(wu)代码体验，也通过代码丰富的用(yong)户界面让专业(ye)开发者(zhe)受益。
Microsoft Fabric推出工作负载开发套件(jian)，让独立软件(jian)供应商（ISV）和开发者(zhe)能够在 Fabric 中扩展应用(yong)程序，打造统一的用(yong)户体验。
微软携手可汗学院 免(mian)费为美国中小学教师提供AI助手Khanmigo
周二，微软和可汗学院（Khan Academy）宣布(bu)达(da)成多元合作伙伴关(guan)系，旨在将AI的变革潜力转化为现实。
合作伊始，微软将协助可汗学院为美国所有相(xiang)当于国内中小学教育的K-12教育者(zhe)免(mian)费提供Khanmigo for Teachers。这(zhe)款AI驱动的教育助手能够释放教师时间(jian)，让他们专注于最重要的事情(qing)——与学生互动并提供支持。微软还将捐(juan)赠(zeng)Azure AI优化的基础(chu)架构权限(xian)，提升Khanmigo for Teachers的可用(yong)性。该服务将由Azure OpenAI Service提供支持。
可汗学院还将与微软携手，借助微软开发的SLM系列Phi-3最新版，探(tan)索以经(jing)济实惠、可扩展、适应性强的方式改进数学辅导。他们还计划将更多可汗学院的教学内容引入Copilot和Microsoft Teams教育版，为学习者(zhe)提供更多资源。