自本文作者：李丹
来(lai)源：硬AI
宣布推出Copilot全面融入Windows系(xi)统的Windows 11 AI PC一天(tian)后，微软又(you)送(song)上了Copilot的多种功能“大礼包”，进一步推动(dong)先进的人工智能（AI）助手(shou)与微软的业务及(ji)其合作伙伴(ban)结合。
美东时间5月21日周二开(kai)幕的年度Build开(kai)发者大会上，微软CEO Satya Nadella开(kai)场(chang)先提到微软几十年来(lai)有两大梦想：一是能不能让电脑理解人类，而不是人类被迫理解电脑，二是在信息日益增加的世界，电脑能不能帮助人类推理、规划以及(ji)更有效地运用所有的信息。他认为，现在这波(bo)AI浪潮能为微软找到实现这两大梦想的答(da)案。
随后，Nadella聚焦Copilot。他提到了包含随时可用本地API的Copilot库Windows Copilot Library，称有40多种端侧AI模型(xing)“开(kai)箱即(ji)用”，展示了将Copilot全面融入个人电脑（PC）的新型(xing)PC Copilot+ PC如何与AI应用程序（App）密切结合。
周一微软介绍过Windows Copilot Runtime中包含超过40个AI模型(xing)。周二Nadella将Windows Copilot Runtime类比为重磅(pang)Windows API Win32，因为它让开(kai)发者更容(rong)易利用AI打造自己(ji)的Windows App。
Azure AI现已结合GPT-4o Azure将率先使用英伟(wei)达Blackwell AI芯片
接着Nadella提到AI基础(chu)设(she)施。他表示，微软拥有“世界上最全面的人工智能基础(chu)设(she)施”，有望在2025 年以前实现数据中心 100% 由可再生能源供(gong)电，微软云计(ji)算Azure的AI 服务落地国家数量已增加三倍。
他说，微软将成为首批提供(gong)英伟(wei)达最新Blackwell AI 芯片的云服务商之一，与英伟(wei)达建立了“深厚(hou)的合作伙伴(ban)关(guan)系(xi)”。
Nadella称，如今，已有超过5万家组织使用Azure AI。借助 Azure AI，微软提供(gong)最广泛的前沿和开(kai)源模型(xing)选(xuan)择，包括大语言模型(xing)（ LLM）和小语言模型(xing)（ SLM）。
周一微软称，OpenAI上周最新发布的旗舰模型(xing)GPT-4o将很快可以加持Copilot。周二微软宣布，集成文本、图像和音频处(chu)理的多模态模型(xing)GPT-4o现可在Azure AI Studio中使用，也可作为API使用。
Nadella在开(kai)发者大会现场(chang)透露，GPT-4o已经结合到Azure AI，称OpenAI上周的GPT-4o演示“非常神奇”，OpenAI 是微软“最具战略意义、以及(ji)最重要的合作伙伴(ban)”。
微软称，在OpenAI官宣GPT-4o 的同一天(tian)，微软就在 Azure OpenAI 服务上开(kai)放了该模型(xing)供(gong)测试(shi)，本周二微软就宣布获(huo)得GPT-4o 的完整 API 访(fang)问权限。
在社(she)交媒(mei)体X，一些网(wang)友对此感到兴奋，一个高点赞(zan)评论(lun)称，这是全新的世界，向Copilot问好。
有网(wang)友呼(hu)吁，展示用于编写Python代码等原(yuan)生App，想要说话和编码/复制聊天(tian)等内容(rong)能同时进行，而且不需要特意下什么命令或者按什么按键，就像有人和你待在同一个房(fang)间一样(yang)。
Azure AI可用文图小模型(xing) Phi-3-vision OPPO新手(shou)机正测试(shi)Azure AI文本语言互转(zhuan)技术
微软开(kai)发的AI SLM Phi-3 系(xi)列周二发布了一款新的多模态小模型(xing)Phi-3-vision，它可在 Azure 中使用。
微软介绍，Phi-3 模型(xing)功能强大、经济实惠，并针对个人设(she)备进行了优化。Phi-3-vision 有42亿参数，能够输入图像和文本，并接收(shou)文本回复。例如，用户可以就图表提出问题，或就特定图像提出开(kai)放式(shi)问题。
微软还(hai)透露，中国手(shou)机厂商OPPO正在其新款智能手(shou)机上试(shi)点Azure AI的语音转(zhuan)文本、快速(su)转(zhuan)录和 Azure AI 文本转(zhuan)语音技术。
Team Copilot将个人助手(shou)变身团队会议主(zhu)持人、聊天(tian)协(xie)作者、项目经理
微软推出多种Copilot的AI功能扩展。周二公布的一大扩展功能是Team Copilot。
作为Copilot系(xi)列生成式(shi)AI技术的最新扩展，Team Copilot将Copilot for Microsoft 365从幕后的个人AI助手(shou)，扩展为团队新的重要成员。您(nin)将能够在 Teams、Loop、Planner 等协(xie)作工具中调用Copilot。
Team Copilot能够在会议中担任会议主(zhu)持人，管理会议议程、跟踪会议时间并记录会议要点；也可以在聊天(tian)中作为协(xie)作者，提供(gong)重要信息、跟踪行动(dong)项目并解决未决问题。它还(hai)可以担任项目经理，帮助确保每个项目顺利推进，并及(ji)时通知团队进行输入。这些初始体验将在今年晚些时候推出预(yu)览版。
社(she)交媒(mei)体X的一条评论(lun)称，Copilot的扩展看起来(lai)很有趣(qu)，微软预(yu)览了一些明显从ChatGPT 复制过来(lai)的功能：Builder UI、自定义函数、GPT Mentions。
Copilot Studio升级 用户可定制AI代理
微软Copilot Studio升级，推出全新的Agent代理功能，让开(kai)发者能够根(gen)据特定任务和功能，构建主(zhu)动(dong)响应数据和事件的Copilot。
基于这类新功能的Copilot通过记忆和知识了解上下文、推理操(cao)作和输入，基于用户反馈进行学习，并在不知道如何处(chu)理时寻求(qiu)帮助，从而独立管理复杂、长期运行的业务流程。
从 IT 设(she)备采购到销售和服务的客户接待，用户都可以让基于Copilot Studio构建的Copilot为其工作。在部(bu)署前，用户可以先测试(shi)自己(ji)设(she)计(ji)的Copilot AI 代理，然后在多个渠(qu)道使用该代理。
GitHub Copilot扩展定制Copilot体验
作为微软生成式(shi)AI的首批重大运用，GitHub Copilot目前拥有180万付费用户。GitHub本周二推出首套由微软和第三方合作伙伴(ban)开(kai)发的GitHub Copilot扩展，现已开(kai)启受邀预(yu)览。
GitHub Copilot扩展用于打造智能的第三方生态系(xi)统。它的新增功能允许开(kai)发者、企业通过其偏好的诸如Azure、Docker、Sentry 等服务，直接在 GitHub Copilot Chat 中定制其GitHub Copilot 体验。
GitHub Copilot for Azure展示了如何利用自然语言和更广泛的功能来(lai)提高开(kai)发速(su)度。通过 Copilot Chat 使用该扩展，开(kai)发者可以探索和管理 Azure 资源，同时排除故障(zhang)、查找相关(guan)日志和代码。
Edge观看YouTube、彭博等网(wang)站视频可实时英翻(fan)德意西印地四语种
微软周二宣布了一项浏览器的新AI 功能，让用户您(nin)观看视频时可以通过配(pei)音和字幕实时获(huo)得翻(fan)译内容(rong)。微软的Edge浏览器将“很快”在 YouTube、LinkedIn、Coursera 等网(wang)站上提供(gong)实时视频翻(fan)译功能。
该功能将支持西班牙语翻(fan)译成英语，以及(ji)将英语翻(fan)译成德语、印地语、意大利语、俄语和西班牙语。Edge还(hai)将支持路透社(she)、CNBC 和彭博社(she)等新闻网(wang)站视频的实时翻(fan)译。微软计(ji)划未来(lai)增加更多语种翻(fan)译以及(ji)扩大支持的网(wang)站范围。
媒(mei)体评论(lun)称，除了提供(gong)一种将视频翻(fan)译成用户母语的简洁方法外，Edge的新AI功能应该还(hai)会让失聪或有听力障(zhang)碍的用户更容(rong)易观看视频。
有网(wang)友评论(lun)称，这种视频实时翻(fan)译的功能如果推出，绝对值得关(guan)注。问题是，翻(fan)译的准确性和流畅性如何，如何保留原(yuan)说话者的口气和语调。
首款基于Arm Azure Cobalt虚(xu)拟机预(yu)览版 正式(shi)发布Azure ND MI300X v5虚(xu)拟机
去年11月，微软发布了首款自研AI芯片Azure Maia 100和首款自研云处(chu)理器Azure Cobalt 100。本周二微软宣布，在Azure Cobalt 100的基础(chu)上，推出基于Arm架构定制的Cobalt 100虚(xu)拟机（VM）预(yu)览版。它是第一代采用微软新Cobalt处(chu)理器的虚(xu)拟机，对运行通用工作负载和云原(yuan)生工作负载时的效率和性能进行了优化。
Nadella介绍，相比同类型(xing)Azure 虚(xu)拟机，基于Arm的Cobalt 100虚(xu)拟机性能可提升多达40%，它是微软Azure推出的功效最高计(ji)算产品。
微软Azure硬件系(xi)统及(ji)基础(chu)设(she)施负责人Rani Borkar也告诉媒(mei)体，其初步测试(shi)显示， Azure Cobalt的性能比目前其数据中心所用所用商用Arm服务器的性能高多达40%。媒(mei)体称，微软目前正在Microsoft Teams 和 SQL Server 等工作负载上测试(shi)Cobalt CPU，计(ji)划明年向客户提供(gong)处(chu)理各种工作负载的虚(xu)拟机。
Maia 100 目前正在 GPT 3.5 Turbo 上进行测试(shi)， GPT 3.5同样(yang)是支持 ChatGPT、Bing AI 工作负载和 GitHub Copilot的模型(xing)。与 Cobalt CPU类似，微软目前对Maia 100 处(chu)于部(bu)署的早期阶段，并未披露其具体规格和性能表现。
微软是首家将AMD的MI300X AI加速(su)器芯片用于客户AI训练和AI推理的云服务商。本周二微软宣布，Azure ND MI300X v5虚(xu)拟机系(xi)列已正式(shi)发布，针对高需求(qiu)AI，以及(ji)诸如Azure OpenAI Service的高性能计(ji)算（HPC）工作负载进行了优化。
数据分析平台Microsoft Fabric推出实时智能
微软的AI支持数据分析平台Microsoft Fabric也有新功能发布。该平台的用户可以利用实时智能（Real-Time Intelligence）进行即(ji)时决策，提供(gong)了端到端的软件即(ji)服务（SaaS）解决方案，让客户能够对海量的、时间敏感的高颗粒度数据采取行动(dong)，更快、更明智地制定业务决策。
实时智能现已开(kai)启预(yu)览，它不仅帮助数据分析人员获(huo)得简单的低代码/无代码体验，也通过代码丰(feng)富的用户界面让专业开(kai)发者受益。
Microsoft Fabric推出工作负载开(kai)发套件，让独立软件供(gong)应商（ISV）和开(kai)发者能够在 Fabric 中扩展应用程序，打造统一的用户体验。
微软携手(shou)可汗学院 免(mian)费为美国中小学教师(shi)提供(gong)AI助手(shou)Khanmigo
周二，微软和可汗学院（Khan Academy）宣布达成多元合作伙伴(ban)关(guan)系(xi)，旨在将AI的变革(ge)潜(qian)力转(zhuan)化为现实。
合作伊始，微软将协(xie)助可汗学院为美国所有相当于国内中小学教育的K-12教育者免(mian)费提供(gong)Khanmigo for Teachers。这款AI驱动(dong)的教育助手(shou)能够释放教师(shi)时间，让他们专注于最重要的事情(qing)——与学生互动(dong)并提供(gong)支持。微软还(hai)将捐赠Azure AI优化的基础(chu)架构权限，提升Khanmigo for Teachers的可用性。该服务将由Azure OpenAI Service提供(gong)支持。
可汗学院还(hai)将与微软携手(shou)，借助微软开(kai)发的SLM系(xi)列Phi-3最新版，探索以经济实惠、可扩展、适应性强的方式(shi)改进数学辅导。他们还(hai)计(ji)划将更多可汗学院的教学内容(rong)引(yin)入Copilot和Microsoft Teams教育版，为学习者提供(gong)更多资源。