以“智能副驾”和“插件”开启AI
应用开发的新疆界
2023年是AI变革加速的关键一年:微软宣布拓展与OpenAI的合作,并陆续推出了AzureOpenAI企业级服务以及面向Microsoft365、Dynamics365、PowerPlatform等产品服务的一系列“智能副驾(Copilot)”。
“智能副驾”能通过大语言模型(LLM)实现基于自然语言理解和生成的人机交互,并帮助用户完成各种复杂任务,它既开启了一种由AI驱动的全新软件类型,同时也标志着软件开发方式的重大变革——从软件服务的应用场景、用户体验、服务架构到安全防护措施,都在进化为全然不同以往的开发体验。
其中,“插件(Plugin)”是AI应用开发的关键一环,通过API接口引入来自其它软件服务的实时信息或业务数据,“插件”能为AI系统增加新的计算能力,从而为用户提供种类丰富、高效、准确的生成式智能服务。
微软宣布采用与OpenAIChatGPT相同的开放插件(Plugin)标准,从而确保今后ChatGPT与微软一系列“智能副驾”产品服务之间的互操作性。开发者使用任一平台开发的插件均同时适用于ChatGPT和微软的Microsoft365、Dynamics365Copilot等服务,用以满足个人客户与商业客户的业务需求。
开发者在AzureOpenAI企业版服务上开发的AI应用程序,也默认支持同样的开放插件标准——这意味着任何开发者都可以选择使用人类自然语言交互,作为其软件的互动方式。
微软宣布开发者可通过“插件”将应用和服务接入Microsoft365Copilot。首批支持的插件包括ChatGPT、Teams信息扩展、PowerPlatform连接器等,开发者可以直接接入现有服务,也可使用VisualStudioCode和VisualStudio上的MicrosoftTeamsToolkit开发工具,轻松开发新的Microsoft365Copilot插件。
开发者还可以将数据导入MicrosoftGraph,通过近期发布的SemanticIndexforCopilot语义索引功能构建关联性与行动信息,从而进一步拓展Microsoft365Copilot的功能。公测期间将首先提供超过50个来自Atlassian、Adobe、ServiceNow、ThomsonReuters、Moveworks、Mural等合作伙伴的插件,在Microsoft365Copilot正式发布时,将有数千个插件可供选择。
PowerPlatform平台重要组件的PowerPages与PowerBI中的Copilot智能副驾开启公共预览,让用户更自如地通过自然语言创建网页和数据洞察。此外,PowerVirtualAgent中的生成式智能也将开启受邀预览,进一步提升构建对话
机器人的体验,并为PowerAutomate增加更多的定制化可能性。
AzureAI新工具:帮助开发者构建、运营和部署新一代AI应用
AzureOpenAI企业版服务将ChatGPT、GPT-4等先进大模型与Azure安全可靠的企业级服务整合了在一起,目前已经有超过4500家企业客户采用AzureOpenAI服务。在微软不断将生成式智能融入更多第一方产品和服务的过程中,也将有越来越多的开发者,开始以“智能副驾”的方式和方法开发自己的新一代智能化应用。
在Build2023大会上,微软推出了一系列AI开发工具和功能来帮助开发者加速转型,其中主要包括:全新发布的AzureAIStudio,其能帮助开发者更便捷地将外部数据源整合到AzureOpenAI服务中,从而训练出基于自有数据的对话模型。
新发布预览的AzureAIContentSafety能帮助开发者构建更安全的线上环境和社区,其内置模型能检测出文本或者
图片中的不当内容,并通知人工监督员采取行动。这项原本用于GitHubCopilot等微软服务的功能,将内置于AzureOpenAI企业版服务开放给第三方开发者,从而以负责任的方式生成智能内容。
微软还发布了全新AzureMachineLearning工具,其中包括ResponsibleAIdashboardsupportfortextandimagedata。在公众预览版中,该功能能够让开发者在构建、训练或评估模型阶段,评估使用非结构化数据来构建的大模型。这将有助于开发者在部署模型之前发现模型错误、公平性问题以及模型解释,从而实现更具公平性的高性能计算机视觉和自然语言处理(NLP)模型。
AzureMachineLearningprom
ptflow,让开发者可以借助如SemanticKernel这样热门的开源提示词编排解决方案,高效构建提示词。在即将推出的预览版中,prom
ptflow为开发者提供了更加简便易用的提示、评估和调整大模型的方式。
开发者能够快速创建连接到各种语言模型和数据源的提示工作流,并通过真实性等方式评估工作流质量,从而根据实际情况为其选择最佳的提示。prom
ptflow同时还集成了AzureAIContentSafety,帮助开发者检测并删除其工作流中有害的内容。
此外,微软还宣布将在未来几个月内,在MicrosoftDesigner和BingImageCreator中增加全新媒体来源功能。该技术使用加密方法对AI生成的内容进行标记和签名,其中包含有关其来源的元数据,从而帮助开发者验证图像或
视频是否由AI生成。
将于7月正式商用的MicrosoftDevBox是一项Azure开发服务,旨在为开发者提供预配置、集中管理、基于项目的即用型开发盒子。DevBox在预览阶段得到了广大客户的积极反馈,在微软内部有超过9500名开发者在日常开发中使用。
MicrosoftDevBox新增多个功能来优化开发体验和提高工作效率,包括支持以代码设置的方式进行定制化,在AzureMarketplace中提供更多可供定制的预设镜像以满足不同开发需求,此外开发者还可通过新上线的门户AzureDeploymentEnvironments管理和定制开发环境。
GitHubAdvancedSecurityforAzureDevOps面向所有用户开启公共预览,这项安全服务集成于AzureRepos和AzurePipelines,可提供与GitHub企业版相同的秘密扫描、依赖性扫描和CodeQL代码扫描等功能,帮助开发者防范和消除潜在安全隐患。
微软致力于与英伟达(NVIDIA)等合作伙伴通力合作,共同合作加速发展由人工智能而驱动的未来,让组织能够设计、开发、部署和管理基于Azure开发且具有规模和安全性的应用程序,最终使客户受益。
通过整合了Azure机器学习(MachineLearning)的英伟达AIEnterpriseIntegration,英伟达将加速发展可供企业使用的生成式AI。Azure中独有的OmniverseCloud,能够帮助组织将数据聚合到大量高性能模型中,连接其特定领域的软件工具,并实现跨多地点位置的多用户实时协作。
英伟达GPU将借助ONNXRuntime和Olive工具链,无需精通硬件知识,即可支持加速AI模型应用。
MicrosoftFabric构建统一的一站式分析平台
在这个由智能创新重新定义的新时代,从不同设备、应用、交互中源源不断产生的各种数据变得比以往更加重要。特别是对于企业和组织而言,获得真正有用的智能、管理有序、稳定干净的数据流以及一个高度统一的数据分析系统是必不可少的。
全新发布的MicrosoftFabric是一个统一的一站式分析平台,其整合了数据工程、数据整合、数据存储、数据科学、实时分析、应用可观测性和商业智能服务,所有这些都连接到一个被称为OneLake的数据仓储中。
MicrosoftFabric全面融入AzureOpenAI服务,在各个数据相关的操作体验中都提供了“智能副驾(Copilot)”,因此不同技术水平的用户,都能通过自然语言对话的方式进行自己所需的操作并获取直观洞察,如创建数据流和数据管道、生成代码和完整函数、构建机器学习模型,或者是将结果以可视化的形式表现出来。用户甚至可以把他们用AzureOpenAI模型和自有数据相结合所打造的独特的数据体验,整合成一个新的插件公开发布。
Windows开启智能开发新体验
Windows智能副驾是个人电脑平台上的第一个中央化人工智能助理,借助各种集成的第一方和第三方插件,用户将不再需要花时间和精力去寻找不同的应用并在各种软件之间来回切换,而是真正专注于如何展现自己的创意、完成复杂的工作,或者是进行交流协作。
Windows智能副驾能够以边栏的形式浮于不同应用和窗口之上,不但支持复制粘贴、截屏剪切等日常操作,还可以随时以自然语言对话的形式完成搜索及各种复杂操作。Windows智能副驾预览版将从6月开始在Windows11上陆续推出。
过去一年Windows11加速普及,甚至连使用Windows11设备的开发者月活数都达到了24%的年度增长。现已开启预览的DevHome将为Windows开发者打造更加完善的开发环境和开发体验。DevHome可以轻松连接并设置GitHub与MicrosoftDevBox、GitHubCodespaces等云端开发环境,同时提供了开源并可充分拓展的开发工具,包括可定制的仪表板和各种工具来充分优化开发体验。
Edge浏览器支持Microsoft365智能副驾插件,并更新了更符合Windows11风格的外观设计。EdgeforBusiness商用浏览器支持更多企业管理、安全、隐私和生产力功能,以更好地满足混合办公的需求,面向托管设备的版本现已开启预览,非托管版本将在未来几个月内推出。此外,支持多用户协同工作的EdgeWorkspaces也将在几个月内结束预览,推出正式商用版本。