Microsoft Fabric 中有什么新增功能?

本页将持续更新 Microsoft Fabric 的最新回顾。

不熟悉 Microsoft Fabric?

本部分包含面向 Microsoft Fabric 新用户的文章和公告。

Month 功能 了解详细信息
2024 年 5 月 Power BI:订阅、许可证和试用版 有关 Power BI 实现规划和规划 Power BI 和 Fabric 的订阅、许可证和试用版的关键注意事项的信息。
2024 年 5 月 注册 Microsoft Build:Microsoft Fabric 云技能挑战赛 从 2024 年 5 月 21 日起,注册 Microsoft Build:Microsoft Fabric 云技能挑战赛,并准备考试 DP-600 和上级技能和提升 Fabric 分析工程师助理认证的技能。
2024 年 3 月 Microsoft Fabric 现在符合 HIPAA 我们很高兴地宣布,我们面向企业推出的一站式分析解决方案 Microsoft Fabric 已获得新的 HIPAA 和 ISO 27017、ISO 27018、ISO 27001、ISO 27701 认证
2024 年 3 月 考试 DP-600 现已推出 考试 DP-600 现已推出,并推出了 Microsoft Certified:Fabric 分析工程师助理认证Fabric 职业中心可帮助你快速学习并取得认证。
2024 年 3 月 Fabric Copilot 定价:端到端示例 Fabric 中的 Copilot 将于 2024 年 3 月 1 日开始计费,作为现有 Power BI Premium 或 Fabric 容量的一部分。 了解如何计算 Fabric Copilot 使用量
2024 年 1 月 面向数据科学和数据工程的 Microsoft Fabric Copilot 面向数据科学和数据工程的 Copilot 现已在全球推出。 面向数据科学和数据工程的 Copilot 有哪些作用?
2023 年 12 月 Fabric 平台安全基础知识 从整体出发详细了解系统工作中的主要安全流来介绍 Microsoft Fabric 安全体系结构
2023 年 11 月 面向现有 Synapse 用户的 Microsoft Fabric 解释 重点介绍使用 Synapse 当前平台即服务 (PaaS) 版本的客户可以期待的功能。 我们将解释 Fabric 正式版对当前投资的意义(剧透:我们完全支持你的投资),以及如何思考未来。

当前处于预览状态的功能

下表列出了当前作为预览版提供的 Microsoft Fabric 功能。 预览版功能按字母顺序排序。

注意

当前为预览版的功能是根据补充使用条款提供的,请查看适用于 beta 版、预览版或其他尚未正式发布的 Azure 功能的法律条款。 Microsoft Fabric 提供预览版,让你有机会在功能正式发布 (GA) 之前对其进行评估并与产品组分享反馈

功能 了解详细信息
用于 Fabric 数据管道的 CI/CD 预览版 Git 集成以及与内置部署管道到数据工厂数据管道的集成现已提供预览版。 有关详细信息,请参阅数据工厂向 Fabric 数据管道添加 CI/CD
Code-First AutoML 预览版 在 Synapse 数据科学中,新的 AutoML 功能可实现机器学习工作流自动化。 AutoML(或自动化机器学习)是一组技术和工具,可针对任何给定数据和任务类型自动训练和优化机器学习模型。
Code-First 超参数优化预览版 在 Synapse 数据科学中,FLAML 现已集成用于超参数优化,目前是预览功能。 Fabric 的 flaml.tune 功能简化了此过程,提供了一种经济高效且有效的超参数优化方法。
Fabric 中的 Copilot(预览版)在全球范围推出 Fabric 中的 Copilot(预览版)面向所有客户推出,包括 Copilot for Power BI数据工厂以及数据科学和数据工程。 有关更多信息,请参阅 Fabric 中的 Copilot 概述
Data Activator 预览版 我们很高兴地宣布,Data Activator 现提供预览版,并且已为所有现有的 Microsoft Fabric 用户启用
数据工厂预览版中的数据工作流 数据工厂中的数据工作流(预览版)由 Apache Airflow 提供支持,为定义为有向无环图 (DAG) 的、基于 Python 的数据流程提供无缝创作、计划和监视体验。 有关详细信息,请参阅快速入门:创建数据工作流
适用于 Spark 数据帧的数据整理器(预览版) Data Wrangler 现在支持 Spark DataFrame(预览版),用户现在除了可以使用 Data Wrangler 编辑 pandas DataFrame 外,还可以使用它来编辑 Spark DataFrame
OneLake 中的域(预览版) OneLake 中的域有助将数据组织为逻辑数据网格,从而方便联合身份治理并根据业务需求进行优化。 现在可以为用户创建子域、默认域,并在域之间移动工作区。 有关详细信息,请参阅 Fabric 域
Eventhouse 概述:使用 Microsoft Fabric 处理实时数据 Eventhouse(预览版)是托管多个 KQL 数据库的动态工作区,是 Fabric 实时智能的一部分。 Eventhouse 提供了管理和分析大量实时数据的可靠解决方案。 使用入门指南来创建和管理 Eventhouse
外部数据共享简介(预览版) 外部数据共享(预览版)是一项新功能,使 Fabric 用户可与另一 Fabric 租户中的用户共享其 Fabric 租户中的数据。
Fabric Runtime 1.3(Apache Spark 3.5、Delta Lake 3.1、R 4.3.3、Python 3.11)(预览版) Fabric Runtime 1.3 中的增强功能包括合并 Delta Lake 3.1、与 Python 3.11 的兼容性、支持初学者池、与环境和库管理功能的集成。 此外,Fabric Runtime 现在通过支持 R 语言和集成 Copilot 来丰富数据科学体验。
Fabric 工作负载开发工具包(预览版) Microsoft Fabric 工作负载开发工具包可扩展到其他工作负载,并提供强大的开发人员工具包,用于使用前端 SDK 和后端 REST API 设计、开发以及与 Microsoft Fabric 互操作。
工作区中的文件夹预览版 作为工作区中的组织单位,文件夹通过提供用于组织和管理项的分层结构来解决此难点。 有关详细信息,请参阅在工作区内创建文件夹(预览版)
Microsoft Fabric 中的 GraphQL API(预览版) 新的 API for GraphQL 是一个数据访问层,允许我们在 Fabric 中快速高效地查询多个数据源。 有关详细信息,请参阅什么是 Microsoft Fabric API for GraphQL?
使用数据工厂中的数据管道将本地数据集成到 Microsoft Fabric 中(预览版) 你可以使用本地数据网关(预览版)连接到将数据流和数据管道与数据工厂搭配使用的本地数据源。 有关详细信息,请参阅如何在 Microsoft Fabric 的数据工厂中访问本地数据源
Kusto 缓存消耗预览版 Kusto 缓存消耗预览版意味着你将看到来自 KQL 数据库和 Eventhouse 项目的 OneLake 缓存数据存储计量的计费消耗量。 有关详细信息,请参阅 KQL 数据库消耗
对 git 集成和部署管道的湖屋支持(预览版) 湖屋现与 Microsoft Fabric 中的生命周期管理功能集成,可在产品的整个生命周期内实现所有开发团队成员之间的标准化协作。 生命周期管理会持续向多个环境提供功能和 bug 修复,从而促进有效的产品版本控制和发布过程。
托管专用终结点(预览版) 借助 Microsoft Fabric 托管专用终结点(预览版),可以通过托管虚拟网络安全连接到防火墙后面的数据源,或者无法从公共互联网访问的数据源。
托管虚拟网络(预览) 托管虚拟网络是 Microsoft Fabric 为每个 Fabric 工作区创建和管理的虚拟网络。
Microsoft 365 连接器现在支持将数据引入湖屋(预览版) Microsoft 365 连接器现在支持将数据引入湖屋表
Microsoft Fabric 管理员 API Fabric 管理员 API 旨在简化管理任务。 Fabric 管理员 API 的初始设置旨在简化工作区、Fabric 项目和用户访问详细信息的发现。
Microsoft Fabric 中的镜像(预览版) 借助 Fabric 中的镜像,可以轻松地将数据库引入 Microsoft Fabric 中的 OneLake,以便获得无缝的零 ETL、有关数据的准实时见解,以及解锁仓库、BI、AI 等。 有关详细信息,请参阅Fabric 中的镜像是什么?
笔记本 Git 集成预览版 Fabric 笔记本现提供 Git 集成,用于通过 Azure DevOps 进行源代码管理。 它允许用户利用 Fabric Git 函数和 Azure DevOps 轻松控制笔记本代码版本和管理 git 分支。
部署管道中的笔记本(预览版) 现在,还可以使用笔记本跨不同环境(例如开发、测试和生产)部署代码。 还可以使用部署规则来自定义部署笔记本时的行为,例如更改笔记本的默认湖屋。 开始使用部署管道,笔记本将自动在部署内容中显示。
OneLake 数据访问角色 适用于湖屋的 OneLake 数据访问角色为预览版。 可以通过新的文件夹安全用户界面轻松更新角色权限和用户/组分配
OneLake 快捷方式 API 借助新推出的 OneLake 快捷方式 REST API,将能以编程方式创建和管理快捷方式,目前此功能为预览版。 现在能够以编程方式创建、读取和删除 OneLake 快捷方式。 相关示例请参阅使用 OneLake 快捷方式 REST API
S3 兼容数据源的 OneLake 快捷方式预览版 S3 兼容数据源的 OneLake 快捷方式现已推出预览版创建 Amazon S3 兼容的快捷方式,以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。
Google Cloud Storage 的 OneLake快捷方式预览版 Google Cloud Storage 的 OneLake快捷方式现已推出预览版创建 Google Cloud Storage 快捷方式,以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。
Fabric 中预生成的 Azure AI 服务预览版 Fabric 中预生成的 AI 服务预览版Azure AI 服务(以前称为 Azure 认知服务)集成。 预生成的 Azure AI 服务 允许使用预生成的 AI 模型轻松增强数据,而无需任何先决条件。 目前,预生成的 AI 服务处于预览状态,包含对 Microsoft Azure OpenAI 服务Azure AI 语言Azure AI 翻译的支持。
Microsoft Fabric 专用终结点(预览版) 借助 Microsoft Fabric 托管专用终结点(预览版),将可以安全连接到防火墙后面的数据源,或者无法从公共互联网访问的数据源。 有关详细信息,请参阅推出 Microsoft Fabric 托管专用终结点(预览版)
Microsoft Fabric 对专用链接的支持(预览版) 适用于 Microsoft Fabric 的 Azure 专用链接通过提供网络隔离并在入站网络流量上应用需要的控制,从而保护对 Microsoft Fabric 中敏感数据的访问。 有关详细信息,请参阅宣布 Azure 专用链接支持 Microsoft Fabric(预览版)
适用于 Fabric 数据工厂管道的 REST API 预览版 适用于 Fabric 数据工厂管道的 REST API 现在推出预览版。 适用于数据工厂管道的 REST API 使你能够扩展 Fabric 中的内置功能,以创建、读取、更新、删除和列出管道。
Splunk 加载项预览版 适用于 Splunk 的 Microsoft Fabric 加载项允许用户使用 Kusto python SDK 将来自 Splunk 平台的日志引入 Fabric KQL DB。
Microsoft Fabric 中的任务流(预览版) Microsoft Fabric 中任务流的预览版已为所有 Microsoft Fabric 用户启用。 凭借 Fabric 任务流,在设计数据项目时,不再需要使用白板来绘制项目的不同部分及其相互关系。 相反,可以使用任务流构建此关键信息并将其引入项目本身。
受信任工作区访问权限(预览版) 。 有关详细信息,请参阅受信任的工作区访问(预览版)利用工作区标识在 Fabric 和存储帐户之间建立安全无缝的连接。 现在,可以使用 Fabric 数据管道中受信任的工作区访问(预览版)创建数据管道,以访问启用了防火墙的 Azure Data Lake Storage Gen2 (ADLS Gen2) 帐户。 借助受信任的工作区访问(预览版),还可以从 Fabric 中的 OneLake 快捷方式安全且无缝地访问 ADLS Gen2 存储帐户
更新 KQL 数据库中的记录(预览版) update 命令现作为预览功能提供。 详细了解如何更新 Kusto 数据库中的记录
仓库还原点和就地还原 现在可以创建还原点并将仓库就地还原到某个过去的时间点。 就地还原是数据仓库恢复的重要组成部分,它通过替换或覆盖创建还原点的现有数据仓库,将数据仓库还原到之前已知的可靠状态。
仓库时间旅行(预览版) Microsoft Fabric 中的仓库提供了在语句级别查询过去存在的历史数据的功能,目前处于预览状态。 从特定时间戳查询数据的能力在数据仓库行业被称为时间旅行

正式版功能

下表列出了在过去六个月内已从预览版过渡到正式版 (GA) 的 Microsoft Fabric 功能。

功能 了解详细信息
2024 年 5 月 数据工程:环境 GA Fabric 中的环境现已正式发布。 “环境”是一个集中项,可用于在一个位置配置运行 Spark 作业所需的所有设置。 在 GA 中,我们添加了对 Git、部署管道、REST API、资源文件夹和共享的支持。
2024 年 5 月 Microsoft Fabric Core REST API Microsoft Fabric Core API 现已正式发布。 Fabric 用户 API 是企业和合作伙伴使用 Microsoft Fabric 的主要推动者,因为它们实现了与服务的端到端全自动交互、使 Microsoft Fabric 能够集成到外部 Web 应用程序中,且通常使客户和合作伙伴能够更轻松地缩放其解决方案。
2024 年 5 月 Power Query Dataflow Gen2 SDK for VS Code GA Power Query SDK 现已在 Visual Studio Code 中正式发布! 要开始使用 Visual Studio Code 中的 Power Query SDK,请从 Visual Studio Code 市场进行安装。
2024 年 4 月 语义链接 GA 语义链接功能现已正式发布! 现在,包附带默认 VHD,让你可以立即在 Fabric 中使用语义链接,而无需安装任何 pip。
2024 年 3 月 Dataflow Gen2 中的 VNet 网关 针对 Fabric 中 Dataflows Gen2 的 VNet 数据网关支持现已正式发布。 VNet 数据网关可帮助从 Fabric 第 2 代数据流连接到 VNet 中的 Azure 数据服务,而无需本地数据网关。

Community

本部分总结了 Microsoft Fabric 社区为潜在和现有的影响者和 MVP 提供的新机会。

功能 了解详细信息
2024 年 5 月 宣布召开 Microsoft Fabric 社区大会(欧洲) 宣布于 2024 年 9 月 24 日召开 Microsoft Fabric 社区大会(欧洲)
2024 年 5 月 注册 Microsoft Build:Microsoft Fabric 云技能挑战赛 从 2024 年 5 月 21 日起,注册 Microsoft Build:Microsoft Fabric 云技能挑战赛,并准备考试 DP-600 和上级技能和提升 Fabric 分析工程师助理认证的技能。
2024 年 3 月 获得免费的 Microsoft Fabric 认证考试 完成 Fabric AI 技能挑战赛,即可获得免费认证考试资格。 Fabric 分析工程师 AI 技能挑战赛将持续到 2024 年 4 月 19 日。
2024 年 3 月 考试 DP-600 现已推出 考试 DP-600 现已推出,并推出了 Microsoft Certified:Fabric 分析工程师助理认证Fabric 职业中心可帮助你快速学习并取得认证。
2024 年 3 月 Microsoft Fabric 社区大会 欢迎参加我们于 2024 年 3 月 26 日至 28 日在拉斯维加斯举行的首届年度 Microsoft Fabric 社区大会。 亲眼见证 Microsoft Fabric 和 Microsoft 的其他数据和 AI 产品如何助力你的组织迎接 AI 时代。 使用代码 MSCUST立即注册,享受专属折扣!
2024 年 3 月 宣布“Hack Together:Microsoft Fabric 全球 AI 黑客”的优胜者 我们收到了全球 100 多位参赛者提交的 50 个编程马拉松项目。 评委们对项目提交的广度、深度和整体质量评价极高。 认识“Fabric 全球 AI 黑客”大赛的优胜者!
2024 年 1 月 宣布推出 Fabric 职业中心 全新 Fabric 职业中心是你专业成长的一站式商店! 我们创建了一个全面的学习之旅,提供最好的免费点播和实时培训,并提供考试折扣。
2024 年 1 月 Hack Together:Microsoft Fabric 全球 AI 黑客 Hack Together 是一个全球在线编程马拉松,从 2024 年 2 月 15 日至 3 月 4 日运行。 加入 Hack Together: The Microsoft Fabric Global AI Hack,这是一个虚拟活动,可以在其中学习、试验并破解 Microsoft Fabric 中新的 CopilotAI 功能! 有关更多信息,请参阅 Microsoft Fabric 全球 AI 黑客
2023 年 12 月 Microsoft Fabric 社区大会 欢迎参加我们于 2024 年 3 月 26 日至 28 日在拉斯维加斯举行的首届年度 Microsoft Fabric 社区大会。 亲眼见证 Microsoft Fabric 和 Microsoft 的其他数据和 AI 产品如何助力你的组织迎接 AI 时代。 立即注册,与数千位和你一样渴望分享洞见的数据创新者共同探索数据和 AI 的未来。
2023 年 12 月 Fabric 云技能挑战赛 成千上万的专业人士已经完成了 Microsoft Fabric 挑战赛,这是 Microsoft Ignite 云技能挑战赛的一部分,快来参加吧。 只需不到 8 小时的时间,即可学习如何使用 Power BI 和 Microsoft Fabric 连接、引入、存储、分析和报告数据。 完成 Microsoft Fabric 挑战赛后,可获得即将推出的:Microsoft Certified: Fabric 分析助理工程师认证。 该挑战赛将持续至 2024 年 1 月 15 日。

Power BI

Power BI Desktop 和 Power BI 服务的更新在“Power BI 有什么新功能?”中得到了汇总。

Fabric 示例和指南

本部分汇总了 Microsoft Fabric 的新指导和示例项目资源。

Month 功能 了解详细信息
2024 年 3 月 使用负责任 AI 保护 Microsoft Fabric Lakehouse 中的 PII 信息 在 Microsoft Fabric 中使用 Azure AI 识别和提取 个人身份信息 (PII),一种可能方法是使用 Azure AI 语言检测文本数据中的 PII 实体并进行分类,例如姓名、地址、电子邮件地址、电话号码、社会保障号码等。
2024 年 2 月 在 Microsoft Fabric 中使用 OneLake 构建常见的数据体系结构 详细了解常见的数据体系结构模式,如何使用 Microsoft Fabric 进行保护,以及有关 OneLake 安全性的基本构建基块。
2024 年 1 月 新的 Fabric 认证和 Fabric 职业中心 Microsoft 认证考试 DP-600:使用 Microsoft Fabric 实现分析解决方案的测试版在有限时间内可用。 通过此考试可获得 Microsoft 认证:Fabric 分析工程师助理认证。
2023 年 12 月 使用 Azure 存储资源管理器处理 OneLake 如果要使用直接与 Windows 文件资源管理器集成的应用程序,请查看 OneLake 文件资源管理器。 但如果你习惯使用 Azure 存储资源管理器执行数据管理任务,则可以继续使用 OneLake 的功能及其主要优势。

Microsoft Fabric 中的 Microsoft Copilot

通过预览版 Copilot 和其他生成式 AI 功能,Microsoft Fabric 带来了一种转换和分析数据、生成见解以及创建可视化效果和报表的新方法。 有关详细信息,请参阅 Fabric 中的 Copilot

注意

从 2024 年 5 月 20 日起,Microsoft Fabric 中的 Copilot 为所有租户默认启用。 此新的默认激活意味着将自动为尚未启用该设置的租户启用 AI 功能(如 Copilot)。

功能 了解详细信息
2024 年 5 月 AI 和 Copilot 设置将自动委派给容量管理员 租户管理门户中引入了一个新选项,用于将 AI 和 Copilot 功能的启用委托给容量管理员。 此 AI 和 Copilot 设置将自动委派给容量管理员,且租户管理员将无法关闭该委派。
2024 年 5 月 Copilot用于数据仓库 Copilot 数据仓库(预览版)现已推出,提供 Copilot 聊天窗格快速操作代码补全
2024 年 2 月 Fabric 改变游戏规则:在 Microsoft Fabric 中使用 Copilot 出奇简单 博客文章介绍了如何简单启用 Copilot,它是一种生成式 AI,带来了转换和分析数据、生成见解以及在 Microsoft Fabric 中创建可视化效果和报表的新方法。
2024 年 2 月 Microsoft Fabric 中面向数据工厂的 Copilot Microsoft Fabric 中面向数据工厂的 Copilot 现在以预览版提供,并包含在 Dataflow Gen2 体验中。 有关详细信息,请参阅面向数据工厂的 Copilot
2024 年 1 月 面向数据科学和数据工程的 Microsoft Fabric Copilot 面向数据科学和数据工程的 Copilot 现已在全球推出。 面向数据科学和数据工程的 Copilot 有哪些作用?
2024 年 1 月 如何为所有人启用 Fabric 中的 Copilot 请按照本指南为组织中的每个人启用 Fabric 中的 Copilot(预览版)。 有关详细信息,请参阅适用于 Microsoft Fabric 的 Copilot 概述(预览版)
2024 年 1 月 Fabric 中的 Copilot(预览版)在全球范围推出 Fabric 中的 Copilot(预览版)面向所有客户推出,包括 Copilot for Power BI数据工厂以及数据科学和数据工程。 有关更多信息,请参阅 Fabric 中的 Copilot 概述

Microsoft Fabric 中的数据工厂

本部分汇总了 Microsoft Fabric 中的数据工厂的最新特性和功能。 通过数据工厂社区论坛关注问题和反馈。

Month 功能 了解详细信息
2024 年 5 月 Microsoft Fabric 中的 API for GraphQL(预览版) 新的 API for GraphQL 是一个数据访问层,允许我们在 Fabric 中快速高效地查询多个数据源。 有关详细信息,请参阅什么是 Microsoft Fabric API for GraphQL?
2024 年 5 月 Power Query Dataflow Gen2 SDK for VS Code GA Power Query SDK 现已在 Visual Studio Code 中正式发布! 要开始使用 Visual Studio Code 中的 Power Query SDK,请从 Visual Studio Code 市场进行安装。
2024 年 5 月 刷新“刷新历史记录”对话框 “刷新历史记录详细信息”弹出窗口现在有“刷新”按钮。
2024 年 5 月 新的和更新的认证连接器 Power Query SDKPower Query 连接器认证过程推出了四个新的和更新的 Power Query 连接器
2024 年 5 月 数据工厂预览版中的数据工作流 数据工厂中的数据工作流(预览版)由 Apache Airflow 提供支持,为定义为有向无环图 (DAG) 的、基于 Python 的数据流程提供无缝创作、计划和监视体验。 有关详细信息,请参阅快速入门:创建数据工作流
2024 年 5 月 在 Fabric 数据管道(预览版)中访问受信任工作区 利用工作区标识在 Fabric 和存储帐户之间建立安全无缝的连接。 现在,可以使用 Fabric 数据管道中受信任的工作区访问(预览版)创建数据管道,以访问启用了防火墙的 Azure Data Lake Storage Gen2 (ADLS Gen2) 帐户。
2024 年 5 月 用于数据管道的 Blob 存储事件触发器(预览版) Fabric 数据工厂数据管道 中的 Azure Blob 存储事件触发器(预览版)使用 Fabric Reflex 警报和事件流来创建 Azure 存储帐户的事件订阅。
2024 年 5 月 数据管道的 Azure HDInsight 活动 Azure HDInsight 活动允许执行 Hive 查询、调用 MapReduce 程序、执行 Pig 查询、执行 Spark 程序或 Hadoop Stream 程序。
2024 年 5 月 复制数据助手 在管道登陆页中选择“复制数据助手”或在“复制数据”下拉列表中选择“使用复制助手”,开始使用新式获取数据体验。 可以轻松连接到最近使用的 Fabric 项,并提供从示例数据和新连接读取源的直观方法。
2024 年 5 月 复制数据时编辑目的地表列类型 为许多数据存储复制新的或自动创建的目的地表时,可以编辑目的地表列类型。 有关详细信息,请参阅在复制活动中配置 Lakehouse
2024 年 4 月 Spark 作业定义活动 使用新的 Spark 作业定义活动,将可以在管道中运行 Spark 作业定义。
2024 年 4 月 ADF 复制活动中的 Fabric 仓库 现在可以从 Azure 数据工厂/Synapse 管道连接到 Fabric 仓库。 在复制活动、查找活动、存储过程活动、脚本活动和获取元数据活动中创建新源或接收器目的地时,可以找到此新连接器。
2024 年 4 月 增加了对编辑 Fabric 仓库和其他 SQL 数据存储中目标表的列类型的支持 通过数据管道将数据从任何受支持的数据源移动到 Fabric 仓库或其他 SQL 数据存储(SQL Server、Azure SQL 数据库、Azure SQL 托管实例 或 Azure Synapse Analytics)时,用户现在可以指定每个列的数据类型
2024 年 4 月 改进了将数据写入 SFTP 时的性能 改进了 SFTP 连接器的性能,在写入 SFTP 作为目的地时提供更好的性能。
2024 年 4 月 本地数据网关和 VNET 数据网关对服务主体名称身份验证类型的支持 本地数据网关和 VNET 数据网关现在支持 Azure 服务主体 (SPN)。 了解如何在 Azure Data Lake Storage、Dataverse、Azure SQL 数据库、Web 连接器等中利用服务主体身份验证类型
2024 年 4 月 新的认证连接器和更新 Power Query SDKPower Query 连接器认证过程推出了 11 个新的和更新的自定义 Power Query 连接器
2024 年 4 月 全新表达式生成器体验 Fabric 数据工厂管道中脚本活动的全新体验,可更轻松地使用管道表达式语言生成表达式。
2024 年 4 月 数据工厂将每个管道的最大活动数增加到 80 我们已将管道中可以定义的活动数限制从 40 提升到了 80。
2024 年 4 月 适用于 Fabric 数据工厂管道的 REST API 预览版 适用于 Fabric 数据工厂管道的 REST API 现在推出预览版。 适用于数据工厂管道的 REST API 使你能够扩展 Fabric 中的内置功能,以创建、读取、更新、删除和列出管道。
2024 年 3 月 Dataflows Gen2 中的快速复制 借助快速复制,可以使用数据流的简单体验以及管道复制活动的可缩放后端引入 TB 数据。
2024 年 3 月 使用数据工厂中的数据管道将本地数据集成到 Microsoft Fabric 中(预览版) 借助本地数据网关(预览版),客户现在可以通过数据工厂使用数据流和数据管道连接到本地数据源。 有关详细信息,请参阅如何在 Microsoft Fabric 的数据工厂中访问本地数据源
2024 年 3 月 用于 Fabric 数据管道的 CI/CD 预览版 Git 集成以及与内置部署管道到数据工厂数据管道的集成现已提供预览版。 有关详细信息,请参阅数据工厂向 Fabric 数据管道添加 CI/CD
2024 年 3 月 使用“获取数据”功能浏览 Azure 资源 了解如何使用“获取数据”中的“浏览 Azure”功能浏览和连接到所有 Azure 资源。 可以首先浏览 Azure 资源,然后轻松连接到 Synapse、blob 存储或 ADLS Gen2 资源。
2024 年 3 月 Dataflow Gen2 对 VNet 网关的支持现已正式发布 针对 Fabric 中 Dataflows Gen2 的 VNet 数据网关支持现已正式发布。 VNet 数据网关可帮助从 Fabric 第 2 代数据流连接到 VNet 中的 Azure 数据服务,而无需本地数据网关。
2024 年 3 月 数据流中的隐私级别支持 现在可以在 Dataflow Gen2 中为连接设置隐私级别。 隐私级别对于正确配置至关重要,以便只有授权用户才能查看敏感数据。
2024 年 3 月 通过 Fabric 数据工厂数据管道将数据复制到 S3 兼容存储 Fabric 数据工厂数据管道现在提供将数据复制到 S3 兼容存储的功能! 可以使用数据管道中的复制助手和复制活动来完成此数据移动。
2024 年 2 月 Dataflows Gen2 数据目的地和托管设置 Dataflows Gen2 的新功能包括目的地、托管设置和高级主题
2024 年 2 月 Microsoft Fabric 中面向数据工厂的 Copilot Microsoft Fabric 中面向数据工厂的 Copilot 现在以预览版提供,并包含在 Dataflow Gen2 体验中。 有关详细信息,请参阅面向数据工厂的 Copilot
2024 年 2 月 认证连接器更新 借助 Power Query SDK,可以为 Power BI 和 Dataflow 创建新的连接器。 新的认证 Power Query 连接器已列入Power Query 中的认证连接器列表。
2024 年 2 月 数据管道连接器更新 数据工厂数据管道中有新的连接器可用,包括 Amazon S3 兼容数据源和 Google Cloud Storage 数据源。 有关详细信息,请参阅 Microsoft Fabric 中的数据管道连接器
2023 年 12 月 使用 Azure 数据工厂 (ADF) 来读取和写入 Fabric 湖屋中的数据 现在可以使用 ADF(Azure 数据工厂)来读取和写入 Microsoft Fabric 湖屋中的数据。 借助复制活动或映射数据流,可以使用 ADF 或 Synapse Analytics(目前为预览版)读取、写入、转换和处理数据。
2023 年 12 月 设置活动状态,方便管道调试 在 Fabric 数据工厂数据管道中,现在可以将活动的状态设置为非活动状态,这样即使配置不完整或无效,也可以保存管道。 将其视为管道代码的“注释禁止”部分。
2023 年 12 月 管道编辑器中的连接编辑 现在可以在设计管道时编辑现有数据连接,而无需离开管道编辑器界面! 设置连接时,只需选择“编辑”,即会显示一个弹出窗口。
2023 年 12 月 Fabric 数据工厂中的 Azure Databricks 笔记本执行 现在,可以使用 Fabric 数据工厂创建功能强大的数据管道工作流,包括 Azure Databricks 群集中的笔记本执行。 将 Databricks 活动添加到管道、指向现有群集或请求新群集,数据工厂将自动执行 Notebook 代码。

Microsoft Fabric 中的数据工厂示例和指南

Month 功能 了解详细信息
2024 年 5 月 语义模型刷新活动 了解如何在数据管道中使用备受关注的语义模型刷新活动,以及现在如何创建整个管道生命周期内的完整端到端解决方案。
2024 年 2 月 Fabric 数据管道 - 高级计划技巧 此博客系列介绍了 Microsoft Fabric 数据管道中的高级计划技巧
2024 年 1 月 使用数据工厂自动化构造数据仓库查询和命令 在 Fabric 数据工厂中,可以通过多种方式查询数据、检索数据,并使用很容易实现自动化的管道活动从仓库执行命令
2024 年 1 月 使用 Fabric 数据工厂数据管道来协调基于笔记本的工作流 利用数据管道在 Fabric 中使用数据工厂生成 Fabric Spark 笔记本工作流时的指南和良好做法。
2023 年 12 月 使用 DeltaLake.Table M 函数从 Delta Lake 表读取数据 DeltaLake.TablePower Query 的 M 语言中用于从 Delta Lake 表读取数据的新函数。 此函数现已在 Power BI Desktop 的 Power Query 以及第一代和第二代数据流中提供,并取代了使用社区开发的解决方案的需求。

Microsoft Fabric 中的 Synapse 数据工程

本节总结了 Microsoft Fabric 中的数据工程工作负载的最新特性和功能。

功能 了解详细信息
2024 年 5 月 Runtime 1.3(Apache Spark 3.5、Delta Lake 3.1、R 4.3.3、Python 3.11)(预览版) Fabric Runtime 1.3 中的增强功能包括合并 Delta Lake 3.1、与 Python 3.11 的兼容性、支持初学者池、与环境和库管理功能的集成。 此外,Fabric Runtime 现在通过支持 R 语言和集成 Copilot 来丰富数据科学体验。
2024 年 5 月 Spark 运行系列分析 使用 Spark 监视运行系列分析功能,可以分析管道 Spark 活动定期运行实例的运行持续时间趋势和性能比较,以及来自同一笔记本或 Spark 作业定义的重复 Spark 运行活动。
2024 年 5 月 在笔记本中评论 @tagging 笔记本现在支持在评论中标记他人的功能,就像使用 Office 产品的熟悉功能一样。
2024 年 5 月 笔记本功能区升级 Fabric 笔记本功能区中的新功能包括“主页”选项卡上的“会话连接”控件和 Data Wrangler 按钮、“高并发会话”、新的“查看会话信息”控件(包括会话超时)。
2024 年 5 月 数据工程:环境 GA Fabric 中的环境现已正式发布。 “环境”是一个集中项,可用于在一个位置配置运行 Spark 作业所需的所有设置。 在 GA 中,我们添加了对 Git、部署管道、REST API、资源文件夹和共享的支持。
2024 年 5 月 工作区数据工程/科学的公共 API Fabric 数据工程/科学工作区设置的 REST API 支持允许用户创建/管理其 Spark 计算、选择默认运行时/默认环境、启用或禁用高并发模式或 ML 自动记录。
2024 年 4 月 Fabric Spark 乐观作业许可 Fabric Spark 乐观作业许可可减少出现限制错误(“HTTP 430:超出 Spark 容量限制”响应)的频率,并提升客户的作业许可体验,尤其是在高峰使用时段。
2024 年 4 月 对入门池的单节点支持 借助入门池对单节点的支持功能,可以将入门池设置为最多一个节点,并获得超快的 Spark 会话启动时间。
2024 年 4 月 适用于 Synapse VS Code 的容器映像 为了简化开发过程,我们发布了适用于 Synapse VS Code 的容器映像,其中包含该扩展所需的所有依赖项。
2024 年 4 月 Git 与 Spark 作业定义集成 借助 Git 与 Spark 作业定义的集成,可以将 Spark 作业定义的更改签入包含 Spark 作业源代码和其他项属性的 Git 存储库。
2024 年 4 月 全新改进的笔记本中的对象资源管理器体验 新的对象资源管理器体验提高了资源管理器中数据源的灵活性和可发现性,此外还提高了资源文件夹的可发现性。
2024 年 4 月 在笔记本中 %Run 脚本 现在可以像 Jupyter Notebook %run 命令一样,使用 %run magic 命令在笔记本资源文件夹中运行 Python 脚本和 SQL 脚本
2024 年 4 月 S3 兼容数据源的 OneLake 快捷方式预览版 S3 兼容数据源的 OneLake 快捷方式现已推出预览版创建 Amazon S3 兼容的快捷方式,以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。
2024 年 4 月 Google Cloud Storage 的 OneLake快捷方式预览版 Google Cloud Storage 的 OneLake快捷方式现已推出预览版创建 Google Cloud Storage 快捷方式,以通过单个统一的命名空间连接到现有数据,而无需复制或移动数据。
2024 年 4 月 OneLake 数据访问角色 适用于湖屋的 OneLake 数据访问角色为预览版。 可以通过新的文件夹安全用户界面轻松更新角色权限和用户/组分配
2024 年 3 月 “加载到表”的新验证增强功能 “加载到表”功能的新验证增强功能有助于缓解任何验证问题,并使数据加载体验更流畅、更快。
2024 年 3 月 笔记本作业队列 现在,借助笔记本作业的作业队列,管道或作业计划程序触发的作业将添加到队列中,并在容量释放时自动重试。 有关详细信息,请参阅 Microsoft Fabric Spark 中的作业队列
2024 年 3 月 Apache Spark 的自动优化查询优化功能 Apache Spark 的自动优化查询优化功能现已推出。 自动优化利用 Spark SQL 查询和机器学习算法中的历史数据自动微调配置,确保执行时间更快和提高效率。
2024 年 3 月 OneLake 文件资源管理器:通过 Excel 进行编辑 文件资源管理器的最新版本 v1.0.11.0 中,我们很高兴地宣布,你现在可以使用 Excel 直接更新文件,镜像 OneDrive 中可用的用户友好体验。
2024 年 2 月 适用于 OneLake 快捷方式的受信任工作区访问(预览版) 借助受信任的工作区访问(预览版),可以从 Fabric 中的 OneLake 快捷方式安全且无缝地访问 ADLS Gen2 存储帐户。 有关详细信息,请参阅受信任的工作区访问(预览版)
2024 年 2 月 在 OneLake 中使用 S3 快捷方式降低出口成本 了解 OneLake 的 S3 快捷方式现在如何支持缓存,从而极大地降低出口成本。 将新的启用 S3 快捷方式缓存设置与 S3 快捷方式配合使用。
2024 年 2 月 OneLake 快捷方式 API 借助新推出的 OneLake 快捷方式 REST API,将能以编程方式创建和管理快捷方式,目前此功能为预览版。 现在能够以编程方式创建、读取和删除 OneLake 快捷方式。 相关示例请参阅使用 OneLake 快捷方式 REST API
2024 年 2 月 浏览代码片段 使用新的“浏览代码片段”笔记本功能,可以轻松访问和插入常用代码片段的代码片段并支持多种语言。
2024 年 2 月 配置会话超时 笔记本现在支持为当前实时会话配置会话超时。 这有助于避免因超时而浪费资源或丢失上下文。 可以指定 Spark 会话的最大持续时间(从几分钟到数小时),还可以在会话过期之前获取警报并延长警报。
2024 年 2 月 Fabric 笔记本状态栏升级 新的 Fabric 笔记本状态栏有三个持久化的信息按钮:会话状态、保存状态和单元格选择状态。 此外,上下文功能还包括有关 git 连接状态的信息、用于延长会话超时的快捷方式和失败单元格导航器。
2024 年 1 月 面向数据科学和数据工程的 Microsoft Fabric Copilot 面向数据科学和数据工程的 Copilot 现已在全球推出。 面向数据科学和数据工程的 Copilot 有哪些作用?
2024 年 1 月 最新版本的 OneLake 文件资源管理器包含了 Excel 集成 最新版本的 OneLake 文件资源管理器 (v1.0.11.0) 提供了多项更新来增强 OneLake 体验,包括 Excel 集成
2023 年 12 月 %%configure – 在 Notebook 中个性化设置 Spark 会话 现在,可以在交互式笔记本和管道笔记本活动中使用 magic 命令 %%configure 个性化设置 Spark 会话
2023 年 12 月 笔记本中的 Rich Dataframe 预览版 Fabric 笔记本更新了 display() 函数,现命名为 Rich dataframe preview。 现在,使用 display() 预览数据帧时,可以轻松指定范围、查看 DataFrame 摘要和列统计信息、检查无效值或缺失值,以及预览长单元格。
2023 年 12 月 使用 Azure 存储资源管理器处理 OneLake 如果要使用直接与 Windows 文件资源管理器集成的应用程序,请查看 OneLake 文件资源管理器。 但如果你习惯使用 Azure 存储资源管理器执行数据管理任务,则可以继续使用 OneLake 的功能及其主要优势。

Synapse 数据工程示例和指南

Month 功能 了解详细信息
2024 年 5 月 使用数据管道从 Lakehouse 复制另一个工作区中的数据 了解如何通过数据管道在跨不同工作区的 Lakehouse 之间复制数据
2024 年 3 月 桥接 Fabric Lakehouse:实现无缝 ETL 的增量更改数据馈送 了解如何使用增量更改数据馈送在奖牌体系结构中跨不同湖屋实现无缝数据同步
2024 年 1 月 使用 Fabric 数据工厂数据管道来协调基于笔记本的工作流 利用数据管道在 Fabric 中使用数据工厂生成 Fabric Spark 笔记本工作流时的指南和良好做法。

Microsoft Fabric 中的 Synapse 数据科学

本节总结了 Microsoft Fabric 中数据科学的最新改进和功能。

功能 了解详细信息
2024 年 5 月 工作区数据工程/科学的公共 API Fabric 数据工程/科学工作区设置的 REST API 支持允许用户创建/管理其 Spark 计算、选择默认运行时/默认环境、启用或禁用高并发模式或 ML 自动记录。
2024 年 4 月 语义链接 GA 语义链接功能现已正式发布! 现在,包附带默认 VHD,让你可以立即在 Fabric 中使用语义链接,而无需安装任何 pip。
2024 年 4 月 适用于 AI 和 Copilot 的容量级别委派 租户管理员现在可以在 Fabric 中为整个组织、特定安全组或特定容量启用 AI 和 Copilot
2024 年 3 月 欧盟客户可以在不启用跨地区设置的情况下使用 AI 和 Copilot 自 3 月中旬起,欧盟客户可以在不开启跨地区设置的情况下使用 AI 和 Copilot,并且其 AI 和 Copilot 请求将在 EUDB 内进行处理
2024 年 3 月 Code-First 超参数优化预览版 FLAML 当前已集成用于超参数优化,目前是预览功能。 Fabric 的 flaml.tune 功能简化了此过程,提供了一种经济高效且有效的超参数优化方法。
2024 年 3 月 Code-First AutoML 预览版 借助新的 AutoML 功能,可以自动执行机器学习工作流,并用更少的努力获得最好的结果。 AutoML(或自动化机器学习)是一组技术和工具,可针对任何给定数据和任务类型自动训练和优化机器学习模型。
2024 年 3 月 比较嵌套运行 ML 试验的“运行列表视图”中的父和子运行引入了分层结构,允许用户在单个视图中轻松查看各种父和子运行,并与它们无缝交互以直观地比较结果。
2024 年 3 月 支持必需 MIP 标签强制实施 Fabric 中的 ML 模型和试验项现在为 Microsoft 信息保护 (MIP) 标签提供增强支持
2024 年 1 月 面向数据科学和数据工程的 Microsoft Fabric Copilot 面向数据科学和数据工程的 Copilot 现已在全球推出。 面向数据科学和数据工程的 Copilot 有哪些作用?
2023 年 12 月 语义链接更新 我们很高兴地宣布语义链接发布最新更新! 除了许多改进之外,我们还为 Power BI 工程社区添加了许多新功能,Fabric 笔记本中的这些功能可满足所有自动化需求。
2023 年 12 月 Fabric 中预生成的 Azure AI 服务预览版 Fabric 中预生成的 AI 服务预览版Azure AI 服务(以前称为 Azure 认知服务)集成。 预生成的 Azure AI 服务 允许使用预生成的 AI 模型轻松增强数据,而无需任何先决条件。 目前,预生成的 AI 服务处于预览状态,包含对 Microsoft Azure OpenAI 服务Azure AI 语言Azure AI 翻译的支持。

Synapse 数据科学示例和指南

Month 功能 了解详细信息
2024 年 3 月 新的 AI 样本 新的 AutoML 示例、模型优化和语义链接示例显示在 Microsoft Fabric 上数据科学样本的“快速教程”类别中。
2023 年 12 月 在 Azure 机器学习服务中使用 Microsoft Fabric 的 Lakehouse 数据和提示流来创建 RAG 应用程序 一个分步的 RAG 应用程序,通过 Azure 机器学习服务中的提示流运行,与 Microsoft Fabric 的 Lakehouse 数据相结合。

Microsoft Fabric 中的 Synapse 数据仓库

本部分汇总了 Microsoft Fabric 中的 Synapse Data Warehouse 的最新改进和功能。

功能 了解详细信息
2024 年 5 月 监视仓库的工具 可以使用多种工具来监视 Synapse 数据仓库的活动,包括:Synapse 数据仓库中的计费和利用率报告使用 DMV 监视连接、会话和请求查询活动查询见解
2024 年 5 月 Copilot用于数据仓库 Copilot 数据仓库(预览版)现已推出,提供 Copilot 聊天窗格快速操作代码补全
2024 年 5 月 具有时间旅行的仓库查询(预览版) Microsoft Fabric 中的仓库提供了在语句级别查询过去存在的历史数据的功能,目前处于预览状态。 从特定时间戳查询数据的能力在数据仓库行业被称为时间旅行
2024 年 5 月 COPY INTO 增强功能 COPY INTO 现在支持通过受信任的工作区功能对受防火墙保护的存储进行 Microsoft Entra ID 身份验证和访问。 有关详细信息,请参阅 COPY INTO 增强COPY INTO (Transact-SQL)
2024 年 4 月 ADF 复制活动中的 Fabric 仓库 现在可以从 Azure 数据工厂/Synapse 管道连接到 Fabric 仓库。 在复制活动、查找活动、存储过程活动、脚本活动和获取元数据活动中创建新源或接收器目的地时,可以找到此新连接器。
2024 年 4 月 Git 集成 借助适用于仓库的 Git 集成,你可以将仓库的更改作为 SQL 数据库项目签入 Azure DevOps Git 存储库。
2024 年 4 月 分区排除 分区排除是针对具有大量文件的表的性能改进。 湖屋的 SQL 分析终结点使用分区排除功能从与查询相关的分区读取数据。 当查询针对包含许多文件的表中的少数分区时,最近的改进实现了甚至更高的性能改进。
2024 年 3 月 Microsoft Fabric 中的镜像(预览版) 借助 Fabric 中的镜像,可以轻松地将数据库引入 Microsoft Fabric 中的 OneLake,以便获得无缝的零 ETL、有关数据的准实时见解,以及解锁仓库、BI、AI 等。 有关详细信息,请参阅Fabric 中的镜像是什么?
2024 年 3 月 冷缓存性能改进 Fabric 将数据存储在 Delta 表中,当数据未缓存时,它需要将数据从 parquet 文件格式结构转码到内存中结构,以便进行查询处理。 最近的冷缓存性能改进进一步优化了转码,我们在测试中观察到,当数据之前没有缓存时,查询速度快达 9%。
2024 年 3 月 直接通过 DW 编辑器提取并发布 SQL 数据库项目 SQL 数据库项目扩展会创建一个 SQL 项目 (.sqlproj) 文件,它是 SQL 对象的本地表示形式,其包含用于单一数据库的架构(例如,表、存储过程或函数)。 现在可以直接通过 DW 编辑器提取和发布 SQL 数据库项目
2024 年 3 月 更改仓库项所有者 新的接管 API 允许将仓库所有者从当前所有者更改为新所有者,这可以是 SPN 或机构帐户。
2024 年 3 月 克隆表 RLS 和 CLS 克隆表现在会从克隆表的源继承行级别安全性 (RLS)动态数据掩码
2024 年 2 月 体验性能改进 近期的连接和性能增强功能包括改进了创建仓库、T-SQL 执行、自动元数据发现和错误消息传送的体验。
2023 年 12 月 Fabric Warehouse 的自动日志检查点 自动日志检查点是帮助数据仓库提供出色性能和最佳功能的方法之一,而你无需进行额外的工作!
2023 年 12 月 还原点和就地还原 现在可以创建还原点并将仓库就地还原到某个过去的时间点。 还原点和就地还原功能目前为预览版。 就地还原是数据仓库恢复的重要组成部分,它通过替换或覆盖创建还原点的现有数据仓库,将数据仓库还原到之前已知的可靠状态。

Synapse 数据仓库示例和指南

Month 功能 了解详细信息
2024 年 4 月 Fabric 改变游戏规则:将 Azure SQL 数据库镜像到 Microsoft Fabric 将 Azure SQL 数据库镜像到 Microsoft Fabric 的分步指南
2024 年 2 月 将 Azure Synapse 专用 SQL 池映射到 Fabric 数据仓库计算 阅读有关将 Azure Synapse Analytics 专用 SQL 池中的数据仓库单位 (DWU) 映射到大致同等数量 Fabric 容量单位 (CU) 的指南
2024 年 1 月 使用数据工厂自动化构造数据仓库查询和命令 在 Fabric 数据工厂中,可以通过多种方式查询数据、检索数据,并使用很容易实现自动化的管道活动从仓库执行命令

Microsoft Fabric 中的实时智能

本部分汇总了 Microsoft Fabric 中实时智能的最新改进和功能。

功能 了解详细信息
2024 年 5 月 实时智能 本月发布了实时智能,这是实时分析和 Data Activator 的下一个演变。
2024 年 5 月 实时智能新预览功能 在 Build 2024 中,发布了实时智能的十几个新特性和功能,分为引入和处理分析和转换以及可视化和操作等类别。
2024 年 5 月 实时中心预览版 实时中心是单一的、租户范围的、统一的、逻辑的位置,用于流式传输动态数据。 它使你能够轻松发现、引入、管理和使用来自各种来源的动态数据。 它列出了可以直接执行操作的所有流和 Kusto 查询语言 (KQL) 表。 它还提供了一种从 Microsoft 产品和 Fabric 事件引入流数据的简单方法。 有关详细信息,请参阅实时中心概述
2024 年 5 月 获取事件预览 获取事件体验允许用户直接从实时中心、Eventstream、Eventhouse 和 Data Activator 连接到各种源。 凭借获取事件,将流式传输数据从 Microsoft 源直接引入 Fabric,获得一流的体验。
2024 年 5 月 增强 Eventstream 功能预览 借助增强的 Eventstream 功能,现在不仅可以使用我们新的消息传递连接器从 Microsoft 源流式传输数据,还可以从 Google Cloud、Amazon Kinesis、数据库变更数据捕获流等其他平台流式传输数据。
2024 年 5 月 事件流 - 增强功能预览 增强功能的预览版支持许多新源 - Google Cloud Pub/Sub、Amazon Kinesis Data Streams、Confluent Cloud Kafka、Azure SQL 数据库变更数据捕获 (CDC)、PostgreSQL 数据库 CDC、MySQL 数据库 CDC、Azure Cosmos DB CDC、Azure Blob 存储事件和 Fabric 工作区项事件,以及新的 Stream 目标。 它在可视化设计器中支持两种不同的模式,即编辑模式和实时视图。 它还支持基于数据流中内容的路由。 有关详细信息,请参阅什么是 Microsoft Fabric 事件流
2024 年 4 月 Kusto 缓存消耗预览版 Kusto 缓存消耗预览版意味着你将看到来自 KQL 数据库和 Eventhouse 项目的 OneLake 缓存数据存储计量的计费消耗量。 有关详细信息,请参阅 KQL 数据库消耗
2024 年 4 月 Eventstream 中的暂停和继续功能预览版 借助暂停和继续功能,可以暂停来自 Eventstream 中各种源和目的地的数据流式处理。 然后可以从暂停时间或自定义时间无缝恢复数据流式处理,确保不会丢失任何数据。
2024 年 3 月 新表达式“更改依据”、“增加依据”和“减少依据” 在 Data Activator 中设置触发器的条件时,我们添加了语法,使你能够按绝对数或百分比检测数据何时发生变化。 请参阅新表达式“更改依据”、“增加依据”和“减少依据”
2024 年 3 月 Fabric 实时智能与最新发布的适用于 Azure SQL 的数据库观察程序集成 Azure SQL 用户可以将数据库观察程序监视解决方案与 Microsoft Fabric 配合使用适用于 Azure SQL 的数据库观察程序(预览版)提供高级监视功能,并且可以与 Eventhouse KQL 数据库集成。
2024 年 3 月 更新 KQL 数据库中的记录(预览版) update 命令现作为预览功能提供。 详细了解如何更新 Kusto 数据库中的记录
2024 年 3 月 从查询集查询 Azure 数据资源管理器数据 现在可以从 Fabric 的 KQL 查询集连接到 Azure 数据资源管理器群集并使用其中的数据
2024 年 2 月 Eventhouse 概述:使用 Microsoft Fabric 处理实时数据 Eventhouse(预览版)是托管多个 KQL 数据库的动态工作区,是 Fabric 实时智能的一部分。 Eventhouse 提供了管理和分析大量实时数据的可靠解决方案。 使用入门指南来创建和管理 Eventhouse
2024 年 2 月 Delta Lake 表的 KQL DB 快捷方式支持基于名称的列映射 KQL DB 现在支持读取具有列名称映射的 Delta 表。 借助列映射功能,Delta 表列和基础 Parquet 文件列可以使用不同的名称。 这样就可以在 Delta 表上执行增量架构演变操作,而无需重写基础 Parquet 文件,并让用户能够使用 Parquet 不允许的字符来命名 Delta 表列。
2024 年 2 月 Delta Lake 表的 KQL DB 快捷方式支持删除向量 KQL DB 现在可以读取具有删除向量的 Delta 表,通过将删除向量标记的删除应用到最新的表版本,从而解析当前表状态。
2024 年 2 月 KQL DB 中的获取数据功能现在支持在通过 Eventstream 引入之前处理事件 使用“在 Eventstream 中引入前先进行事件处理”选项,可以在将数据引入目标表中之前对其进行处理。 选择此选项后,获取数据进程将继续在 Eventstream 中无缝执行,并自动填充目标表和数据源详细信息。
2024 年 2 月 KQL DB 现在支持使用 Apache Flink 进行数据引入 使用开源 Flink 连接器,可以将数据从 Flink 发送到表。 使用 Azure 数据资源管理器和 Apache Flink,可以构建面向数据驱动型方案的可缩放快速应用程序。
2024 年 2 月 使用 Kusto Splunk 通用连接器将数据从 Splunk 通用转发器路由到 KQL DB 现在可以使用 Kusto Splunk 通用连接器将数据从 Splunk 通用转发器发送到 KQL DB 中的表
2023 年 12 月 在 KQL 数据库中运行报告时,在 Power BI 中计算非重复计数 新的 Fabric KQL 数据库 dcountdcountif 函数使用特殊算法返回非重复计数的估计值,即使在极其庞大的数据集中也是如此。 新函数 count_distinctcount_distinctif 会返回精确的非重复计数。
2023 年 12 月 创建预配置了与 KQL DB 连接的笔记本 现在,只需从 KQLDB 编辑器创建新的笔记本,并预配置与 KQL 数据库的连接,就可以使用 PySpark 来浏览数据。 此选项创建了一个带有可执行代码单元格的 PySpark 笔记本,可以从所选的 KQL DB 中读取数据。
2023 年 12 月 KQL 数据库架构验证 新的 Kusto 命令 .show database schema violations 旨在验证数据库架构的当前状态并查找不一致。 可以使用 .show database schema violations 对数据库或在 CI/CD 自动化中进行抽查
2023 年 12 月 在 OneLake 中启用 KQL 数据库的数据可用性 能在 OneLake 中使用 KQL 数据库的数据,意味着能够同时享受到这两个工具的优势。 既可以在 KQL 数据库中以高性能和低延迟查询数据,还可以通过 Power BI Direct Lake 模式、仓库、湖屋、Notebooks 等多种方式在 Delta Parquet 中查询相同的数据。
2023 年 12 月 Fabric 改变了游戏规则:实时智能 实时智能是一种强大的工具,在降低复杂性的同时简化了数据集成过程。 Microsoft Fabric 允许你使用 Eventstream 或 Spark Stream 生成实时流分析数据。

实时智能示例和指南

功能 了解详细信息
2024 年 3 月 使用“获取数据”功能浏览 Azure 资源 了解如何使用“获取数据”中的“浏览 Azure”功能浏览和连接到所有 Azure 资源。 可以首先浏览 Azure 资源,然后轻松连接到 Synapse、blob 存储或 ADLS Gen2 资源。

Microsoft Fabric 核心功能

Microsoft Fabric 体验的核心新闻和功能公告。

功能 了解详细信息
2024 年 5 月 Microsoft Fabric Core REST API Microsoft Fabric Core API 现已正式发布。 Fabric 用户 API 是企业和合作伙伴使用 Microsoft Fabric 的主要推动者,因为它们实现了与服务的端到端全自动交互、使 Microsoft Fabric 能够集成到外部 Web 应用程序中,且通常使客户和合作伙伴能够更轻松地缩放其解决方案。
2024 年 5 月 Microsoft Fabric 管理员 API 预览版 Fabric 管理员 API 旨在简化管理任务。 现在,可以使用同一组 API 管理 Power BI 和新 Fabric 项(以前称为项目)。 在此增强功能之前,必须使用两个不同的 API 进行导航:一个用于 Power BI 项,另一个用于新的 Fabric 项。
2024 年 5 月 Fabric 工作负载开发工具包(预览版) Microsoft Fabric 工作负载开发工具包可扩展到其他工作负载,并提供强大的开发人员工具包,用于使用前端 SDK 和后端 REST API 设计、开发以及与 Microsoft Fabric 互操作。
2024 年 5 月 外部数据共享简介(预览版) 外部数据共享(预览版)是一项新功能,使 Fabric 用户可与另一 Fabric 租户中的用户共享其 Fabric 租户中的数据。
2024 年 5 月 Microsoft Fabric 中的任务流(预览版) Microsoft Fabric 中任务流的预览版已为所有 Microsoft Fabric 用户启用。 凭借 Fabric 任务流,在设计数据项目时,不再需要使用白板来绘制项目的不同部分及其相互关系。 相反,可以使用任务流构建此关键信息并将其引入项目本身。
2024 年 3 月 Microsoft Fabric 现在符合 HIPAA 我们很高兴地宣布,我们面向企业推出的一站式分析解决方案 Microsoft Fabric 已获得新的 HIPAA 和 ISO 27017、ISO 27018、ISO 27001、ISO 27701 认证
2024 年 3 月 工作区中的文件夹预览版 作为工作区中的组织单位,文件夹通过提供用于组织和管理项的分层结构来解决此难点。 有关详细信息,请参阅在工作区内创建文件夹(预览版)
2024 年 3 月 Fabric Copilot 定价:端到端示例 Fabric 中的 Copilot 将于 2024 年 3 月 1 日开始计费,作为现有 Power BI Premium 或 Fabric 容量的一部分。 了解如何计算 Fabric Copilot 使用量
2024 年 3 月 容量平台的暂停/继续功能、容量指标、虚拟化项目以及适用于 Copilot 和 VNET 网关的工作负载更新 Fabric 容量平台现在支持有关暂停/继续以及支持 Copilot、容量指标和 VNET 网关的虚拟化项目和工作区的使用情况报告。 有关详细信息,请参阅暂停/继续的容量平台更新以及适用于 Copilot 和 VNET 网关的容量指标
2024 年 2 月 Microsoft Fabric 托管专用终结点(预览版) 借助 Microsoft Fabric 托管专用终结点(预览版),可以安全连接到防火墙后面的数据源,或者无法从公共互联网访问的数据源。 具有托管专用终结点的工作区通过 Microsoft Fabric 创建的托管虚拟网络进行网络隔离。 有关详细信息,请参阅推出 Microsoft Fabric 托管专用终结点(预览版)
2024 年 2 月 Azure 专用链接对 Microsoft Fabric 的支持(预览版) 适用于 Microsoft Fabric 的 Azure 专用链接通过提供网络隔离并在入站网络流量上应用需要的控制,从而保护对 Microsoft Fabric 中敏感数据的访问。 有关详细信息,请参阅宣布 Azure 专用链接支持 Microsoft Fabric(预览版)
2024 年 2 月 OneLake 中的域(预览版) OneLake 中的域有助将数据组织为逻辑数据网格,从而方便联合身份治理并根据业务需求进行优化。 现在可以为用户创建子域、默认域,并在域之间移动工作区。 有关详细信息,请参阅 Fabric 域
2024 年 2 月 可自定义的 Fabric 导航栏 现在可以在导航栏中自定义首选入口点,包括固定常用入口点和取消固定很少使用的选项。
2024 年 2 月 工作区中的持久筛选器 现在可以将所选筛选器保存在工作区列表视图中,下次打开工作区时会自动应用这些筛选器。
2023 年 12 月 Microsoft Fabric 管理员 API 预览版 Fabric 管理员 API 旨在简化管理任务。 Fabric 管理员 API 的初始设置旨在简化工作区、Fabric 项目和用户访问详细信息的发现。
2023 年 12 月 Fabric 和 Power BI 中的工作区保留更改 协作工作区的保留期可配置为 7 到 90 天。 默认情况下,将启用工作区保留设置,默认保留期为 7 天。

Microsoft Fabric 中的持续集成/持续交付 (CI/CD)

本部分包括有关 Microsoft Fabric 工作区中开发过程、工具、源控件和版本控制的指导和文档更新。

功能 了解详细信息
2024 年 5 月 CI/CD 的部署管道 API 从“部署”API 开始,已引入 Fabric 部署管道 API,该 API 允许部署整个工作区或仅部署选择的项目。
2024 年 5 月 Fabric CI/CD 中的新项 数据管道、仓库、Spark 和 Spark 作业现在可用于 git 集成和部署管道中的 CI/CD。
2024 年 4 月 推出在 Fabric 数据管道中访问受信任工作区的功能 在 Fabric 中创建数据管道,以轻松安全地访问已启用防火墙的 ADLS Gen2 存储帐户。 此功能利用工作区标识在 Fabric 和存储帐户之间建立安全无缝的连接。
2024 年 3 月 用于 Fabric 数据管道的 CI/CD 预览版 Git 集成以及与内置部署管道到数据工厂数据管道的集成现已提供预览版。 有关详细信息,请参阅数据工厂向 Fabric 数据管道添加 CI/CD
2024 年 3 月 Git 集成的系统文件更新 自动生成的系统文件 item.metadata.jsonitem.config.json 已合并到单个系统文件 .platform 中。 有关详细信息,请参阅自动生成的系统文件
2024 年 2 月 适用于 Fabric Git 集成的 REST API 适用于 Fabric Git 集成的 REST API 可将 Fabric Git 集成无缝整合到团队的端到端 CI/CD 管道中,而无需手动触发 Fabric 中的操作。
2024 年 2 月 Git 集成设置的委派 启用对 Git 相关设置的更多控制,租户管理员现在可以通过什么是管理门户?将这些设置委托给容量管理员和工作区管理员。

持续集成/持续交付 (CI/CD) 示例

功能 了解详细信息
2024 年 3 月 Microsoft Fabric 生命周期管理 – Git 集成和部署管道入门 通过演示场景了解生命周期管理的要点,并探索什么是生命周期管理以及它在 Fabric 中的含义。

Fabric 和 Microsoft 365

本部分包含有关 Microsoft Fabric 与 Microsoft Graph 和 Microsoft 365 集成的文章和公告。

Month 功能 了解详细信息
2024 年 3 月 分析 Microsoft Fabric 中的 Dataverse 表 在 Fabric 中创建快捷方式时,现在将看到 Dataverse 的选项。 当选择此快捷方式类型并指定 Dataverse 环境详细信息时,可以快速查看和使用该环境中的表。

迁移

本部分包括有关迁移到 Microsoft Fabric 的指南和文档更新。

Month 功能 了解详细信息
2024 年 2 月 将 Azure Synapse 专用 SQL 池映射到 Fabric 数据仓库计算 阅读有关将 Azure Synapse Analytics 专用 SQL 池中的数据仓库单位 (DWU) 映射到大致同等数量 Fabric 容量单位 (CU) 的指南

监视器

本部分包含有关监视 Microsoft Fabric 容量和利用率(包括 监视中心)的指南和文档更新。

Month 功能 了解详细信息
2024 年 3 月 暂停和继续的容量指标支持 结构容量指标已使用新的系统事件和对帐逻辑进行更新,以简化暂停容量的分析Fabric 暂停和继续是一项容量管理功能,可用于暂停 F SKU 容量来管理成本。 当容量无法正常运行时,可以暂停它以节省成本,然后,如果以后想要继续对容量的工作,则可以重新激活它。

Microsoft Purview

本部分汇总了有关 Microsoft Fabric 中 Microsoft Purview 治理和合规性功能的最新公告。 详细了解 Microsoft Fabric 中的信息保护

Month 功能 了解详细信息
2023 年 5 月 Microsoft Fabric 中的管理、安全和治理 Microsoft Fabric 提供由 Microsoft Purview 提供支持的内置企业级治理和合规性功能

存档

有关较旧的更新,请查看 Microsoft Fabric 新增功能存档