Новые возможности Microsoft Fabric?

Эта страница постоянно обновляется с помощью недавнего обзора новых возможностях Microsoft Fabric.

  • Сведения о последних новостях и функциях Fabric см. в блоге microsoft Fabric Обновления.
  • Сведения о сообществе, маркетинге, исследованиях и отраслевых новостях см. в блоге Microsoft Fabric.
  • Следуйте последним сведениям в Power BI в статье "Новые возможности Power BI "?
  • Для более старых обновлений новостей ознакомьтесь с предыдущими обновлениями в Microsoft Fabric.

Новые возможности Microsoft Fabric?

В этом разделе содержатся статьи и объявления для пользователей, не знакомых с Microsoft Fabric.

Month Компонент Подробнее
Март 2024 г. Microsoft Fabric теперь соответствует HIPAA Мы рады сообщить о том, что Microsoft Fabric, наше решение для аналитики по одному для предприятий, достигло новых сертификатов для HIPAA и ISO 27017, ISO 27018, ISO 27001, ISO 27701, ISO 27701.
Март 2024 г. Экзамен DP-600 теперь доступен Экзамен DP-600 теперь доступен, что приводит к сертификации Microsoft Certified: Fabric Analytics Engineer Associate. Центр карьеры Fabric поможет вам быстро научиться и получить сертификацию.
Март 2024 г. Ценовая Copilot структура: пример сквозного примера Copilot В Fabric начинается выставление счетов 1 марта 2024 г. в рамках существующей емкости Power BI Premium или Fabric. Узнайте, как вычисляется использование FabricCopilot.
2024 января Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас?
Декабрь 2023 г. Основы безопасности платформы Fabric Узнайте больше о перспективе архитектуры безопасности Microsoft Fabric, описывая, как основные потоки безопасности в системе работают.
Ноябрь 2023 г. Microsoft Fabric, описанная для существующих пользователей Synapse Основное внимание уделяется тому, какие клиенты могут ожидать с помощью текущей версии Synapse с использованием текущей версии Platform-as-Service (PaaS). Мы объясним, что означает общая доступность Fabric для ваших текущих инвестиций (спойлер: мы полностью поддерживаем их), но и как думать о будущем.
Ноябрь 2023 г. Microsoft Fabric теперь общедоступен Microsoft Fabric теперь общедоступен для покупки. Microsoft Fabric может изменить способ работы команд с данными, объединив всех пользователей на одной платформе, на основе ИИ, созданной для эпохи искусственного интеллекта. К ним относятся: Power BI, Фабрика данных, Инжиниринг данных, Обработка и анализ данных, аналитика в режиме реального времени, хранилище данных и общая платформа Fabric.
Ноябрь 2023 г. Рабочие нагрузки Fabric теперь общедоступны! Microsoft Fabric теперь общедоступен! Хранилище данных Microsoft Fabric Synapse, Инжиниринг данных и Обработка и анализ данных, аналитика в реальном времени, фабрика данных, OneLake и общая платформа Fabric теперь общедоступна.
Ноябрь 2023 г. Реализация архитектуры medallion lakehouse в Microsoft Fabric Общие сведения о архитектуре озера медальона и о том, как можно реализовать lakehouse в Microsoft Fabric.

Функции в предварительной версии

В следующей таблице перечислены функции Microsoft Fabric, которые в настоящее время находятся в предварительной версии. Предварительные версии функций отсортированы в алфавитном порядке.

Примечание.

Функции, которые доступны в предварительной версии, предоставляются по дополнительным условиям использования. Ознакомьтесь с юридическими условиями, применимыми к функциям Azure, которые находятся в бета-версии, предварительной версии или иным образом еще не выпущены в общедоступной версии. Microsoft Fabric предоставляет предварительные версии, чтобы дать вам возможность оценить и поделиться отзывами с группой продуктов на функциях, прежде чем они становятся общедоступными ..

Компонент Подробнее
Предварительная версия CI/CD для конвейеров данных Fabric Интеграция Git и интеграция со встроенными конвейерами развертывания в конвейеры данных фабрики данных теперь доступна в предварительной версии. Дополнительные сведения см. в разделе "Фабрика данных" добавление CI/CD в конвейеры данных Fabric.
Предварительная версия Code-First AutoML В Synapse Обработка и анализ данных новая функция AutoML обеспечивает автоматизацию рабочего процесса машинного обучения. AutoML или Автоматизированная Машинное обучение — это набор методов и инструментов, которые могут автоматически обучать и оптимизировать модели машинного обучения для любого заданного типа данных и задач.
Предварительная версия настройки Гиперпараметра code-First В Synapse Обработка и анализ данных flaML теперь интегрирован для настройки гиперпараметра, в настоящее время является предварительной версией функции. flaml.tune Функция Fabric упрощает этот процесс, предлагая экономичный и эффективный подход к настройке гиперпараметров.
Copilot в Fabric (предварительная версия) доступна по всему миру CopilotВ Fabric (предварительная версия) теперь доступны всем клиентам, включая Copilot Power BI, Фабрику данных и Обработка и анализ данных и Инжиниринг данных. Дополнительные сведения см. в статье "Обзор Copilot " в Fabric.
Предварительная версия активатора данных Мы рады сообщить о том, что активатор данных теперь находится в предварительной версии и включен для всех существующих пользователей Microsoft Fabric.
Инжиниринг данных: предварительная версия среды Мы рады сообщить о предварительной версии среды в Fabric. Среда — это централизованный элемент , позволяющий настроить все необходимые параметры для выполнения задания Spark в одном месте.
Предварительная версия Wrangler для dataFrames Spark Wrangler теперь поддерживает кадры данных Spark в предварительной версии, пользователи теперь могут изменять кадры данных Spark в дополнение к кадрам данных pandas с помощью Wrangler.
Домены в OneLake (предварительная версия) Домены в OneLake помогают упорядочивать данные в логическую сетку данных, позволяя федеративной системе управления и оптимизации для бизнес-потребностей. Теперь можно создавать поддомены, домены по умолчанию для пользователей и перемещать рабочие области между доменами. Дополнительные сведения см. в разделе "Домены Fabric".
Обзор события: обработка данных в режиме реального времени с помощью Microsoft Fabric Eventhouse (предварительная версия) — это динамическая рабочая область с несколькими базами данных KQL, частью Аналитики в режиме реального времени Fabric. Eventhouse предлагает надежное решение для управления и анализа существенных объемов данных в режиме реального времени. Начало работы с руководством по созданию и управлению хранилищем событий.
Папка в предварительной версии рабочей области В качестве подразделения в рабочей области папка обращается к этой точке боли, предоставляя иерархическую структуру для организации и управления элементами. Дополнительные сведения см. в статье "Создание папок в рабочих областях (предварительная версия)".
Интеграция локальных данных в Microsoft Fabric с помощью конвейеров данных в предварительной версии фабрики данных Локальный шлюз данных ( в настоящее время предварительная версия) можно использовать для подключения к локальным источникам данных с помощью потоков данных и конвейеров данных с фабрикой данных. Дополнительные сведения см. в статье о доступе к локальным источникам данных в Фабрике данных для Microsoft Fabric.
Предварительная версия потребления кэша Kusto Предварительная версия потребления кэша Kusto означает, что вы начнете видеть оплачиваемое потребление данных кэша OneLake, хранящихся в базе данных KQL и элементах Eventhouse. Дополнительные сведения см. в разделе О потреблении базы данных KQL.
Поддержка Lakehouse для конвейеров интеграции и развертывания Git (предварительная версия) Lakehouse теперь интегрируется с возможностями управления жизненным циклом в Microsoft Fabric, обеспечивая стандартизированную совместную работу между всеми участниками команды разработки на протяжении всей жизни продукта. Управление жизненным циклом упрощает эффективный процесс управления версиями продуктов и выпуска, постоянно предоставляя функции и исправления ошибок в нескольких средах.
Управляемые частные конечные точки (предварительная версия) Управляемые частные конечные точки для Microsoft Fabric разрешают безопасные подключения через управляемые виртуальные сети к источникам данных, которые находятся за брандмауэром или недоступны из общедоступного Интернета.
Управляемые виртуальные сети (предварительная версия) Управляемые виртуальные сети — это виртуальные сети , созданные и управляемые Microsoft Fabric для каждой рабочей области Fabric.
Соединитель Microsoft 365 теперь поддерживает прием данных в Lakehouse (предварительная версия) Соединитель Microsoft 365 теперь поддерживает прием данных в таблицы Lakehouse.
API Администратор Microsoft Fabric API-интерфейсы fabric Администратор предназначены для упрощения административных задач. Первоначальный набор API-интерфейсов Fabric Администратор предназначен для упрощения обнаружения рабочих областей, элементов Fabric и сведений о доступе пользователей.
API-интерфейсы пользователей Microsoft Fabric Мы рады сообщить о предварительной версии API-интерфейсов пользователей Microsoft Fabric. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко.
Зеркальное отображение в предварительной версии Microsoft Fabric С помощью зеркального отображения в Fabric вы можете легко перенести базы данных в OneLake в Microsoft Fabric, обеспечивая простой нулевой ETL, практически в реальном времени аналитические сведения о ваших данных и разблокировку хранилища, БИЗНЕС, ИИ и многое другое. Дополнительные сведения см. в разделе "Что такое зеркальное отображение в Fabric?".
Предварительная версия интеграции с Записной книжкой Git Записные книжки Fabric теперь предлагают интеграцию Git для управления версиями с помощью Azure DevOps. Это позволяет пользователям легко управлять версиями кода записной книжки и управлять ветвями Git, используя функции Fabric Git и Azure DevOps.
Записная книжка в предварительной версии конвейера развертывания Теперь вы также можете использовать записные книжки для развертывания кода в разных средах, таких как разработка, тестирование и рабочая среда. Вы также можете использовать правила развертывания для настройки поведения записных книжек при их развертывании, таких как изменение стандартного Lakehouse записной книжки. Приступая к работе с конвейерами развертывания, а записная книжка отображается в содержимом развертывания автоматически.
Роли доступа к данным OneLake Роли доступа к данным OneLake для Lakehouse доступны в предварительной версии. Разрешения ролей и назначения пользователей и групп можно легко обновлять с помощью нового пользовательского интерфейса безопасности папок или через вызовы API.
API сочетаний клавиш OneLake Новые интерфейсы REST API для сочетаний клавиш OneLake позволяют программным образом создавать ярлыки и управлять ими в настоящее время в предварительной версии. Теперь вы можете программно создавать, читать и удалять сочетания клавиш OneLake. Например, см . раздел "Использование сочетаний клавиш OneLake" rest API.
Сочетания клавиш OneLake для предварительной версии источников данных, совместимых с S3 Сочетания клавиш OneLake для источников данных, совместимых с S3, теперь доступны в предварительной версии. Создайте ярлык , совместимый с Amazon S3, чтобы подключиться к существующим данным через единое пространство имен без необходимости копировать или перемещать данные.
Сочетания клавиш OneLake в Google Cloud служба хранилища предварительной версии Сочетания клавиш OneLake в Google Cloud служба хранилища теперь доступны в предварительной версии. Создайте ярлык Google Cloud служба хранилища для подключения к существующим данным с помощью единого пространства имен без необходимости копировать или перемещать данные.
Предварительно созданные службы ИИ Azure в предварительной версии Fabric Предварительная версия предварительно созданных служб ИИ в Fabric — это интеграция со службами ИИ Azure, ранее известной как Azure Cognitive Services. Предварительно созданные службы ИИ Azure позволяют легко улучшить данные с предварительно созданными моделями ИИ без каких-либо предварительных требований. В настоящее время предварительно созданные службы ИИ находятся в предварительной версии и включают поддержку Microsoft Azure OpenAI Service, языка ИИ Azure и azure AI Переводчик.
Частные конечные точки для Microsoft Fabric (предварительная версия) Управляемые частные конечные точки для Microsoft Fabric (предварительная версия) позволяют безопасно подключаться к источникам данных, которые находятся за брандмауэром или недоступны из общедоступного Интернета. Дополнительные сведения см. в статье "Знакомство с управляемыми частными конечными точками для Microsoft Fabric" в предварительной версии.
Приватный канал поддержка Microsoft Fabric (предварительная версия) Приватный канал Azure для Microsoft Fabric защищает доступ к конфиденциальным данным в Microsoft Fabric, предоставляя сетевую изоляцию и применяя необходимые элементы управления для входящего сетевого трафика. Дополнительные сведения см. в статье "Объявление о поддержке Приватный канал Azure для Microsoft Fabric в предварительной версии".
ИНТЕРФЕЙСы REST API для конвейеров Фабрики данных Fabric Интерфейсы REST API для конвейеров фабрики данных Fabric теперь доступны в предварительной версии. ИНТЕРФЕЙСы REST API для конвейеров фабрики данных позволяют расширить встроенную возможность в Fabric для создания, чтения, обновления, удаления и списков конвейеров.
Предварительная версия надстройки Splunk Надстройка Microsoft Fabric для Splunk позволяет пользователям прием журналов из платформы Splunk в базу данных Fabric KQL с помощью пакета SDK для Python Kusto.
Доступ к доверенной рабочей области (предварительная версия) для сочетаний клавиш OneLake Доступ к доверенной рабочей области (предварительная версия) обеспечивает безопасный и простой доступ к учетным записям хранения ADLS 2-го поколения из сочетаний клавиш OneLake в Fabric. Дополнительные сведения см. в разделе "Доступ к доверенным рабочим областям( предварительная версия)".
Обновление записей в предварительной версии базы данных KQL Команда .update теперь доступна в качестве предварительной версии функции. Узнайте больше о том, как обновить записи в базе данных Kusto.
Точки восстановления хранилища и восстановление на месте Теперь можно создать точки восстановления и выполнить восстановление на месте хранилища до последнего момента во времени. Восстановление на месте является важной частью восстановления хранилища данных, которая позволяет восстановить хранилище данных до предыдущего известного надежного состояния, заменив или перенаписав существующее хранилище данных, из которого была создана точка восстановления.

Общедоступные функции

В следующей таблице перечислены функции Microsoft Fabric, которые перешли с предварительной версии на общедоступную версию (GA) за последние 12 месяцев.

Month Компонент Подробнее
Апрель 2024 г. Семантическая ссылка Семантические ссылки теперь общедоступны! Пакет поставляется с нашим виртуальным жестким диском по умолчанию, теперь вы можете использовать семантические ссылки в Fabric сразу без установки pip.
Март 2024 г. Шлюзы виртуальной сети в потоке данных 2-го поколения Поддержка шлюза данных виртуальной сети для потоков данных 2-го поколения в Fabric теперь общедоступна. Шлюз данных виртуальной сети помогает подключаться из Fabric Dataflows 2-го поколения к службам данных Azure в виртуальной сети без необходимости локального шлюза данных.
Ноябрь 2023 г. Microsoft Fabric теперь общедоступен Microsoft Fabric теперь общедоступен для покупки. Microsoft Fabric может изменить способ работы команд с данными, объединив всех пользователей на одной платформе, на основе ИИ, созданной для эпохи искусственного интеллекта. К ним относятся: Power BI, Фабрика данных, Инжиниринг данных, Обработка и анализ данных, аналитика в режиме реального времени, хранилище данных и общая платформа Fabric.

Сообщество

В этом разделе приведены новые возможности сообщества Microsoft Fabric для потенциальных и текущих поставщиков влияния и MVP.

Month Компонент Подробнее
Март 2024 г. Получение бесплатного экзамена сертификации Microsoft Fabric Станьте подходящим для бесплатного экзамена на сертификацию, завершив вызов навыков искусственного интеллекта Fabric. Задача искусственного интеллекта инженера Fabric Analytics ИИ открыта до 19 апреля 2024 г.
Март 2024 г. Экзамен DP-600 теперь доступен Экзамен DP-600 теперь доступен, что приводит к сертификации Microsoft Certified: Fabric Analytics Engineer Associate. Центр карьеры Fabric поможет вам быстро научиться и получить сертификацию.
Март 2024 г. Конференция сообщества Microsoft Fabric Присоединяйтесь к нам в Лас-Вегасе 26-28 марта 2024 года на первой ежегодной конференции сообщества Microsoft Fabric. Ознакомьтесь с тем, как Microsoft Fabric и остальные продукты и продукты искусственного интеллекта в Майкрософт помогут вашей организации подготовиться к эпохе искусственного интеллекта. Зарегистрируйтесь сегодня с помощью кода MSCUST для эксклюзивной скидки!
Март 2024 г. Объявление победителей "HackTogether: Microsoft Fabric Global AI Hack" Мы получили 50 отправки проектов Хакатон от более чем 100 реестрантов, участвующих в каждом уголке мира. Наши судьи были взорваны широтой, глубиной и общим качеством представлений. Познакомьтесь с победителями Hack Global AI Fabric!
2024 января Объявление о карьере Fabric Hub Новый Центр карьеры Fabric — это ваш единый стоп-магазин для профессионального роста! Мы создали комплексное обучение с лучшим бесплатным по запросу и живой подготовкой, а также скидками на экзамены.
2024 января Hack Together: The Microsoft Fabric Global AI Hack Hack Together — это глобальный онлайн-хакатон , который работает с 15 февраля по 4 марта 2024 года. Присоединяйтесь к нам для Hack Together: Microsoft Fabric Global AI Hack, виртуальное событие, где вы можете учиться, экспериментировать и взломать вместе с новыми Copilotфункциями ИИ в Microsoft Fabric! Дополнительные сведения см. в статье Microsoft Fabric Global AI Hack.
Декабрь 2023 г. Конференция сообщества Microsoft Fabric Присоединяйтесь к нам в Лас-Вегасе 26-28 марта 2024 года на первой ежегодной конференции сообщества Microsoft Fabric. Ознакомьтесь с тем, как Microsoft Fabric и остальные продукты и продукты искусственного интеллекта в Майкрософт помогут вашей организации подготовиться к эпохе искусственного интеллекта. Зарегистрируйтесь сегодня , чтобы погрузиться в будущее данных и ИИ и подключиться к тысячам новаторов данных, как вы хотите поделиться своими аналитическими сведениями.
Декабрь 2023 г. Проблема с навыками облака Fabric Присоединяйтесь к тысячам специалистов, которые завершили вызов Microsoft Fabric в рамках задачи Microsoft Ignite Cloud Skills Challenge. Менее чем за 8 часов вы узнаете, как подключиться, приема, хранения, анализа и отчета о данных с помощью Power BI и Microsoft Fabric. Задача Microsoft Fabric готовит вас к сертификации Microsoft Certified: Fabric Analytics Engineer Associate, доступной в ближайшее время. Задача будет ложиться до 15 января 2024 года.
Ноябрь 2023 г. Microsoft Fabric MVP Corner — Специальный выпуск (Ignite) Специальный выпуск серии блогов Microsoft Fabric MVP corner выделяет выбранное содержимое, связанное с Fabric и созданное MVPs на конференции Microsoft Ignite 2023, когда мы объявили о общедоступной версии Microsoft Fabric.
Ноябрь 2023 г. Навыки в Fabric с помощью задачи microsoft Learn Cloud Skills Challenge Мы рады объявить Microsoft Ignite: Microsoft Fabric Challenge в рамках microsoft Learn Cloud Skills Challenge . Навыки для сценариев технологий по запросу, и введите, чтобы выиграть ВИРТУАЛЬНЫй IP-адрес на следующий Microsoft Ignite. Задача будет ложиться до 15 января 2024 года. Задача поможет вам подготовиться к сертификации microsoft Certified: Fabric Analytics Engineer Associate и новым учетным данным Microsoft Applied Skills, охватывающим сценарии хранилища озера и хранилища данных, которые будут поступать в ближайшие месяцы.

Power BI

Обновления Power BI Desktop и служба Power BI приведены в сводке новых сведений в Power BI?

Примеры структуры и рекомендации

В этом разделе приведены новые рекомендации и примеры ресурсов проекта для Microsoft Fabric.

Month Компонент Подробнее
Март 2024 г. Защита персональных данных в Microsoft Fabric Lakehouse с помощью ответственного ИИ Один из возможных способов использования ИИ Azure для идентификации и извлечения персональных данных (PII) в Microsoft Fabric — использовать язык ИИ Azure для обнаружения и классификации сущностей PII в текстовых данных, таких как имена, адреса, адреса, адреса, номера телефонов, номера социального страхования и т. д.
Февраль 2024 г. Создание общих архитектур данных с помощью OneLake в Microsoft Fabric Узнайте больше о распространенных шаблонах архитектуры данных и о том, как их можно защитить с помощью Microsoft Fabric, а также основные стандартные блоки безопасности для OneLake.
2024 января Новая сертификация Fabric и Центр карьеры Fabric Доступность бета-версии экзамена сертификации Майкрософт DP-600: реализация решений аналитики с помощью Microsoft Fabric доступна в течение ограниченного времени. Прохождение этого экзамена получает сертификацию Microsoft Certified: Fabric Analytics Engineer Associate .
Декабрь 2023 г. Работа с OneLake с помощью служба хранилища Azure Обозреватель Если вы хотите использовать приложение, которое напрямую интегрируется с Windows проводник, проверка из проводника OneLake. Однако если вы привыкли использовать служба хранилища Azure Обозреватель для задач управления данными, вы можете продолжать использовать свои функциональные возможности с Помощью OneLake и некоторых ее ключевых преимуществ.
Ноябрь 2023 г. Семантическая ссылка: интегрированные семантические модели OneLake Семантическая ссылка добавляет поддержку недавно выпущенных интегрированных семантических моделей OneLake. Теперь вы можете напрямую получить доступ к данным с помощью имени семантической модели с помощью OneLake с помощью read_table функции и нового mode параметра onelake.
Ноябрь 2023 г. Интеграция данных SAP в Microsoft Fabric Использование встроенного подключения Microsoft Fabric — это самый простой и наименее трудоемкий способ добавления данных SAP в хранилище данных Fabric.
Ноябрь 2023 г. Изменение структуры игры: проверка зависимостей с помощью семантической связи — качество данных Выполните этот пошаговый пример изучения функциональных зависимостей между столбцами в таблице с помощью семантической связи. Семантическая связь — это функция, которая позволяет установить соединение между наборами данных Power BI и Synapse Обработка и анализ данных в Microsoft Fabric.
Ноябрь 2023 г. Реализация архитектуры medallion lakehouse в Microsoft Fabric Общие сведения о архитектуре озера медальона и о том, как можно реализовать lakehouse в Microsoft Fabric.

Microsoft Copilot в Microsoft Fabric

С Copilot помощью и других функций создания искусственного интеллекта в предварительной версии Microsoft Fabric предоставляет новый способ преобразования и анализа данных, создания аналитических сведений и создания визуализаций и отчетов. Дополнительные сведения см Copilot . в разделе Fabric.

Month Компонент Подробнее
Февраль 2024 г. Изменение структуры игры: как легко использовать Copilot в Microsoft Fabric В этой записи блога показано, как просто включить Copilot, генерированный ИИ, который предоставляет новые способы преобразования и анализа данных, создания аналитических сведений и создания визуализаций и отчетов в Microsoft Fabric.
Февраль 2024 г. Copilot Для фабрики данных в Microsoft Fabric Copilot Для фабрики данных в Microsoft Fabric теперь доступна предварительная версия и включена в интерфейс dataflow 2-го поколения. Дополнительные сведения см. в разделе Copilot "Фабрика данных".
2024 января Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас?
2024 января Copilot Включение в Fabric для всех Следуйте этому руководству, чтобы получить Copilot доступ к Fabric (предварительная версия) для всех пользователей в вашей организации. Дополнительные сведения см. в разделе "Обзор Copilot Microsoft Fabric (предварительная версия)".
2024 января Copilot в Fabric (предварительная версия) доступна по всему миру CopilotВ Fabric (предварительная версия) теперь доступны всем клиентам, включая Copilot Power BI, Фабрику данных и Обработка и анализ данных и Инжиниринг данных. Дополнительные сведения см. в статье "Обзор Copilot " в Fabric.
Ноябрь 2023 г. Расширение возможностей пользователей Power BI с помощью Microsoft Fabric и Copilot Мы рады сообщить о общедоступной доступности Microsoft Fabric и предварительной версии Copilot в Microsoft Fabric, включая возможности Power BI.
Ноябрь 2023 г. Copilot для Power BI в предварительной версии Microsoft Fabric Мы рады сообщить о предварительной версии Copilot Microsoft Fabric, включая интерфейс Power BI, который помогает пользователям быстро приступить к работе, помогая им создавать отчеты в веб-интерфейсе Power BI. Дополнительные сведения см. в power Copilot BI.

Фабрика данных в Microsoft Fabric

В этом разделе приведены последние новые функции и возможности фабрики данных в Microsoft Fabric. Следуйте вопросам и отзывам на форуме сообщества фабрики данных.

Month Компонент Подробнее
Апрель 2024 г. Действие определения задания Spark С помощью нового действия определения задания Spark вы сможете запустить определение задания Spark в конвейере.
Апрель 2024 г. Хранилище Fabric в действии копирования ADF Теперь вы можете подключиться к хранилищу Fabric из конвейера Фабрика данных Azure/Synapse. Этот новый соединитель можно найти при создании нового источника или назначения приемника в действии копирования, в действии подстановки, действии хранимой процедуры, действии скрипта и действии получения метаданных.
Апрель 2024 г. Изменение типа столбца в целевую таблицу, добавленную в хранилище Fabric и другие хранилища данных SQL При перемещении данных из любых поддерживаемых источников данных в хранилище Fabric или другие хранилища данных SQL (SQL Server, База данных SQL Azure, Управляемый экземпляр SQL Azure или Azure Synapse Analytics) с помощью конвейеров данных пользователи теперь могут указать тип данных для каждого столбца.
Апрель 2024 г. Улучшения производительности при записи данных в SFTP Соединитель SFTP был улучшен, чтобы повысить производительность при записи в SFTP в качестве назначения.
Апрель 2024 г. Поддержка проверки подлинности имени субъекта-службы для локальных и виртуальных сетевых шлюзов данных Теперь субъекты-службы Azure (SPN) поддерживаются для локальных шлюзов данных и шлюзов данных виртуальной сети. Узнайте, как использовать тип проверки подлинности субъекта-службы в Azure Data Lake служба хранилища, Dataverse, База данных SQL Azure, веб-соединитель и многое другое.
Апрель 2024 г. Новые и обновленные сертифицированные соединители Пакет SDK Power Query и процесс сертификации Подключение or Power Query представил 11 новых и обновленных настраиваемых соединителей Power Query.
Апрель 2024 г. Новый интерфейс построителя выражений Новый интерфейс в конвейерах фабрики данных Fabric для упрощения создания выражений с помощью языка выражений конвейера.
Апрель 2024 г. Фабрика данных увеличивает максимальное количество действий на конвейер до 80 Мы удвоили ограничение на количество действий, которые можно определить в конвейере с 40 до 80.
Апрель 2024 г. ИНТЕРФЕЙСы REST API для конвейеров Фабрики данных Fabric Интерфейсы REST API для конвейеров фабрики данных Fabric теперь доступны в предварительной версии. ИНТЕРФЕЙСы REST API для конвейеров фабрики данных позволяют расширить встроенную возможность в Fabric для создания, чтения, обновления, удаления и списков конвейеров.
Март 2024 г. Быстрое копирование в потоках данных 2-го поколения С помощью быстрого копирования можно получать терабайты данных с простым интерфейсом потоков данных, но с масштабируемой серверной частью действие Copy конвейера.
Март 2024 г. Интеграция локальных данных в Microsoft Fabric с помощью конвейеров данных в предварительной версии фабрики данных Используя локальный шлюз данных, в настоящее время предварительная версия, клиенты могут подключаться к локальным источникам данных с помощью потоков данных и конвейеров данных с фабрикой данных. Дополнительные сведения см. в статье о доступе к локальным источникам данных в Фабрике данных для Microsoft Fabric.
Март 2024 г. Предварительная версия CI/CD для конвейеров данных Fabric Интеграция Git и интеграция со встроенными конвейерами развертывания в конвейеры данных фабрики данных теперь доступна в предварительной версии. Дополнительные сведения см. в разделе "Фабрика данных" добавление CI/CD в конвейеры данных Fabric.
Март 2024 г. Просмотр ресурсов Azure с помощью получения данных Узнайте, как просматривать и подключаться ко всем ресурсам Azure с помощью функций "Обзор Azure" в Get Data. Вы можете легко просматривать ресурсы Azure и подключаться к ресурсам Synapse, хранилища BLOB-объектов или ADLS 2-го поколения.
Март 2024 г. Поддержка потоков данных 2-го поколения для шлюзов виртуальной сети теперь общедоступна Поддержка шлюза данных виртуальной сети для потоков данных 2-го поколения в Fabric теперь общедоступна. Шлюз данных виртуальной сети помогает подключаться из Fabric Dataflows 2-го поколения к службам данных Azure в виртуальной сети без необходимости локального шлюза данных.
Март 2024 г. Поддержка уровней конфиденциальности в потоках данных Теперь вы можете задать уровни конфиденциальности для подключений в потоке данных 2-го поколения. Уровни конфиденциальности критически важны для правильной настройки, чтобы конфиденциальные данные просматривались только авторизованными пользователями.
Март 2024 г. Копирование данных в S3, совместимое с помощью конвейера данных фабрики данных Fabric Копирование данных в совместимость S3 теперь доступно в конвейере данных Фабрики данных Fabric! Для завершения этого перемещения данных можно использовать помощник копирования и действие Copy в конвейере данных.
Февраль 2024 г. Назначения данных и управляемые параметры потоков данных 2-го поколения Новые функции для потоков данных 2-го поколения включают назначения, управляемые параметры и дополнительные разделы.
Февраль 2024 г. Copilot Для фабрики данных в Microsoft Fabric Copilot Для фабрики данных в Microsoft Fabric теперь доступна предварительная версия и включена в интерфейс dataflow 2-го поколения. Дополнительные сведения см. в разделе Copilot "Фабрика данных".
Февраль 2024 г. Сертифицированные обновления Подключение or Пакет SDK Power Query позволяет создавать новые соединители для Power BI и Dataflow. Новые сертифицированные соединители Power Query доступны в списке сертифицированных Подключение оров в Power Query.
Февраль 2024 г. Обновления соединителя конвейера данных Новые соединители доступны в конвейерах данных фабрики данных, включая совместимые с S3 и Источники данных Google Cloud служба хранилища. Дополнительные сведения см. в разделе "Соединители конвейера данных" в Microsoft Fabric.
Декабрь 2023 г. Чтение и запись в Fabric Lakehouse с помощью Фабрика данных Azure (ADF) Теперь вы можете считывать и записывать данные в Microsoft Fabric Lakehouse из ADF (Фабрика данных Azure). Используя Поток данных действия копирования или сопоставления, вы можете читать, записывать, преобразовывать и обрабатывать данные с помощью ADF или Synapse Analytics в настоящее время в предварительной версии.
Декабрь 2023 г. Настройка состояния действия для простой отладки конвейера В конвейерах данных Фабрики данных Fabric теперь можно задать состояние действия неактивным, чтобы сохранить конвейер даже с неполными недопустимыми конфигурациями. Подумайте об этом как о том, как "комментировать" часть кода конвейера.
Декабрь 2023 г. редактирование Подключение ion в редакторе конвейера Теперь вы можете изменить существующие подключения к данным во время разработки конвейера, не выходя из редактора конвейера! При настройке подключения появляется всплывающее окно "Изменить " и всплывающее окно.
Декабрь 2023 г. Выполнение записной книжки Azure Databricks в Фабрике данных Fabric Теперь можно создавать мощные рабочие процессы конвейера данных, которые включают выполнение записных книжек из кластеров Azure Databricks с помощью фабрики данных Fabric. Добавьте действие Databricks в конвейер, наведите указатель на существующий кластер или запросите новый кластер, а фабрика данных выполнит код записной книжки для вас.
Ноябрь 2023 г. Реализация архитектуры medallion lakehouse в Microsoft Fabric Общие сведения о архитектуре озера медальона и о том, как можно реализовать lakehouse в Microsoft Fabric.
Ноябрь 2023 г. Общая доступность соединителей Fabric для потока данных 2-го поколения Соединители для Lakehouse, Warehouse и KQL Database теперь общедоступны. Мы рекомендуем использовать эти соединители при попытке подключиться к данным из любой из этих рабочих нагрузок Fabric.
Ноябрь 2023 г. Автоматическое отмена обновления потока данных 2-го поколения Чтобы предотвратить использование ненужных ресурсов, существует новый механизм, который останавливает обновление потока данных, как только результаты обновления, как известно, не оказывают никакого влияния. Это позволяет сократить потребление более упреждающим образом.
Ноябрь 2023 г. Распространение сообщений об ошибках потока данных 2-го поколения через шлюз Мы сделали диагностика улучшения для предоставления значимых сообщений об ошибках при сбое обновления потока данных для этих потоков данных, выполняемых через корпоративный шлюз данных.
Ноябрь 2023 г. Поддержка потоков данных 2-го поколения для привязки столбцов для соединителя SAP HANA Поддержка привязки столбцов включена для SAP HANA. Этот необязательный параметр приводит к значительному повышению производительности. Дополнительные сведения см. в статье "Поддержка привязки столбцов для соединителя SAP HANA".
Ноябрь 2023 г. Скрытые артефакты промежуточного потока данных 2-го поколения При использовании потока данных 2-го поколения в Fabric система автоматически создаст набор промежуточных артефактов. Теперь эти промежуточные артефакты будут абстрагированы из интерфейса потока данных 2-го поколения и будут скрыты из списка рабочих областей. Никаких действий, необходимых пользователю, и это изменение не влияет на существующие потоки данных.
Ноябрь 2023 г. Поддержка потоков данных 2-го поколения для предварительной версии шлюзов виртуальной сети Поддержка шлюза данных виртуальной сети для потоков данных 2-го поколения в Fabric теперь доступна в предварительной версии. Шлюз данных виртуальной сети помогает подключаться из Fabric Dataflows 2-го поколения к службам данных Azure в виртуальной сети без необходимости локального шлюза данных.
Ноябрь 2023 г. Перекрестная рабочая область "Сохранить как" Теперь можно клонировать конвейеры данных в рабочих областях с помощью кнопки "Сохранить как".
Ноябрь 2023 г. Интеграция динамического содержимого с действиями электронной почты и Teams В действиях электронной почты и Teams теперь можно легко добавить динамическое содержимое. Благодаря этой новой интеграции выражений конвейера вы увидите всплывающее меню, которое поможет вам быстро выбрать и создать содержимое сообщения без необходимости изучать язык выражений конвейера.
Ноябрь 2023 г. действие Copy теперь поддерживает отказоустойчивость соединителя хранилища данных Fabric Теперь действие Copy в конвейерах данных поддерживает отказоустойчивость для хранилища Fabric. Отказоустойчивость позволяет обрабатывать определенные ошибки без прерывания перемещения данных. Включив отказоустойчивость, можно продолжать копировать данные, пропуская несовместимые данные, такие как повторяющиеся строки.
Ноябрь 2023 г. Соединители MongoDB и MongoDB Atlas Соединители MongoDB и MongoDB Atlas теперь доступны для использования в конвейерах данных фабрики данных в качестве источников и назначений.
Ноябрь 2023 г. Соединитель Microsoft 365 теперь поддерживает прием данных в Lakehouse (предварительная версия) Соединитель Microsoft 365 теперь поддерживает прием данных в таблицы Lakehouse.
Ноябрь 2023 г. Поддержка нескольких задач для редактирования конвейеров в конструкторе Теперь можно открывать и изменять конвейеры данных из разных рабочих областей и перемещаться между ними с помощью возможностей многофакторной обработки в Fabric.
Ноябрь 2023 г. Интерполяция строк, добавленная в возвращаемое значение конвейера Теперь вы можете изменить подключения к данным в конвейерах данных. Ранее новая вкладка откроется при необходимости редактирования подключений. Теперь вы можете оставаться в конвейере и легко обновлять подключения.

Фабрика данных в примерах и рекомендациях Microsoft Fabric

Month Компонент Подробнее
Февраль 2024 г. Конвейеры данных Fabric — расширенные методы планирования В этой серии блогов рассматриваются методы расширенного планирования в конвейерах данных Microsoft Fabric.
2024 января Автоматизация запросов и команд хранилища данных Fabric с помощью фабрики данных В Фабрике данных Fabric существует множество способов запрашивать данные, извлекать данные и выполнять команды из хранилища с помощью действий конвейера, которые затем могут быть легко автоматизированы.
2024 января Использование конвейеров данных фабрики данных Fabric для оркестрации рабочих процессов на основе записных книжек Рекомендации и рекомендации по созданию рабочих процессов Записной книжки Spark Fabric с помощью фабрики данных в Fabric с конвейерами данных.
Декабрь 2023 г. Чтение данных из таблиц Delta Lake с помощью функции DeltaLake.Table M DeltaLake.Table — это новая функция на языке M Power Query для чтения данных из таблиц Delta Lake. Эта функция теперь доступна в Power Query в Power BI Desktop и в потоках данных 1-го поколения и заменяет необходимость использования решения, разработанного сообществом.

Synapse Инжиниринг данных в Microsoft Fabric

В этом разделе приведены последние новые функции и возможности рабочей нагрузки Инжиниринг данных в Microsoft Fabric.

Month Компонент Подробнее
Апрель 2024 г. Прием оптимистических заданий Fabric Spark Прием оптимистических заданий Fabric Spark снижает частоту ошибок регулирования (HTTP 430: превышение ограничения емкости Spark) и улучшает прием заданий для наших клиентов, особенно во время пиковых часов использования.
Апрель 2024 г. Поддержка одного узла для начальных пулов Поддержка одного узла для начальных пулов позволяет настроить начальный пул на максимальный один узел и получить время начала сеанса супер-быстро для сеансов Spark.
Апрель 2024 г. Образ контейнера для Synapse VS Code Чтобы упростить процесс разработки, мы выпустили образ контейнера для Synapse VS Code , содержащий все необходимые зависимости для расширения.
Апрель 2024 г. Интеграция Git с определением задания Spark Интеграция Git с определениями заданий Spark позволяет проверка в изменениях определений заданий Spark в репозиторий Git, который будет включать исходный код заданий Spark и другие свойства элемента.
Апрель 2024 г. Новый обновленный обозреватель объектов в записной книжке Новый интерфейс обозреватель объектов повышает гибкость и возможность обнаружения источников данных в обозревателе и улучшает возможности обнаружения папок ресурсов.
Апрель 2024 г. %Run скрипты в записной книжке Теперь можно использовать магическую команду %run для запуска скриптов Python и скриптов SQL в папке ресурсов записной книжки, как и команда Jupyter Notebook %run .
Апрель 2024 г. Сочетания клавиш OneLake для предварительной версии источников данных, совместимых с S3 Сочетания клавиш OneLake для источников данных, совместимых с S3, теперь доступны в предварительной версии. Создайте ярлык , совместимый с Amazon S3, чтобы подключиться к существующим данным через единое пространство имен без необходимости копировать или перемещать данные.
Апрель 2024 г. Сочетания клавиш OneLake в Google Cloud служба хранилища предварительной версии Сочетания клавиш OneLake в Google Cloud служба хранилища теперь доступны в предварительной версии. Создайте ярлык Google Cloud служба хранилища для подключения к существующим данным с помощью единого пространства имен без необходимости копировать или перемещать данные.
Апрель 2024 г. Роли доступа к данным OneLake Роли доступа к данным OneLake для Lakehouse доступны в предварительной версии. Разрешения ролей и назначения пользователей и групп можно легко обновлять с помощью нового пользовательского интерфейса безопасности папок или через вызовы API.
Март 2024 г. Новое улучшение проверки для "Загрузка в таблицу" Новое усовершенствование проверки функции "Загрузка в таблицу" помогает устранить любые проблемы с проверкой и упростить загрузку данных.
Март 2024 г. Очередь для заданий записной книжки Теперь при задании очереди заданий записной книжки задания, запускаемые конвейерами или планировщиком заданий, будут добавлены в очередь и будут автоматически выполняться при освобождении емкости. Дополнительные сведения см. в разделе "Очередь заданий" в Microsoft Fabric Spark.
Март 2024 г. Функция настройки запросов Autotune для Apache Spark Теперь доступна функция настройки запросов Autotune для Apache Spark . Autotune использует исторические данные из запросов Spark SQL и алгоритмов машинного обучения для автоматической настройки конфигураций, обеспечения более быстрого времени выполнения и повышения эффективности.
Март 2024 г. OneLake проводник: редактирование с помощью Excel В нашем последнем выпуске проводника версии 1.0.11.0 мы рады сообщить, что теперь вы можете обновить файлы непосредственно с помощью Excel, зеркало удобное взаимодействие с OneDrive.
Февраль 2024 г. Доступ к доверенной рабочей области (предварительная версия) для сочетаний клавиш OneLake Доступ к доверенной рабочей области (предварительная версия) обеспечивает безопасный и простой доступ к учетным записям хранения ADLS 2-го поколения из сочетаний клавиш OneLake в Fabric. Дополнительные сведения см. в разделе "Доступ к доверенным рабочим областям( предварительная версия)".
Февраль 2024 г. Сокращение затрат на исходящий трафик с помощью сочетаний клавиш S3 в OneLake Узнайте, как сочетания клавиш OneLake в S3 теперь поддерживают кэширование, что может значительно снизить затраты на исходящий трафик. Используйте новый параметр включения кэша для сочетаний клавиш S3 с ярлыком S3.
Февраль 2024 г. API сочетаний клавиш OneLake Новые интерфейсы REST API для сочетаний клавиш OneLake позволяют программным образом создавать ярлыки и управлять ими в настоящее время в предварительной версии. Теперь вы можете программно создавать, читать и удалять сочетания клавиш OneLake. Например, см . раздел "Использование сочетаний клавиш OneLake" rest API.
Февраль 2024 г. Обзор фрагмента кода Новая функция записной книжки "Обзор кода" позволяет легко получать доступ к фрагментам кода и вставлять фрагменты кода для часто используемых фрагментов кода с несколькими поддерживаемыми языками.
Февраль 2024 г. Настройка времени ожидания сеанса Записные книжки теперь поддерживают настройку времени ожидания сеанса для текущего динамического сеанса. Это поможет вам избежать потери ресурсов или потери контекста из-за времени ожидания. Вы можете указать максимальную продолжительность сеансов Spark, от минут до часов, а также получать оповещения до истечения срока действия сеанса и расширить его.
Февраль 2024 г. Обновление строки состояния записной книжки Fabric Новая строка состояния записной книжки Fabric содержит три сохраненных кнопки сведений: состояние сеанса, состояние сохранения и состояние выбора ячеек. Кроме того, функции контекста включают сведения о состоянии подключения Git, ярлыке для расширения времени ожидания сеанса и навигатора ячейки с ошибкой.
2024 января Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас?
2024 января Новая версия OneLake проводник включает интеграцию Excel С помощью последней версии проводника OneLake (версии 1.0.11.0) мы предлагаем несколько обновлений для улучшения работы с OneLake, включая интеграцию Excel.
Декабрь 2023 г. %%configure — персонализация сеанса Spark в записной книжке Теперь вы можете персонализировать сеанс Spark с помощью волшебной команды %%configure, как в интерактивной записной книжке, так и в действиях записной книжки конвейера.
Декабрь 2023 г. Расширенный предварительный просмотр кадров данных в записной книжке Функция display() была обновлена в Записной книжке Fabric, которая теперь называется предварительной версией форматированного кадра данных. Теперь, когда вы используете display() для предварительного просмотра кадра данных, можно легко указать диапазон, просмотреть сводку кадра данных и статистику столбцов, проверка недопустимые значения или отсутствующие значения, а также просмотреть длинную ячейку.
Декабрь 2023 г. Работа с OneLake с помощью служба хранилища Azure Обозреватель Если вы хотите использовать приложение, которое напрямую интегрируется с Windows проводник, проверка из проводника OneLake. Однако если вы привыкли использовать служба хранилища Azure Обозреватель для задач управления данными, вы можете продолжать использовать свои функциональные возможности с Помощью OneLake и некоторых ее ключевых преимуществ.
Ноябрь 2023 г. Поддержка специальных возможностей для Lakehouse Чтобы обеспечить более инклюзивное и понятное взаимодействие, мы реализовали улучшения до сих пор для поддержки специальных возможностей в Lakehouse, включая совместимость с средствами чтения с экрана, изменение потока текста с экрана, навигацию по клавиатуре, альтернативный текст для изображений и полей форм и меток.
Ноябрь 2023 г. Расширенный многозадачность работы в Lakehouse Мы представили новые возможности для улучшения многозадачной работы в Lakehouse, включая многозадачность во время выполнения операций, неблокирование перезагрузки и более четкие уведомления.
Ноябрь 2023 г. Обновленные возможности DataGrid в Lakehouse Обновленный dataGrid для предварительной версии таблицы Lakehouse теперь включает сортировку, фильтрацию и изменение размера столбцов.
Ноябрь 2023 г. Повторная подготовка конечной точки аналитики SQL Теперь вы можете повторить подготовку конечной точки аналитики SQL непосредственно в Lakehouse. Это означает, что если первоначальная попытка подготовки завершается сбоем, у вас есть возможность повторить попытку без необходимости создать совершенно новый Lakehouse.
Ноябрь 2023 г. Среда выполнения Microsoft Fabric 1.2 Среда выполнения Microsoft Fabric 1.2 — это значительный прогресс в наших возможностях обработки данных. Среда выполнения Microsoft Fabric 1.2 включает Apache Spark 3.4.1, Mariner 2.0 в качестве операционной системы, Java 11, Scala 2.12.17, Python 3.10, Delta Lake 2.4 и R 4.2.2, обеспечивая наличие самых передовых средств в вашем распоряжении. Кроме того, этот выпуск поставляется с пакетами по умолчанию, охватывая полную установку Anaconda и основные библиотеки для Java/Scala, Python и R, упрощая рабочий процесс.
Ноябрь 2023 г. Поддержка нескольких сред выполнения При внедрении среды выполнения 1.2 Fabric поддерживает несколько сред выполнения, предлагая пользователям возможность легко переключаться между ними, минимизируя риск несовместимости или сбоев. При изменении среды выполнения все системные элементы рабочей области, включая Lakehouses, SJD и записные книжки, будут работать с использованием новой выбранной версии среды выполнения на уровне рабочей области, начиная с следующего сеанса Spark.
Ноябрь 2023 г. Delta в качестве формата таблицы по умолчанию в новой среде выполнения 1.2 Теперь параметр deltaсеанса spark.sql.sources.default Spark по умолчанию. Все таблицы, созданные с помощью Spark SQL, PySpark, Scala Spark и Spark R, когда тип таблицы опущен, по умолчанию создаст таблицу как Delta.
Ноябрь 2023 г. Интеллектуальный кэш По умолчанию в Fabric Spark включена только что обновленная и оптимизированная функция интеллектуального кэша. Интеллектуальный кэш легко работает за кулисами и кэширует данные, чтобы ускорить выполнение заданий Spark в Microsoft Fabric, как оно считывается из хранилища OneLake или ADLS 2-го поколения с помощью сочетаний клавиш.
Ноябрь 2023 г. Улучшения Центра мониторинга для Spark Последние улучшения в центре мониторинга предназначены для предоставления комплексного и подробного представления действий Spark и Lakehouse, включая выделение исполнителя, версию среды выполнения для приложения Spark, ссылку на связанные элементы на странице сведений.
Ноябрь 2023 г. Мониторинг операций Lakehouse Теперь пользователи могут просматривать ход выполнения и состояние заданий обслуживания Lakehouse и действий по загрузке таблиц.
Ноябрь 2023 г. Анализ использования ресурсов приложения Spark Отвечая на запросы клиентов о мониторинге метрик использования ресурсов Spark для настройки производительности и оптимизации, мы рады представить функцию анализа использования ресурсов Spark, которая теперь доступна в предварительной версии. Эта недавно выпущенная функция позволяет пользователям отслеживать выделенных исполнителей, запущенных исполнителей и бездействующих исполнителей вместе с выполнением Spark.
Ноябрь 2023 г. Поддержка REST API для предварительной версии определения задания Spark Теперь доступны общедоступные API REST для определения заданий Spark, что упрощает управление элементами SJD и управление ими.
Ноябрь 2023 г. Поддержка REST API для Lakehouse, загрузка в таблицы и обслуживание таблиц В качестве ключевого требования для интеграции рабочей нагрузки теперь доступны общедоступные API REST для Lakehouse . Общедоступные API Lakehouse REST упрощают управление элементами Lakehouse и управление ими программным способом.
Ноябрь 2023 г. Поддержка Lakehouse для конвейеров интеграции и развертывания Git (предварительная версия) Lakehouse теперь интегрируется с возможностями управления жизненным циклом в Microsoft Fabric, обеспечивая стандартизированную совместную работу между всеми участниками команды разработки на протяжении всей жизни продукта. Управление жизненным циклом упрощает эффективный процесс управления версиями продуктов и выпуска, постоянно предоставляя функции и исправления ошибок в нескольких средах.
Ноябрь 2023 г. Внедрение отчета Power BI в записную книжку Мы рады сообщить, что пакет Python powerbiclient теперь изначально поддерживается в записных книжках Fabric. Это означает, что вы можете легко внедрять и взаимодействовать с отчетами Power BI в записных книжках с несколькими строками кода. Дополнительные сведения об использовании пакета powerbiclient для внедрения компонента Power BI.
Ноябрь 2023 г. Mssparkutils new API — ссылка на выполнение нескольких записных книжек параллельно Новый API runMultiple в mssparkutils с именем mssparkutils.notebook.runMultiple() позволяет выполнять несколько записных книжек параллельно или с предопределенной топологической структурой. Дополнительные сведения см. в разделе "Служебные программы записной книжки".
Ноябрь 2023 г. Ресурсы записной книжки. Поддержка JAR-файла Теперь мы поддерживаем отправку .jar файлов в обозревателе ресурсов записной книжки. Вы можете добавить собственные скомпилированные libs, использовать перетаскивание для создания фрагмента кода для их установки в сеансе и удобно загружать библиотеки в коде.
Ноябрь 2023 г. Предварительная версия интеграции с Записной книжкой Git Записные книжки Fabric теперь предлагают интеграцию Git для управления версиями с помощью Azure DevOps. Это позволяет пользователям легко управлять версиями кода записной книжки и управлять ветвями Git, используя функции Fabric Git и Azure DevOps.
Ноябрь 2023 г. Записная книжка в предварительной версии конвейера развертывания Теперь вы также можете использовать записные книжки для развертывания кода в разных средах, таких как разработка, тестирование и рабочая среда. Вы также можете использовать правила развертывания для настройки поведения записных книжек при их развертывании, таких как изменение стандартного Lakehouse записной книжки. Приступая к работе с конвейерами развертывания, а записная книжка отображается в содержимом развертывания автоматически.
Ноябрь 2023 г. Предварительная версия REST API записной книжки С помощью общедоступных API REST для элементов записной книжки инженеры и специалисты по обработке и анализу данных могут автоматизировать конвейеры и эффективно устанавливать CI/CD. Общедоступный API записной книжки позволяет пользователям легко управлять элементами записных книжек Fabric и интегрировать записную книжку с другими инструментами и системами.
Ноябрь 2023 г. Предварительная версия среды Мы рады сообщить о предварительной версии среды в Fabric. Среда — это централизованный элемент , позволяющий настроить все необходимые параметры для выполнения задания Spark в одном месте.
Ноябрь 2023 г. Расширение Synapse VS Code в vscode.dev предварительной версии Благодаря поддержке расширения Synapse VS Code на vsocde.dev пользователи теперь могут легко изменять и выполнять записные книжки Fabric, не покидая окно браузера. Кроме того, все собственные возможности vs-developer в VS Code теперь доступны конечным пользователям в этой среде.

Примеры и рекомендации synapse Инжиниринг данных

Month Компонент Подробнее
Март 2024 г. Бриджинг Fabric Lakehouses: разностный канал данных изменений для простого ETL Узнайте, как использовать канал данных Delta Change Для упрощения простой синхронизации данных в разных озерах в архитектуре медальона.
2024 января Использование конвейеров данных фабрики данных Fabric для оркестрации рабочих процессов на основе записных книжек Рекомендации и рекомендации по созданию рабочих процессов Записной книжки Spark Fabric с помощью фабрики данных в Fabric с конвейерами данных.
Ноябрь 2023 г. Изменение структуры: использование собственной библиотеки с Microsoft Fabric Пошаговое руководство по использованию собственной библиотеки Python в Lakehouse. Довольно просто создать собственную библиотеку с помощью Python и еще проще использовать ее в Fabric.

Synapse Обработка и анализ данных в Microsoft Fabric

В этом разделе приведены последние улучшения и функции для Обработка и анализ данных в Microsoft Fabric.

Month Компонент Подробнее
Апрель 2024 г. Семантическая ссылка Семантические ссылки теперь общедоступны! Пакет поставляется с нашим виртуальным жестким диском по умолчанию, теперь вы можете использовать семантические ссылки в Fabric сразу без установки pip.
Апрель 2024 г. Делегирование уровня емкости для ИИ и Copilot Теперь администраторы клиентов могут включить ИИ и Copilot в Fabric для всей организации, определенных групп безопасности или для определенной емкости.
Март 2024 г. Клиенты ЕС могут использовать ИИ и Copilot без перекрестного геопараметров С середины марта клиенты ЕС могут использовать ИИ и Copilot без включения кросс-геопараметров, а их ИИ и Copilot запросы будут обрабатываться в EUDB.
Март 2024 г. Предварительная версия настройки Гиперпараметра code-First FLAML теперь интегрирован для настройки гиперпараметра, в настоящее время является предварительной версией функции. flaml.tune Функция Fabric упрощает этот процесс, предлагая экономичный и эффективный подход к настройке гиперпараметров.
Март 2024 г. Предварительная версия Code-First AutoML С помощью новой функции AutoML вы можете автоматизировать рабочий процесс машинного обучения и получить лучшие результаты с меньшими усилиями. AutoML или Автоматизированная Машинное обучение — это набор методов и инструментов, которые могут автоматически обучать и оптимизировать модели машинного обучения для любого заданного типа данных и задач.
Март 2024 г. Сравнение вложенных запусков Родительский и дочерний запуски в представлении списка запуска для экспериментов машинного обучения представляет иерархическую структуру, позволяя пользователям легко просматривать различные родительские и дочерние запуски в одном представлении и легко взаимодействовать с ними для визуального сравнения результатов.
Март 2024 г. Поддержка обязательного применения меток MIP Элементы модели машинного обучения и экспериментов в Fabric теперь предлагают расширенную поддержку меток Microsoft Information Protection (MIP).
2024 января Microsoft Fabric Copilot для Обработка и анализ данных и Инжиниринг данных Copilotдля Обработка и анализ данных и Инжиниринг данных теперь доступен по всему миру. Что можно Copilot сделать для Обработка и анализ данных и Инжиниринг данных для вас?
Декабрь 2023 г. Обновление семантической ссылки Мы рады сообщить о последнем обновлении семантической ссылки! Помимо многих улучшений, мы также добавили множество новых возможностей для нашего сообщества разработчиков Power BI, которые можно использовать из записных книжек Fabric для удовлетворения всех потребностей службы автоматизации.
Декабрь 2023 г. Предварительно созданные службы ИИ Azure в предварительной версии Fabric Предварительная версия предварительно созданных служб ИИ в Fabric — это интеграция со службами ИИ Azure, ранее известной как Azure Cognitive Services. Предварительно созданные службы ИИ Azure позволяют легко улучшить данные с предварительно созданными моделями ИИ без каких-либо предварительных требований. В настоящее время предварительно созданные службы ИИ находятся в предварительной версии и включают поддержку Microsoft Azure OpenAI Service, языка ИИ Azure и azure AI Переводчик.
Ноябрь 2023 г. Copilot предварительная версия записных книжек Записные Copilot книжки Fabric Обработка и анализ данных и Инжиниринг данных предназначены для повышения производительности, предоставления полезных ответов и рекомендаций, а также создания кода для распространенных задач, таких как исследование данных, подготовка данных и машинное обучение. Вы можете взаимодействовать и взаимодействовать с ИИ на панели чата или даже из ячеек записных книжек с помощью магических команд, чтобы получить аналитические сведения от данных быстрее. Дополнительные сведения см Copilot . в записных книжках.
Ноябрь 2023 г. Пользовательские операции Python в Wrangler Data Wrangler, инструмент на основе записной книжки для анализа данных, всегда позволял пользователям просматривать и применять общие операции очистки данных, создавая соответствующий код в режиме реального времени. Теперь, помимо создания кода из пользовательского интерфейса, пользователи также могут писать собственный код с пользовательскими операциями в Data Wrangler.
Ноябрь 2023 г. Предварительная версия Wrangler для dataFrames Spark Wrangler теперь поддерживает кадры данных Spark в предварительной версии. До сих пор пользователи смогли просматривать и преобразовывать кадры данных pandas с помощью распространенных операций, которые можно преобразовать в код Python в режиме реального времени. Новый выпуск позволяет пользователям изменять кадры данных Spark в дополнение к пандам DataFrames с помощью Wrangler.
Ноябрь 2023 г. Мини-приложение записной книжки MLFlow Мини-приложение встроенного разработки MLflow позволяет пользователям легко отслеживать их эксперименты вместе с метриками и параметрами непосредственно из своей записной книжки.
Ноябрь 2023 г. Улучшения удобства использования нового элемента модели и элемента эксперимента Новые усовершенствования в нашей модели и функции отслеживания экспериментов основаны на ценных отзывах пользователей. Новый элемент управления "Дерево" в представлении сведений о выполнении упрощает отслеживание, показывая, какой запуск выбран. Мы улучшили функцию сравнения, что позволяет легко настроить область сравнения для более удобного взаимодействия. Теперь можно выбрать имя запуска, чтобы просмотреть представление сведений о выполнении.
Ноябрь 2023 г. Последние запуски эксперимента Теперь пользователям проще проверка последние запуски для эксперимента непосредственно из представления списка рабочих областей. Это обновление упрощает отслеживание недавних действий, быстро переход к соответствующему приложению Spark и применение фильтров на основе состояния выполнения.
Ноябрь 2023 г. Модели, переименованные в модели машинного обучения Корпорация Майкрософт переименовала "Модели" в "Модели машинного обучения", чтобы обеспечить ясность и избежать путаницы с другими элементами Fabric. Дополнительные сведения см . в статье "Эксперименты машинного обучения" в Microsoft Fabric.
Ноябрь 2023 г. SynapseML версии 1.0 SynapseML версии 1.0 теперь выпущен. SynapseML версии 1.0 упрощает создание готовых систем машинного обучения в Fabric и используется в Корпорации Майкрософт в течение более шести лет.
Ноябрь 2023 г. Обучение интерпретируемых машин с помощью SynapseML Мы ввели масштабируемую реализацию объясняемых машин повышения (EBM), на базе Apache Spark в SynapseML. EBMs — это мощный метод машинного обучения, который объединяет точность градиентного повышения с сильным акцентом на интерпретацию модели.
Ноябрь 2023 г. Предварительно созданные модели искусственного интеллекта в предварительной версии Microsoft Fabric Мы рады сообщить о предварительной версии предварительно созданных моделей искусственного интеллекта в Fabric. Azure OpenAI Service, Анализ текста и Azure AI Переводчик являются предварительно созданными моделями, доступными в Fabric, с поддержкой API RESTful и SynapseML. Вы также можете использовать библиотеку Python OpenAI для доступа к службе Azure OpenAI в Fabric.
Ноябрь 2023 г. Повторное использования существующего сеанса Spark в sparklyr Мы добавили поддержку нового метода подключения с именем Synapse в sparklyr, который позволяет пользователям подключаться к существующему сеансу Spark. Кроме того, мы внесли этот метод подключения в проект sparklyr OSS. Теперь пользователи могут использовать sparklyr и SparkR в одном сеансе и легко обмениваться данными между ними.
Ноябрь 2023 г. Поддержка REST API для экспериментов машинного обучения и моделей машинного обучения REST API для эксперимента машинного обучения и модели машинного обучения теперь доступны. Эти ИНТЕРФЕЙСы REST API для экспериментов машинного обучения и моделей машинного обучения начинают предоставлять пользователям возможность создавать элементы машинного обучения и управлять ими программными средствами, ключевым требованием для автоматизации конвейера и интеграции рабочей нагрузки.

Примеры и рекомендации synapse Обработка и анализ данных

Month Компонент Подробнее
Март 2024 г. Новые примеры ИИ Новые примеры AutoML, настройки модели и семантической связи отображаются в категории "Краткое руководство" Обработка и анализ данных примеров в Microsoft Fabric.
Декабрь 2023 г. Использование данных Lakehouse в Microsoft Fabric и потока запросов в службе Машинное обучение Azure для создания приложений RAG Пошаговые приложения RAG через поток запроса в службе Машинное обучение Azure в сочетании с данными Microsoft Fabric Lakehouse.
Ноябрь 2023 г. Руководство по работе с новыми путями для обработки и анализа данных в Microsoft Fabric Мы обновили руководство по Обработка и анализ данных Happy Path для Microsoft Fabric. Это новое комплексное руководство демонстрирует весь рабочий процесс обработки и анализа данных, используя проблему оттока клиентов банка в качестве контекста.
Ноябрь 2023 г. Новые примеры для обработки и анализа данных Мы расширили нашу коллекцию примеров для обработки и анализа данных, чтобы включить новые комплексные примеры R и новые краткие примеры учебников для "Объяснение выходных данных модели" и "Визуализация поведения модели".
Ноябрь 2023 г. Новый пример прогнозирования для обработки и анализа данных Новый Обработка и анализ данных пример прогнозирования продаж был разработан в сотрудничестве с Sonata Software. Этот новый пример охватывает весь рабочий процесс обработки и анализа данных, охватывающий от очистки данных до визуализации Power BI. Записная книжка охватывает шаги по разработке, оценке и оценке модели прогнозирования для продаж суперstore, используя возможности алгоритма SARIMAX.

Хранилище данных Synapse в Microsoft Fabric

В этом разделе приведены последние улучшения и функции хранилища данных Synapse в Microsoft Fabric.

Month Компонент Подробнее
Апрель 2024 г. Хранилище Fabric в действии копирования ADF Теперь вы можете подключиться к хранилищу Fabric из конвейера Фабрика данных Azure/Synapse. Этот новый соединитель можно найти при создании нового источника или назначения приемника в действии копирования, в действии подстановки, действии хранимой процедуры, действии скрипта и действии получения метаданных.
Апрель 2024 г. Интеграция Git Интеграция Git для хранилища позволяет проверка в изменениях хранилища в репозиторий Azure DevOps Git в качестве проекта базы данных SQL.
Апрель 2024 г. Устранение секций Устранение секций — это улучшение производительности таблиц с большим количеством файлов. Конечная точка аналитики SQL в Lakehouse использует исключение секций для чтения данных только из тех секций, которые относятся к запросу. Последние улучшения повышают производительность еще больше, если запросы направлены на несколько секций в таблице с большим количеством файлов.
Март 2024 г. Зеркальное отображение в предварительной версии Microsoft Fabric С помощью зеркального отображения в Fabric вы можете легко перенести базы данных в OneLake в Microsoft Fabric, обеспечивая простой нулевой ETL, практически в реальном времени аналитические сведения о ваших данных и разблокировку хранилища, БИЗНЕС, ИИ и многое другое. Дополнительные сведения см. в разделе "Что такое зеркальное отображение в Fabric?".
Март 2024 г. Улучшения производительности холодного кэша Структура хранит данные в разностных таблицах и когда данные не кэшируются, необходимо перекодировать данные из структур формата parquet в структуры в памяти для обработки запросов. Последние улучшения производительности холодного кэша еще больше оптимизируют транскодирование , и мы наблюдали до 9 % быстрее запросов в наших тестах, когда данные не кэшируются ранее.
Март 2024 г. Извлечение и публикация проекта базы данных SQL непосредственно через редактор DW Расширение База данных SQL Projects создает файл проекта SQL(.sqlproj локальное представление объектов SQL, составляющих схему для одной базы данных, таких как таблицы, хранимые процедуры или функции. Теперь можно извлечь и опубликовать проект базы данных SQL непосредственно через редактор DW.
Март 2024 г. Изменение владельца элемента хранилища Новый API принятия позволяет изменить владельца хранилища с текущего владельца на нового владельца, который может быть spN или учетной записью организации.
Март 2024 г. Клонирование таблицы RLS и CLS Клонированная таблица теперь наследует безопасность на уровне строк (RLS) и динамическое маскирование данных из источника клонирования таблицы.
Февраль 2024 г. Улучшения производительности Последние улучшения подключения и производительности включают улучшенный интерфейс для создания хранилищ, выполнения T-SQL, автоматического обнаружения метаданных и обмена сообщениями об ошибках.
Декабрь 2023 г. Автоматическая контрольная точка журнала для хранилища Fabric Автоматическая контрольная точка журнала — это один из способов, которыми мы помогаем вашему хранилищу данных обеспечить высокую производительность и лучше всего, это не включает в себя дополнительную работу.
Декабрь 2023 г. Восстановление точек и восстановление на месте Теперь можно создать точки восстановления и выполнить восстановление на месте хранилища до последнего момента во времени. Точки восстановления и восстановление на месте в настоящее время находятся в предварительной версии. Восстановление на месте является важной частью восстановления хранилища данных, которая позволяет восстановить хранилище данных до предыдущего известного надежного состояния, заменив или перенаписав существующее хранилище данных, из которого была создана точка восстановления.
Ноябрь 2023 г. Поддержка TRIM T-SQL Теперь можно использовать TRIM команду для удаления пробелов или определенных символов из строк с помощью ключевое слово s LEADING, TRAILING или BOTH в TRIM (Transact-SQL).
Ноябрь 2023 г. поддержка T-SQL GENERATE_SERIES Создает ряд чисел в пределах заданного интервала с GENERATE_SERIES (Transact-SQL). Интервал и шаг между значениями рядов определяются пользователем.
Ноябрь 2023 г. Кэширование метаданных SSD Метаданные файлов и групп строк теперь кэшируются с кэшем в памяти и SSD, что повышает производительность.
Ноябрь 2023 г. Улучшения PARSER 2.0 для приема CSV Средство синтаксического анализа CSV-файлов версии 2.0 для COPY INTO создает инновации из группы "Платформа данных и аналитика Microsoft Research" для быстрого приема CSV-файла в хранилище Fabric. Дополнительные сведения см. в разделе COPY INTO (Transact-SQL).
Ноябрь 2023 г. Включено быстрое назначение вычислительных ресурсов Все выполнение запросов в хранилище Fabric теперь используется новой технологией, недавно развернутой в рамках компонента глобального управления ресурсами, который назначает вычислительные ресурсы в миллисекундах.
Ноябрь 2023 г. Поддержка REST API для хранилища С помощью общедоступных API хранилища разработчики SQL теперь могут автоматизировать свои конвейеры и установить CI/CD удобно и эффективно. Общедоступные API-интерфейсы хранилища хранилища позволяют пользователям легко управлять элементами хранилища Fabric и управлять ими.
Ноябрь 2023 г. Поддержка SQLPackage для хранилища Fabric SQLPackage теперь поддерживает хранилище Fabric. SqlPackage — это служебная программа командной строки, которая автоматизирует следующие задачи разработки баз данных, предоставляя некоторые из общедоступных API Платформы приложений уровня данных (DacFx). Средство командной строки SqlPackage позволяет указать эти действия вместе с параметрами и свойствами, зависящими от действия.
Ноябрь 2023 г. Семантические модели Power BI Корпорация Майкрософт переименовала тип контента набора данных Power BI в семантику модели. Это касается и семантических моделей Microsoft Fabric. Дополнительные сведения см. в статье "Новое имя" для наборов данных Power BI.
Ноябрь 2023 г. Конечная точка аналитики SQL Корпорация Майкрософт переименовала конечную точку SQL Lakehouse в конечную точку аналитики SQL Lakehouse.
Ноябрь 2023 г. Динамическое маскирование данных Динамическое маскирование данных (DDM) для хранилища Fabric и конечной точки аналитики SQL в Lakehouse. Дополнительные сведения и примеры см. в разделе Динамическое маскирование данных в хранилище данных Fabric и как реализовать динамическое маскирование данных в хранилище данных Synapse.
Ноябрь 2023 г. Клонирование таблиц с перемещением по времени Теперь можно использовать клоны таблиц для создания клона таблицы на основе данных до семи календарных дней в прошлом.
Ноябрь 2023 г. Обновления пользовательского интерфейса Несколько пользовательских возможностей в складе приземлились. Дополнительные сведения см. в статье об обновлениях пользовательского интерфейса хранилища Fabric.
Ноябрь 2023 г. Автоматическое сжатие данных Автоматическое сжатие данных перезаписывает множество небольших файлов parquet в несколько больших файлов parquet, что повышает производительность чтения таблицы. Сжатие данных — это один из способов, которыми мы помогаем вашему хранилищу обеспечить высокую производительность и не выполнять никаких усилий.

Примеры и рекомендации по хранилищу данных Synapse

Month Компонент Подробнее
Апрель 2024 г. Изменение структуры игры: База данных SQL Azure зеркало в Microsoft Fabric Пошаговое руководство по зеркало База данных SQL Azure в Microsoft Fabric.
Февраль 2024 г. Сопоставление выделенных пулов SQL Azure Synapse с вычислительными ресурсами хранилища данных Fabric Ознакомьтесь с рекомендациями по сопоставлению единиц хранилища данных (DWU) из выделенного пула SQL Azure Synapse Analytics с приблизительным числом единиц емкости Fabric (CU).
2024 января Автоматизация запросов и команд хранилища данных Fabric с помощью фабрики данных В Фабрике данных Fabric существует множество способов запрашивать данные, извлекать данные и выполнять команды из хранилища с помощью действий конвейера, которые затем могут быть легко автоматизированы.
Ноябрь 2023 г. Миграция из выделенных пулов SQL Azure Synapse Подробное руководство по runbook миграции доступно для миграции из выделенных пулов SQL хранилища данных Azure Synapse в Microsoft Fabric.

Аналитика в режиме реального времени Synapse в Microsoft Fabric

В этом разделе приведены последние улучшения и функции аналитики в режиме реального времени в Microsoft Fabric.

Month Компонент Подробнее
Апрель 2024 г. Предварительная версия потребления кэша Kusto Предварительная версия потребления кэша Kusto означает, что вы начнете видеть оплачиваемое потребление данных кэша OneLake, хранящихся в базе данных KQL и элементах Eventhouse. Дополнительные сведения см. в разделе О потреблении базы данных KQL.
Апрель 2024 г. Приостановка и возобновление в предварительной версии eventstream Функция "Приостановка и возобновление" позволяет приостановить потоковую передачу данных из различных источников и назначений в Eventstream. Затем вы можете легко возобновить потоковую передачу данных из приостановленного времени или настраиваемого времени, гарантируя отсутствие потери данных.
Март 2024 г. Аналитика в режиме реального времени Fabric интегрируется с недавно объявленным наблюдателем за базами данных для SQL Azure Пользователи SQL Azure могут использовать решение мониторинга наблюдателя за базами данных с помощью Microsoft Fabric. Наблюдатель за базами данных для SQL Azure (предварительная версия) предоставляет расширенные возможности мониторинга и может интегрироваться с базой данных Eventhouse KQL.
Март 2024 г. Обновление записей в предварительной версии базы данных KQL Команда .update теперь доступна в качестве предварительной версии функции. Узнайте больше о том, как обновить записи в базе данных Kusto.
Март 2024 г. Запрос данных Azure Обозреватель из набора запросов теперь доступно Подключение использование данных в кластере Azure Data Explorer из набора запросов KQL Fabric.
Февраль 2024 г. Обзор события: обработка данных в режиме реального времени с помощью Microsoft Fabric Eventhouse (предварительная версия) — это динамическая рабочая область с несколькими базами данных KQL, частью Аналитики в режиме реального времени Fabric. Eventhouse предлагает надежное решение для управления и анализа существенных объемов данных в режиме реального времени. Начало работы с руководством по созданию и управлению хранилищем событий.
Февраль 2024 г. Ярлык KQL DB для таблиц Delta Lake поддерживает сопоставление столбцов на основе имен Теперь база данных KQL поддерживает чтение таблиц Delta с сопоставлениями имен столбцов. Функция сопоставления столбцов позволяет столбцам таблиц Delta и базовым столбцам файла Parquet использовать разные имена. Это позволяет выполнять операции эволюции разностной схемы, такие как в таблице Delta без необходимости переписывать базовые файлы Parquet и позволяют пользователям именовать столбцы таблицы Delta с помощью символов, которые не разрешены Parquet.
Февраль 2024 г. Ярлык KQL DB для таблиц Delta Lake поддерживает векторы удаления Теперь база данных KQL может считывать разностные таблицы с векторами удаления, разрешая текущее состояние таблицы, применяя удаления, отмеченные векторами удаления, к последней версии таблицы.
Февраль 2024 г. Получение данных в базе данных KQL теперь поддерживает обработку событий перед приемом через Eventstream Событие Process перед приемом в параметре Eventstream позволяет обрабатывать данные перед приемом в целевую таблицу. Выбрав этот параметр, процесс получения данных без проблем продолжается в eventstream, а сведения о целевой таблице и источнике данных автоматически заполняются.
Февраль 2024 г. KQL DB теперь поддерживает прием данных с помощью Apache Flink С помощью соединителя Flink с открытым кодом можно отправлять данные из Flink в таблицу. С помощью Azure Data Обозреватель и Apache Flink можно создавать быстрые и масштабируемые приложения, предназначенные для сценариев на основе данных.
Февраль 2024 г. Маршрутизация данных из Splunk Universal Forwarder в KQL DB с помощью Kusto Splunk Universal Подключение or Теперь вы можете использовать универсальный Подключение kusto Splunk для отправки данных из Splunk Universal Forwarder в таблицу в базе данных KQL.
Декабрь 2023 г. Вычисление различных счетчиков в Power BI, выполняющих отчеты в базах данных KQL Функции dcount и dcountif базы данных New Fabric KQL используют специальный алгоритм для возврата оценки отдельных счетчиков, даже в очень больших наборах данных. Новые функции count_distinct и count_distinctif вычисляют точные уникальные счетчики.
Декабрь 2023 г. Создание записной книжки с предварительно настроенным подключением к базе данных KQL Теперь вы можете создать новую записную книжку из редактора KQL DB с предварительно настроенным подключением к базе данных KQL и изучить данные с помощью PySpark. Этот параметр создает записную книжку PySpark с готовой к выполнению ячейки кода для чтения данных из выбранной базы данных KQL.
Декабрь 2023 г. Проверка схемы базы данных KQL Новая команда .show database schema violations Kusto была разработана для проверки текущего состояния схемы базы данных и поиска несоответствий. Вы можете использовать нарушения схемы базы данных .show для точечных проверка в базе данных или в службе автоматизации CI/CD.
Декабрь 2023 г. Включение доступности данных базы данных KQL в OneLake Доступность данных базы данных KQL в OneLake означает, что вы можете наслаждаться лучшим из обоих миров. Вы можете запрашивать данные с высокой производительностью и низкой задержкой в базе данных KQL, а также запрашивать те же данные в Delta Parquet с помощью режима Direct Lake Power BI, warehouse, Lakehouse, Notebook и т. д.
Декабрь 2023 г. Изменение структуры игры: аналитика в режиме реального времени Аналитика в режиме реального времени — это грозное средство, снижение сложности и упрощение процессов интеграции данных. Microsoft Fabric позволяет создавать аналитику потоковой передачи в режиме реального времени с помощью потока событий или Spark Stream.
Ноябрь 2023 г. Объявление о поддержке Delta Lake в базе данных KQL в режиме реального времени Теперь можно включить доступность базы данных KQL в формате Delta Lake. Delta Lake — это унифицированный формат таблицы озера данных, выбранный для обеспечения простого доступа к данным во всех вычислительных модулях в Microsoft Fabric.
Ноябрь 2023 г. Аналитика в режиме реального времени в общедоступной версии Microsoft Fabric Объявление о общедоступной доступности аналитики в режиме реального времени в Microsoft Fabric! Аналитика в режиме реального времени предлагает множество функций, направленных на более эффективное и эффективное анализ данных.
Ноябрь 2023 г. Поддержка Delta Parquet в базе данных KQL В рамках одного обещания логического копирования мы рады сообщить о том, что данные в базе данных KQL теперь можно сделать доступными в OneLake в разностном формате parquet. Теперь вы можете получить доступ к этой таблице Delta, создав ярлык OneLake из Lakehouse, Warehouse или непосредственно через режим Direct Lake Power BI.
Ноябрь 2023 г. Подключение для базы данных KQL с открытым кодом Теперь поддерживаются несколько соединителей с открытым кодом для аналитики в режиме реального времени, чтобы пользователи могли получать данные из различных источников и обрабатывать их с помощью KQL DB.
Ноябрь 2023 г. Поддержка REST API для базы данных KQL Мы рады сообщить о запуске общедоступных API REST для KQL DB. Общедоступные ИНТЕРФЕЙСы REST API KQL DB позволяют пользователям управлять и автоматизировать потоки программными средствами.
Ноябрь 2023 г. Теперь общедоступная версия eventstream Поток событий теперь общедоступен, добавляя улучшения, направленные на переход к следующему уровню обработки данных.
Ноябрь 2023 г. Преобразование данных eventstream для базы данных KQL Теперь вы можете преобразовать потоки данных в режиме реального времени в eventstream перед отправкой в базу данных KQL. При создании назначения базы данных KQL в потоке событий можно задать режим приема для параметра "Обработка событий перед приемом" и добавить логику обработки событий, например фильтрацию и агрегирование для преобразования потоков данных.
Ноябрь 2023 г. Предварительная версия надстройки Splunk Надстройка Microsoft Fabric для Splunk позволяет пользователям прием журналов из платформы Splunk в базу данных Fabric KQL с помощью пакета SDK для Python Kusto.
Ноябрь 2023 г. Получение данных из eventstream в любом месте в Fabric Если вы работаете над другими элементами Fabric и ищете прием данных из Eventstream, наша новая функция "Получить данные из eventstream" упрощает процесс, вы можете получить данные из eventstream во время работы с базой данных KQL и Lakehouse.
Ноябрь 2023 г. Два режима приема для назначения Lakehouse Мы представили два разных режима приема для назначения Lakehouse: строки для каждого файла и длительности.
Ноябрь 2023 г. Оптимизация таблиц перед приемом данных в Lakehouse Ярлык оптимизации таблицы теперь доступен внутри назначения Eventstream Lakehouse для сжатия многочисленных небольших потоковых файлов, созданных в таблице Lakehouse. Сочетание клавиш оптимизации таблиц работает путем открытия задания Notebook с помощью Spark, которое будет сжимать небольшие потоковые файлы в целевой таблице Lakehouse.
Ноябрь 2023 г. Создание облачного Подключение в eventstream Мы упростили процесс установления облачного подключения к службам Azure в eventstream. При добавлении ресурса Azure, например Центр Интернета вещей Azure и Центры событий Azure, в поток событий теперь можно создать облачное подключение и ввести учетные данные ресурса Azure прямо в eventstream. Это улучшение значительно улучшает процесс добавления новых источников данных в поток событий, экономии времени и усилий.
Ноябрь 2023 г. Получение данных в аналитике в режиме реального времени: новый и улучшенный интерфейс Новый интерфейс получения данных упрощает процесс приема данных в базе данных KQL.

Примеры и рекомендации для Аналитики в режиме реального времени Synapse

Month Компонент Подробнее
Март 2024 г. Просмотр ресурсов Azure с помощью получения данных Узнайте, как просматривать и подключаться ко всем ресурсам Azure с помощью функций "Обзор Azure" в Get Data. Вы можете легко просматривать ресурсы Azure и подключаться к ресурсам Synapse, хранилища BLOB-объектов или ADLS 2-го поколения.
Ноябрь 2023 г. Семантическая ссылка: проверка данных с помощью больших ожиданий Open Source (GX OSS) — это популярная библиотека Python, которая предоставляет платформу для описания и проверки допустимого состояния данных. Благодаря недавней интеграции семантической связи Microsoft Fabric GX теперь может получить доступ к семантических моделях, что позволяет обеспечить непрерывную совместную работу между специалистами по обработке и анализу данных и бизнес-аналитиками.
Ноябрь 2023 г. Изучение преобразования данных в eventstream для интеграции базы данных KQL Ознакомьтесь с практическим сценарием с использованием данных общего доступа к велосипедам в реальном мире и узнайте, как вычислить количество велосипедов, арендованных каждую минуту на каждой улице, используя мощный обработчик событий Eventstream, освоив преобразования данных в режиме реального времени, и легко направлять обработанные данные в базу данных KQL.

Основные функции Microsoft Fabric

Новости и объявления о функциях для интерфейса Microsoft Fabric.

Month Компонент Подробнее
Март 2024 г. Microsoft Fabric теперь соответствует HIPAA Мы рады сообщить о том, что Microsoft Fabric, наше решение для аналитики по одному для предприятий, достигло новых сертификатов для HIPAA и ISO 27017, ISO 27018, ISO 27001, ISO 27701, ISO 27701.
Март 2024 г. Папка в предварительной версии рабочей области В качестве подразделения в рабочей области папка обращается к этой точке боли, предоставляя иерархическую структуру для организации и управления элементами. Дополнительные сведения см. в статье "Создание папок в рабочих областях (предварительная версия)".
Март 2024 г. Ценовая Copilot структура: пример сквозного примера Copilot В Fabric начинается выставление счетов 1 марта 2024 г. в рамках существующей емкости Power BI Premium или Fabric. Узнайте, как вычисляется использование FabricCopilot.
Март 2024 г. Платформа емкости Обновления для приостановки и возобновления работы, метрик емкости, виртуализированных элементов и рабочих областей для Copilotшлюзов виртуальной сети Платформа емкости Fabric теперь поддерживает отчеты об использовании для приостановки и возобновления работы, виртуализированных элементов и рабочих областей, поддерживающих Copilot, метрики емкости и шлюз виртуальной сети. Дополнительные сведения см. в статье "Платформа емкости" Обновления для приостановки возобновления и метрики емкости для Copilot шлюзов виртуальной сети.
Февраль 2024 г. Управляемые частные конечные точки для Microsoft Fabric (предварительная версия) Управляемые частные конечные точки для Microsoft Fabric (предварительная версия) позволяют безопасно подключаться к источникам данных, которые находятся за брандмауэром или недоступны из общедоступного Интернета. Рабочие области с управляемыми частными конечными точками имеют сетевую изоляцию через управляемую виртуальную сеть, созданную Microsoft Fabric. Дополнительные сведения см. в статье "Знакомство с управляемыми частными конечными точками для предварительной версии Microsoft Fabric".
Февраль 2024 г. Приватный канал Azure поддержка Microsoft Fabric (предварительная версия) Приватный канал Azure для Microsoft Fabric защищает доступ к конфиденциальным данным в Microsoft Fabric, предоставляя сетевую изоляцию и применяя необходимые элементы управления для входящего сетевого трафика. Дополнительные сведения см. в статье "Объявление о поддержке Приватный канал Azure для Microsoft Fabric в предварительной версии".
Февраль 2024 г. Домены в OneLake (предварительная версия) Домены в OneLake помогают упорядочивать данные в логическую сетку данных, позволяя федеративной системе управления и оптимизации для бизнес-потребностей. Теперь можно создавать поддомены, домены по умолчанию для пользователей и перемещать рабочие области между доменами. Дополнительные сведения см. в разделе "Домены Fabric".
Февраль 2024 г. Настраиваемая панель навигации Fabric Теперь вы можете настроить предпочтительную точку входа на панели навигации, включая закрепление общих точек входа и отмену прикрепления редко используемых параметров.
Февраль 2024 г. Постоянные фильтры в рабочей области Теперь вы можете сохранить выбранные фильтры в представлении списка рабочих областей, и они будут автоматически применены при следующем открытии рабочей области.
Декабрь 2023 г. Предварительная версия API Администратор Microsoft Fabric API-интерфейсы fabric Администратор предназначены для упрощения административных задач. Первоначальный набор API-интерфейсов Fabric Администратор предназначен для упрощения обнаружения рабочих областей, элементов Fabric и сведений о доступе пользователей.
Декабрь 2023 г. Изменения хранения рабочей области в Fabric и Power BI Срок хранения для рабочих областей совместной работы настраивается от 7 до 90 дней. Параметр хранения рабочей области включен по умолчанию, а срок хранения по умолчанию — семь дней.
Ноябрь 2023 г. Рабочие нагрузки Fabric теперь общедоступны! Microsoft Fabric теперь общедоступен! Хранилище данных Microsoft Fabric Synapse, Инжиниринг данных и Обработка и анализ данных, аналитика в реальном времени, фабрика данных, OneLake и общая платформа Fabric теперь общедоступна.
Ноябрь 2023 г. Предварительная версия API-интерфейсов пользователей Microsoft Fabric Мы рады сообщить о предварительной версии API-интерфейсов пользователей Microsoft Fabric. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко.

Непрерывная интеграция и непрерывная доставка (CI/CD) в Microsoft Fabric

В этом разделе содержатся руководства и обновления документации по процессу разработки, средствам, управлению версиями и управлению версиями в рабочей области Microsoft Fabric.

Month Компонент Подробнее
Апрель 2024 г. Знакомство с доверенным доступом к рабочей области в конвейерах данных Fabric Создайте конвейеры данных в Fabric, чтобы получить доступ к учетным записям хранения ADLS 2-го поколения с поддержкой брандмауэра с легкостью и безопасностью. Эта функция использует удостоверение рабочей области для обеспечения безопасного и простого подключения между Fabric и учетными записями хранения.
Март 2024 г. Предварительная версия CI/CD для конвейеров данных Fabric Интеграция Git и интеграция со встроенными конвейерами развертывания в конвейеры данных фабрики данных теперь доступна в предварительной версии. Дополнительные сведения см. в разделе "Фабрика данных" добавление CI/CD в конвейеры данных Fabric.
Март 2024 г. Обновления системных файлов для интеграции с Git Автоматически созданные системные файлы item.metadata.json и item.config.json были консолидированы в один системный файл .platform. Дополнительные сведения см. в разделе "Автоматически созданные системные файлы".
Февраль 2024 г. REST API для интеграции с Fabric Git Интерфейсы REST API для интеграции Fabric Git позволяют легко включить интеграцию Fabric Git в сквозной конвейер CI/CD вашей команды, устраняя необходимость запуска действий вручную из Fabric.
Февраль 2024 г. Делегирование параметров интеграции Git Чтобы включить дополнительный контроль над связанными параметрами Git, администратор клиента теперь может делегировать эти параметры администраторам емкости и администраторам рабочих областей с помощью портала администрирования?
Ноябрь 2023 г. API-интерфейсы пользователей Microsoft Fabric Теперь доступны API-интерфейсы пользователей Microsoft Fabric. API-интерфейсы пользователей Fabric являются основными возможностями для предприятий и партнеров, чтобы использовать Microsoft Fabric, так как они обеспечивают комплексное автоматическое взаимодействие со службой, обеспечивают интеграцию Microsoft Fabric с внешними веб-приложениями и, как правило, позволяют клиентам и партнерам масштабировать свои решения более легко.
Ноябрь 2023 г. Записная книжка в предварительной версии конвейера развертывания Теперь вы также можете использовать записные книжки для развертывания кода в разных средах, таких как разработка, тестирование и рабочая среда. Вы также можете использовать правила развертывания для настройки поведения записных книжек при их развертывании, таких как изменение стандартного Lakehouse записной книжки. Приступая к работе с конвейерами развертывания, а записная книжка отображается в содержимом развертывания автоматически.
Ноябрь 2023 г. Предварительная версия интеграции с Записной книжкой Git Записные книжки Fabric теперь предлагают интеграцию Git для управления версиями с помощью Azure DevOps. Это позволяет пользователям легко управлять версиями кода записной книжки и управлять ветвями Git, используя функции Fabric Git и Azure DevOps.
Ноябрь 2023 г. Предварительная версия REST API записной книжки С помощью общедоступных API REST для элементов записной книжки инженеры и специалисты по обработке и анализу данных могут автоматизировать конвейеры и эффективно устанавливать CI/CD. Общедоступный API записной книжки позволяет пользователям легко управлять элементами записных книжек Fabric и интегрировать записную книжку с другими инструментами и системами.
Ноябрь 2023 г. Поддержка Lakehouse для конвейеров интеграции и развертывания Git (предварительная версия) Элемент Lakehouse теперь интегрируется с возможностями управления жизненным циклом в Microsoft Fabric, обеспечивая стандартизированную совместную работу между всеми участниками группы разработки на протяжении всей жизни продукта. Управление жизненным циклом упрощает эффективный процесс управления версиями продуктов и выпуска, постоянно предоставляя функции и исправления ошибок в нескольких средах.
Ноябрь 2023 г. Поддержка SQLPackage для хранилища Fabric SQLPackage теперь поддерживает хранилище Fabric. SqlPackage — это служебная программа командной строки, которая автоматизирует следующие задачи разработки баз данных, предоставляя некоторые из общедоступных API Платформы приложений уровня данных (DacFx). Средство командной строки SqlPackage позволяет указать эти действия вместе с параметрами и свойствами, зависящими от действия.

Примеры непрерывной интеграции и непрерывной доставки (CI/CD)

Month Компонент Подробнее
Март 2024 г. Управление жизненным циклом Microsoft Fabric— начало работы с конвейерами интеграции и развертывания Git Ознакомьтесь с основными компонентами управления жизненным циклом с помощью демонстрационного сценария и изучите, что такое управление жизненным циклом и что это означает в Fabric.

Активатор данных в Microsoft Fabric

Активация данных — это интерфейс без кода в Microsoft Fabric для автоматического выполнения действий при обнаружении шаблонов или условий при изменении данных. В этом разделе приведены последние новые функции и возможности активатора данных в Microsoft Fabric.

Month Компонент Подробнее
Март 2024 г. Новые выражения "Изменения по", "Увеличивается" и "Уменьшается на" При задании условий триггера мы добавили синтаксис, чтобы определить, когда произошло изменение данных по абсолютному числу или проценту. Ознакомьтесь с новыми выражениями "Изменения по", "Увеличивается на" и "Уменьшается на".

Fabric и Microsoft 365

В этом разделе содержатся статьи и объявления об интеграции Microsoft Fabric с Microsoft Graph и Microsoft 365.

Month Компонент Подробнее
Март 2024 г. Анализ таблиц Dataverse из Microsoft Fabric При создании ярлыка в Fabric теперь вы увидите вариант для Dataverse. При выборе этого ярлыка и указании сведений о среде Dataverse можно быстро просматривать и работать с таблицами из этой среды.
Ноябрь 2023 г. Fabric + Microsoft 365 Data: Better Together Microsoft Graph — это шлюз для данных и аналитики в Microsoft 365. Microsoft 365 Интеграция данных для Microsoft Fabric позволяет управлять microsoft 365 вместе с другими источниками данных в одном месте с набором аналитических возможностей.
Ноябрь 2023 г. Соединитель Microsoft 365 теперь поддерживает прием данных в Lakehouse (предварительная версия) Соединитель Microsoft 365 теперь поддерживает прием данных в таблицы Lakehouse.

Миграция

В этом разделе содержатся рекомендации и обновления документации по миграции в Microsoft Fabric.

Month Компонент Подробнее
Февраль 2024 г. Сопоставление выделенных пулов SQL Azure Synapse с вычислительными ресурсами хранилища данных Fabric Ознакомьтесь с рекомендациями по сопоставлению единиц хранилища данных (DWU) из выделенного пула SQL Azure Synapse Analytics с приблизительным числом единиц емкости Fabric (CU).
Ноябрь 2023 г. Миграция из выделенных пулов SQL Azure Synapse Подробное руководство по runbook миграции доступно для миграции из выделенных пулов SQL хранилища данных Azure Synapse в Microsoft Fabric.
Ноябрь 2023 г. Миграция из Azure Synapse Spark в Fabric Подробный набор статей о миграции Azure Synapse Spark в Microsoft Fabric, включая процесс миграции, который может включать несколько сценариев и этапов.

Azure Monitor

В этом разделе содержатся рекомендации и обновления документации по мониторингу емкости и использования Microsoft Fabric, включая центр мониторинга.

Month Компонент Подробнее
Март 2024 г. Поддержка метрик емкости для приостановки и возобновления Метрики емкости Fabric обновлены с новыми системными событиями и логикой выверки, чтобы упростить анализ приостановленных емкостей. Приостановка и возобновление структуры — это функция управления емкостью, которая позволяет приостановить емкость SKU F для управления затратами. Если емкость не работает, ее можно приостановить, чтобы обеспечить экономию затрат, а затем, когда вы хотите возобновить работу с емкостью, которую можно повторно активировать.

Microsoft Purview

В этом разделе приведены последние объявления о возможностях управления и соответствия требованиям с помощью Microsoft Purview в Microsoft Fabric. Дополнительные сведения о защите информации в Microsoft Fabric.

Month Компонент Подробнее
Май 2023 г. Администратор истация, безопасность и управление в Microsoft Fabric Microsoft Fabric предоставляет встроенные возможности управления корпоративными классами и соответствия требованиям, основанные на Microsoft Purview.

Архив

Для более старых обновлений просмотрите предыдущие обновления в Microsoft Fabric.