2021년 6월

이러한 기능 및 Azure Databricks 플랫폼 개선 사항은 2021년 6월에 릴리스되었습니다.

참고 항목

릴리스가 준비되었습니다. Azure Databricks 계정은 초기 릴리스 날짜 후 일주일 이상까지 업데이트되지 않을 수 있습니다.

수정: Git에 대한 리포지토리는 일부 지역의 신규 및 기존 작업 영역에서 기본적으로 사용하도록 설정됩니다.

2021년 6월 30일

2021년 6월 2일 릴리스 정보에서 Databricks는 일부 지역의 새 작업 영역에서 기본적으로 Git용 Repos를 사용하도록 설정되어 있다고 발표했지만, Notebook Git 버전 관리가 이미 활성화된 경우 Git용 Repos가 기존 작업 영역에서도 사용하도록 설정된다는 중요한 세부 정보가 생략되었습니다. 원래 릴리스 노트가 업데이트되었습니다.

기능 저장소 권한으로 변경

2021년 6월 28일~7월 6일: 버전 3.49

기능 테이블에 대한 CAN_VIEW_METADATA 권한이 있는 사용자는 이제 온라인 스토어에 게시할 수 있습니다.

MLflow 실행 테이블의 결과에 대한 액세스 향상

2021년 6월 28일~7월 6일: 버전 3.49

MLflow 실행 테이블을 변경하면 결과에 더 빠르게 액세스할 수 있습니다.

• 이제 메트릭 열이 매개 변수 열 앞에 표시되므로 가장 적합한 실행을 더 쉽게 식별할 수 있습니다.
• 이제 시작 시간 열에 시작 시간이 아니라 실행 기간이 표시됩니다. 이렇게 하면 열 너비가 줄어들고 가로로 스크롤할 필요 없이 더 많은 정보를 볼 수 있습니다. 시작 시간을 표시하려면 열의 값을 마우스로 가리킵니다.

델타 라이브 테이블에 대한 더 나은 비용 표시

2021년 6월 28일~7월 6일: 버전 3.49

새 파이프라인을 만들거나 파이프라인 세부 정보 UI를 볼 때 이제 Delta Live Tables 기본 클러스터에 대한 시간당 DBU가 표시됩니다.

Delta Live 테이블에 대한 향상된 데이터 품질 제약 조건

2021년 6월 28일~7월 6일: 버전 3.49

이제 expect_all_or_fail, expect_all_or_drop 및 expect_all Python API를 사용하여 Delta Live Tables 데이터 세트에 여러 데이터 품질 제약 조건을 정의할 수 있습니다. 이러한 API는 파이프라인에서 하나 이상의 데이터 세트에 일반적인 기대치의 라이브러리를 적용할 때 유용합니다. 자세한 내용은 Delta Live Tables 데이터로 품질 관리를 참조하세요.

IP 주소 목록 업데이트 및 바꾸기를 위한 API 변경 내용

2021년 6월 28일~7월 6일: 버전 3.49

Databricks REST API 2.0의 /ip-access-lists/<list-id>에 대한 새 PATCH 작업을 통해 기존 IP 주소 목록의 개별 값을 프로그래밍 방식으로 업데이트할 수 있습니다. 자세한 내용은 IP 액세스 목록 업데이트를 참조하세요.

Databricks REST API 2.0의 /ip-access-lists/<list-id>에 대한 기존 PUT 작업을 통해 목록의 원래 내부 ID를 유지하면서 기존 IP 주소 목록의 콘텐츠를 프로그래밍 방식으로 바꿀 수 있습니다. 자세한 내용은 IP 액세스 목록 바꾸기를 참조하세요.

Databricks ODBC 드라이버 2.6.17

2021년 6월 22일

Databricks ODBC 드라이버 버전 2.6.17을 릴리스했습니다(다운로드). 이 릴리스에는 데이터를 BI 도구로 더 빠르게 가져오기 위해 클라우드 스토리지를 통해 병렬로 데이터를 가져오는 메커니즘인 Cloud Fetch에 대한 지원이 추가되었습니다. 또한 이 릴리스는 클라이언트와 Databricks Runtime 간의 불필요한 왕복을 제거하여 대기 시간을 줄입니다. BI Tools를 사용하여 높은 대역폭 연결을 달성한 방법을 참조하세요.

Databricks Runtime 7.5 시리즈 지원 종료

2021년 6월 16일

Databricks Runtime 7.5, Machine Learning Databricks Runtime 7.5, Genomics용 Databricks Runtime 7.5에 대한 지원은 6월 16일에 종료되었습니다. Databricks Runtime 지원 수명 주기를 참조하세요.

드라이버 노드 및 작업자 노드에 대해 다른 풀을 사용하여 성능 및 제어 비용 최적화

2021년 6월 14~21일: 버전 3.48

이제 클러스터를 드라이버 노드 및 작업자 노드의 다른 풀에 연결하여 최적화할 수 있습니다. 예를 들어, 드라이버 노드에 대한 컴퓨팅 최적화 풀과 노드에 대한 스토리지 최적화 풀을 사용할 수 있습니다. 또한 각 인스턴스 풀에 서로 다른 태그를 할당하여 비용을 제어할 수 있습니다. 선택하는 경우 드라이버 및 작업자 노드에 동일한 풀을 사용할 수 있습니다.

자세한 내용은 풀 구성 참조를 참조하세요.

모델 레지스트리에 대한 레지스트리 전체 권한

2021년 6월 14~21일: 버전 3.48

이제 작업 영역의 모델 레지스트리에 있는 모든 모델에 대한 기본 모델 권한을 설정할 수 있습니다. 이 수준에서 설정된 권한은 해당 작업 영역의 모델 레지스트리에 등록된 모든 신규 및 기존 모델에 적용됩니다. 자세한 내용은 MLFlow 모델 ACL을 참조 하세요.

SCIM API를 사용하여 사용자를 삭제할 때 사용자의 홈 디렉터리가 더 이상 보호되지 않습니다.

2021년 6월 14~21일: 버전 3.48

SCIM API를 사용하여 사용자를 삭제하면 사용자의 홈 디렉터리가 더 이상 보호되지 않으며 작업 영역 관리자가 삭제할 수 있습니다. 이 동작은 관리 콘솔을 사용하여 사용자를 삭제할 때 발생하는 동작과 일치합니다.

Databricks Runtime 8.3 및 8.3 ML은 GA입니다. 8.3 Photon은 공개 미리 보기 상태입니다.

2021년 6월 8일

이제 Databricks Runtime 8.3 및 8.3 ML이 일반 공급됩니다. 8.3 Photon은 공개 미리 보기로 제공됩니다.

자세한 내용은 Databricks Runtime 8.3(지원되지 않음) 및 ML용 Databricks Runtime 8.3(지원되지 않음)의 전체 릴리스 정보를 참조하세요.

Python 및 SQL GA(테이블 액세스 제어)

2021년 6월 8일

테이블 액세스 제어를 사용하면 Azure Databricks 뷰 기반 액세스 제어 모델을 사용하여 프로그래밍 방식으로 데이터에 대한 액세스 권한을 부여하고 취소할 수 있습니다. 테이블 액세스 제어는 SQL 전용 및 Python 및 SQL이라는 두 가지 버전으로 제공됩니다. 이전에는 SQL 전용 테이블 액세스 제어만 일반 공급되었습니다. 이제 Python 및 SQL 테이블 액세스 제어가 일반 공급됩니다. 클러스터에서 Hive 메타스토어 테이블 액세스 제어 사용(레거시)을 참조하세요.

작업 UI 및 API는 이제 작업 실행의 소유자를 표시합니다.

2021년 6월 2~7일: 버전 3.47

이제 작업 UI 및 API에 작업을 실행할 사용자가 포함되므로 작업 권한을 더 쉽게 이해하고, 디버그하고, 감사할 수 있습니다. 이는 작업 액세스 제어를 사용하지 않도록 설정한 경우 작업 작성자에게 설정된 읽기 전용 값이거나 작업 액세스 제어를 사용하도록 설정한 경우 작업의 is_owner 권한입니다. 작업 권한 관리에 대한 자세한 내용은 작업에 대한 액세스 제어를 참조 하세요.

비밀을 사용하여 중요한 Spark 구성 속성 및 환경 변수 보호(공개 미리 보기)

2021년 6월 7일

비밀을 사용하여 중요한 Spark 구성 속성 및 환경 변수 보호할 수 있습니다. 검색된 비밀은 Notebook 출력과 Spark 드라이버 및 실행기 로그에서 수정됩니다. 비밀을 참조하세요.

현재 Spark 구성에서 일반 텍스트 암호를 사용하는 경우 Databricks는 암호를 회전하고 Spark 구성에서 비밀 경로를 사용하는 것이 좋습니다.

Git에 대한 리포지토리는 일부 지역의 새 작업 영역과 기존 작업 영역에서 기본적으로 사용하도록 설정됩니다.

2021년 6월 2일

이 릴리스 정보는 2021년 6월 30일에 업데이트되었습니다.

새 작업 영역 및 Notebook Git 버전 관리를 사용하도록 설정된 기존 작업 영역의 경우 이제 일부 지역에서 Git용 Repos를 기본적으로 사용하도록 설정됩니다. 기본 Repos 사용 설정은 향후 몇 개월 내에 더 많은 지역에 출시될 예정입니다. Repos를 직접 사용하거나 사용하지 않도록 설정하고 작업 영역에 대한 설정을 확인하는 방법을 알아보려면 Databricks Git 폴더와 Git 통합을 참조 하세요.

다시 디자인된 작업 영역 설정 UI

2021년 6월 2~7일: 버전 3.47

관리 콘솔의 새 작업 영역 설정 탭은 간소화된 작업 영역 구성을 위해 작업 영역 스토리지, 액세스 제어 목록 및 고급 탭을 대체합니다.

ListTokens 업데이트 및 ListAllTokens 데이터베이스 쿼리가 만료된 토큰

2021년 6월 2~7일: 버전 3.47

데이터베이스 쿼리 ListTokens 또는 ListAllTokens이(가) 만료된 토큰을 더 이상 반환하지 않습니다. 무기한 토큰(expiryTime이(가) -1(으)로 설정된 토큰)이 반환됩니다.

이제 관리 권한을 부여하거나 취소할 때 확인이 필요합니다.

2021년 6월 2~7일: 버전 3.47

이제 관리자 사용자가 웹 UI에서 관리자 권한을 부여하거나 해지할 때 확인 대화 상자가 나타납니다.

웹 UI의 바로 가기 키 변경

2021년 6월 2~7일: 버전 3.47

Notebook에서 바로 가기 키 목록을 여는 방법이 변경되었습니다. 목록을 열려면 아이콘을 클릭합니다.