원클릭 수집이란?What is one-click ingestion?
원클릭 수집을 사용하면 데이터 수집 프로세스를 쉽고 빠르고 직관적으로 수행할 수 있습니다.One-click ingestion makes the data ingestion process easy, fast, and intuitive. 원클릭 수집은 신속하게 램프 업하여 데이터 수집을 시작하고, 데이터베이스 테이블을 만들고, 구조를 매핑하도록 도와줍니다.One-click ingestion helps you ramp-up quickly to start ingesting data, creating database tables, mapping structures. 일회성 또는 지속적인 수집 프로세스로 여러 소스의 데이터를 여러 데이터 형식으로 선택할 수 있습니다.Select data from different kinds of sources in different data formats, either as a one-time or continuous ingestion process.
다음 기능을 사용하면 원클릭 수집을 유용하게 활용할 수 있습니다.The following features make one-click ingestion so useful:
- 수집 마법사가 안내하는 직관적인 환경Intuitive experience guided by the ingestion wizard
- 몇 분 내에 데이터 수집Ingest data in a matter of minutes
- 로컬 파일, BLOB, 컨테이너 등 여러 종류의 소스에서 데이터 수집(최대 10,000개 BLOB)Ingest data from different kinds of sources: local file, blobs, and containers (up to 10,000 blobs)
- 다양한 형식으로 데이터 수집Ingest data in a variety of formats
- 새 테이블 또는 기존 테이블에 데이터 수집Ingest data into new or existing tables
- 테이블 매핑 및 스키마는 자동으로 제안되며 쉽게 변경 가능Table mapping and schema are suggested to you and easy to change
- Event Grid를 사용하여 컨테이너에서 쉽고 빠르게 지속적으로 수집Continue ingestion easily and quickly from a container with Event Grid
원클릭 수집은 데이터를 처음으로 수집하거나 데이터의 스키마가 익숙하지 않은 경우에 특히 유용합니다.One-click ingestion is particularly useful when ingesting data for the first time, or when your data's schema is unfamiliar to you.
필수 구성 요소Prerequisites
- Azure 구독이 아직 없는 경우 시작하기 전에 Azure 체험 계정을 만듭니다.If you don't have an Azure subscription, create a free Azure account before you begin.
- Azure Data Explorer 클러스터 및 데이터베이스를 만듭니다.Create an Azure Data Explorer cluster and database.
- Azure Data Explorer 웹 UI에 로그인하여 클러스터에 연결을 추가합니다.Sign in to the Azure Data Explorer Web UI and add a connection to your cluster.
원클릭 마법사 액세스Access the one-click wizard
원클릭 수집 마법사는 원클릭 수집 프로세스를 안내합니다.The one-click ingestion wizard guides you through the one-click ingestion process.
클러스터의 Azure Data Explorer 시작 홈 화면에서 원클릭 수집 마법사에 액세스하려면 처음 두 단계(클러스터 만들기 및 데이터베이스 만들기)를 완료한 다음, 새 데이터 수집 을 선택합니다.To access the one-click ingestion wizard from the Welcome to Azure Data Explorer home screen in your cluster, complete the first two steps (cluster creation and database creation) and then select Ingest new data.
Azure Data Explorer 웹 UI에서 마법사에 액세스하려면 Azure Data Explorer 웹 UI의 왼쪽 메뉴에서 데이터베이스 또는 테이블 을 마우스 오른쪽 단추로 클릭하고 새 데이터 수집 을 선택합니다.To access the wizard from the Azure Data Explorer web UI, right-click the database or table row in the left menu of the Azure Data Explorer web UI and select Ingest new data.
Azure Portal에서 마법사에 액세스하려면 왼쪽 메뉴에서 쿼리 를 선택하고 데이터베이스 또는 테이블 을 마우스 오른쪽 단추로 클릭한 다음, 새 데이터 수집 을 선택합니다.To access the wizard from the Azure portal, select Query from the left menu, right-click on the database or table, and select Ingest new data.
원클릭 수집 마법사One-click ingestion wizard
참고
이 섹션에서는 마법사의 일반적인 내용을 설명합니다.This section describes the wizard in general. 선택하는 옵션은 수집하는 데이터 형식, 데이터를 수집하는 데이터 원본 유형, 새 테이블 또는 기존 테이블 중 어디에 수집할 것인지에 따라 달라집니다.The options you select depend on what data format you are ingesting, what kind of data source you are ingesting from, and whether you are ingesting into a new or existing table.
샘플 시나리오는 다음을 참조하세요.For sample scenarios, see:
- 컨테이너의 새 테이블에 CSV 형식으로 수집Ingest into a new table from a container in CSV format
- 로컬 파일의 기존 테이블에 JSON 형식으로 수집Ingest into an existing table from a local file in JSON format
이 마법사는 다음 옵션을 안내합니다.The wizard guides you through the following options:
- 기존 테이블에 수집Ingest into an existing table
- 새 테이블에 수집Ingest into a new table
- 다음에서 데이터를 수집합니다.Ingest data from:
- Blob StorageBlob storage
- 로컬 파일A local file
- 컨테이너A container
스키마 매핑Schema mapping
서비스에서 스키마 및 수집 속성을 자동으로 생성하며, 사용자가 변경할 수 있습니다.The service automatically generates schema and ingestion properties, which you can change. 사용자는 새 테이블과 기존 테이블 중 어디에 수집할 것인지에 따라 기존 매핑 구조를 사용할 수도 있고 새로 만들 수도 있습니다.You can use an existing mapping structure or create a new one, depending on if you're ingesting to a new or existing table.
스키마 탭에서 다음 작업을 수행합니다.In the Schema tab, do the following actions:
- 자동 생성된 압축 형식을 확인합니다.Confirm the autogenerated compression type.
- 데이터 형식을 선택합니다.Choose the format of your data. 여러 형식을 사용하면 추가 변경 작업을 수행할 수 있습니다.Different formats will allow you to make further changes.
파일 형식File formats
원클릭 수집은 수집을 위해 Azure Data Explorer에서 지원하는 모든 데이터 형식의 소스 데이터에서 수집을 지원합니다.One-click ingestion supports ingesting from source data in all data formats supported by Azure Data Explorer for ingestion.
편집기 창Editor window
편집기 창에서 데이터 테이블 열을 필요한 대로 조정할 수 있습니다.In the Editor window, you can adjust data table columns as necessary.
테이블 유형입니다.Table type | 사용 가능한 열 조정Available column adjustments |
---|---|
새로 만들기New | 새 열, 열 삭제, 열 업데이트, 오름차순 정렬, 내림차순 정렬New column, Delete column, Update column, Sort ascending, Sort descending |
ExistingExisting | 새 열, 열 업데이트, 오름차순 정렬, 내림차순 정렬New column, Update column, Sort ascending, Sort descending |
참고
언제든지 편집기 창 위에 있는 명령 편집기를 열 수 있습니다.At any time, you can open the command editor above the Editor pane. 명령 편집기에서는 사용자 입력으로부터 생성된 자동 명령을 살펴보고 복사할 수 있습니다.In the command editor, you can view and copy the automatic commands generated from your inputs.
매핑 변환Mapping transformations
일부 데이터 형식 매핑(Parquet, JSON 및 Avro)은 간단한 수집 시간 변환을 지원합니다.Some data format mappings (Parquet, JSON, and Avro) support simple ingest-time transformations. 매핑 변환을 적용하려면 편집기 창에서 열을 만들거나 업데이트합니다.To apply mapping transformations, create or update a column in the Editor window.
매핑 변환은 형식 문자열 또는 날짜/시간의 열에서 수행할 수 있으며 원본 의 데이터 형식이 int 또는 long입니다.Mapping transformations can be performed on a column of Type string or datetime, with the Source having data type int or long. 지원되는 매핑 변환은 다음과 같습니다.Supported mapping transformations are:
- DateTimeFromUnixSecondsDateTimeFromUnixSeconds
- DateTimeFromUnixMillisecondsDateTimeFromUnixMilliseconds
- DateTimeFromUnixMicrosecondsDateTimeFromUnixMicroseconds
- DateTimeFromUnixNanosecondsDateTimeFromUnixNanoseconds
자세한 내용은 매핑 변환을 참조하세요.For more information, see mapping transformations.
데이터 수집Data ingestion
스키마 매핑과 열 조작을 완료하면 수집 마법사가 데이터 수집 프로세스를 시작합니다.Once you have completed schema mapping and column manipulations, the ingestion wizard will start the data ingestion process.
컨테이너가 이닌 원본에서 데이터를 수집하는 경우 수집이 즉시 적용됩니다.When ingesting data from non-container sources, the ingestion will take immediate effect.
데이터 원본이 컨테이너 인 경우:If your data source is a container:
- Azure Data Explorer의 일괄 처리 정책은 데이터를 집계합니다.Azure Data Explorer's batching policy will aggregate your data.
- 수집 후에는 수집 보고서를 다운로드하여 해결된 각 BLOB의 성능을 검토할 수 있습니다.After ingestion, you can download the ingestion report and review the performance of each blob that was addressed.
- 지속적인 수집 만들기 를 선택하고 Event Grid를 사용하여 지속적인 수집을 설정할 수 있습니다.You can select Create continuous ingestion and set up continuous ingestion using Event Grid.
초기 데이터 탐색Initial data exploration
수집 후에는 마법사에서 데이터의 초기 탐색을 위한 빠른 명령 옵션을 제공합니다.After ingestion, the wizard gives you options to use Quick commands for initial exploration of your data.
다음 단계Next steps
- Azure Data Explorer에서 원클릭 수집을 사용하여 로컬 파일의 JSON 데이터를 기존 테이블에 수집Use one-click ingestion to ingest JSON data from a local file to an existing table in Azure Data Explorer
- Azure Data Explorer에서 원클릭 수집을 사용하여 컨테이너의 CSV 데이터를 새 테이블에 수집Use one-click ingestion to ingest CSV data from a container to a new table in Azure Data Explorer
- Azure Data Explorer 웹 UI에서 데이터 쿼리Query data in Azure Data Explorer Web UI
- Kusto 쿼리 언어를 사용하여 Azure Data Explorer에 대한 쿼리 작성Write queries for Azure Data Explorer using Kusto Query Language