Microsoft Syntex 추출기 만들기

아티클
02/21/2024

^{적용 대상: ✓ 비정형 문서 처리}

특정 문서 유형의 식별 및 분류를 자동화하기 위해 분류자 모델을 만들기 전 또는 후에, 모델에 추출기를 추가하여 해당 문서에서 필요에 따라 특정 정보를 가져오도록 할 수 있습니다. 예를 들어, 문서 라이브러리에 추가된 모든 계약 갱신 문서를 식별할 뿐만 아니라 각 문서의 서비스 시작 날짜를 문서 라이브러리의 열 값으로 표시하도록 할 수 있습니다.

추출하려는 문서의 각 엔터티에 대해 추출기를 만들어야 합니다. 이 예제에서는 모델로 식별되는 각 계약 갱신 문서에 대한 서비스 시작 날짜를 추출하려고 합니다. 각 문서의 서비스 시작 날짜 값을 보여 주는 열이 있는 모든 계약 갱신 문서의 문서 라이브러리에서 보기를 볼 수 있습니다.

참고

추출기를 만들려면, 분류자를 학습시키기 위해 기존에 업로드했던 동일 파일을 이용합니다.

추출기 이름 짓기

모델 홈페이지의 추출기 만들기 및 학습 타일에서 추출기 학습을 선택합니다.
새로운 엔터티 추출기 화면에서 새로운 추출기 이름 필드에 추출기 이름을 입력합니다. 예를 들어 각 계약 갱신 문서에서 서비스 시작 날짜를 추출하려는 경우 서비스 시작 날짜를 이름으로 입력합니다. 이전에 만든 열(예: 관리된 메타데이터 열)을 다시 사용하도록 선택할 수도 있습니다.

기본적으로 열 형식은 텍스트의 한 줄입니다. 열 형식을 변경하려면 고급 설정>열 유형을 선택한 다음 사용할 형식을 선택합니다.

참고

열 형식이 텍스트 한 줄인 추출기의 경우 최대 문자 제한은 255입니다. 제한을 초과하여 선택한 모든 문자가 잘립니다. 255자보다 큰 문자를 선택하려면 추출기를 만들 때 여러 줄의 텍스트 열 형식을 선택합니다.

기본적으로 추가할 수 있는 텍스트 양에 대한 제한으로 여러 줄 의 텍스트 열이 만들어집니다. 이 경우 추출된 텍스트가 잘린 것처럼 보일 수 있습니다. 이 경우 열 설정 문서 라이브러리에서 무제한 길이 허용 을 사용하여 제한을 제거할 수 있습니다.
입력이 끝나면 만들기를 선택합니다.

레이블 추가

다음 단계는 학습 파일 예제에 추출하려는 엔터티에 레이블을 지정하는 것입니다.

추출기 만들기를 선택하면 추출기 페이지가 열립니다. 여기 뷰어에 표시된 목록의 첫번째 파일과 함께 샘플 파일 목록이 표시됩니다.

뷰어에서 파일로부터 추출하려는 데이터를 선택합니다. 예를 들어 시작 서비스 날짜를 추출하려면 첫 번째 파일(2022년 10월 14일 월요일)의 날짜 값을 강조 표시합니다. 그런 다음 저장을 선택합니다. 해당 파일의 값은 레이블된 예제 목록에서 레이블 열에 표시됩니다.
다음 파일을 선택하여 자동 저장하고 뷰어의 목록에서 다음 파일을 엽니다. 또는 저장을 선택한 다음 레이블된 예제 목록에서 다른 파일을 선택합니다.
뷰어에서 1 단계와 2 단계를 반복하여 5개 파일 모두의 레이블을 저장합니다.

5개 파일의 레이블이 지정되면 학습으로 이동하라는 알림 배너가 표시됩니다. 더 많은 문서를 레이블 지정하거나, 다음 교육으로 넘어갈 수 있습니다.

찾기를 사용하여 파일 검색

찾기 기능을 사용하여 레이블을 지정하려는 엔터티를 검색할 수 있습니다.

파일에서 찾습니다.

찾기 기능은 큰 문서를 검색하거나 문서에 엔터티 인스턴스가 여러 개 있는 경우에 유용합니다. 인스턴스가 여러 개 있는 경우, 검색 결과에 필요한 인스턴스를 선택하여 뷰어에서 해당 위치로 이동하여 레이블을 지정할 수 있습니다.

설명 추가하기

이 예제에서는 엔터티 형식 자체와 샘플 문서에 있을 수 있는 변형에 대한 힌트를 제공하는 설명을 만듭니다. 예를 들어 날짜 값은 다음과 같은 여러 가지 형식일 수 있습니다.

10/14/2022
2022년 10월 14일
2022년 10월 14일 월요일

서비스 시작 날짜를 식별하는 데 도움이 되도록 패턴 설명을 만들 수 있습니다.

설명 섹션에서 신규를 선택한 다음 이름(예: 날짜)을 입력합니다.
입력에서 패턴 목록을 선택합니다.
값으로 샘플 파일에 표시되는 날짜 변형을 제공합니다. 예를 들어 0000/00/0으로 표시되는 날짜 형식이 있는 경우 문서에 표시되는 모든 변형을 다음과 같이 입력합니다.
- 0000/0/0
- 0000/0/00
- 0000/00/0
- 0000/00/00
저장을 선택합니다.

참고

설명 유형에 대한 자세한 내용은 설명 유형을 참조하세요.

설명 라이브러리 사용

날짜와 같은 항목에 대한 설명을 만드는 경우 모든 변형을 수동으로 입력하는 것보다 설명 라이브러리를 사용하는 것이 더 쉽습니다. 설명 라이브러리는 미리 작성된 구 및 패턴 설명 집합입니다. 라이브러리는 날짜, 전화 번호, 우편 번호 등과 같은 일반적인 구 또는 패턴 목록에 대한 모든 형식을 제공하려고 합니다.

서비스 시작 날짜 샘플의 경우 설명 라이브러리에서 Date에 대해 미리 빌드된 설명을 사용하는 것이 더 효율적입니다.

설명 섹션에서 신규를 선택한 다음 설명 라이브러리 이용을 선택합니다.
설명 라이브러리에서 날짜를 선택합니다. 인식되는 모든 날짜 변형을 볼 수 있습니다.
추가를 선택합니다.
설명 만들기 페이지에서 설명 라이브러리의 날짜 정보가 필드에 자동으로 채워집니다. 저장을 선택합니다.

모델 학습시키기

설명을 저장하면 학습이 시작됩니다. 모델에 레이블이 지정된 예제 파일에서 데이터를 추출할 수 있는 충분한 정보가 있는 경우 일치로 레이블이 지정된 각 파일이 표시됩니다.

일치.

설명에 추출할 데이터를 찾기에 충분한 정보가 없는 경우 각 파일에 불일치 레이블이 지정됩니다. 일치하지 않는 파일을 선택하여 일치하지 않는 이유에 대한 자세한 정보를 볼 수 있습니다.

다른 설명 추가

종종 불일치는 제공된 설명이 레이블이 지정된 파일과 일치하도록 서비스 시작 날짜 값을 추출하기에 충분한 정보를 제공하지 못했음을 나타냅니다. 편집하거나 다른 설명을 추가해야 할 수 있습니다.

이 예제에서는 서비스 날짜 시작 텍스트 문자열이 항상 실제 값보다 우선한다는 것에 주목하세요. 서비스 시작 날짜를 식별하기 위해 구 설명을 만들어야 합니다.

설명 섹션에서 신규를 선택한 다음 이름(예: 접두사 문자열)을 입력합니다.
입력에서 구 목록을 선택합니다.
서비스 시작 날짜를 값으로 사용합니다.
저장을 선택합니다.

모델 다시 학습시키기

설명을 저장 하면 이번에는 예제에서 두 가지 설명을 모두 사용하여 학습을 다시 시작합니다. 사용자의 모델이 레이블된 예제 파일에서 데이터를 추출하는 데 필요한 정보를 충분히 가지고 있을 경우 각 파일에 일치라고 표시됩니다.

레이블이 지정된 파일에 불일치가 다시 표시된 경우 문서 유형 식별을 위해 더 많은 정보를 모델에게 제공하도록 또 다른 설명을 만들거나 기존 설명을 수정하도록 해야 합니다.

모델 테스트하기

레이블이 지정된 샘플 파일에 일치를 받은 경우 이제 레이블 지정되지 못한 남은 예제 파일에서 모델을 테스트할 수 있습니다. 이 단계는 선택 사항이지만 모델이 이전에 보지 못한 파일에서 테스트하여 모델을 사용하기 전에 모델의 "적합성" 또는 준비 상태를 평가하는 데 유용합니다.

모델 홈페이지에서 테스트 탭을 선택합니다. 그러면 레이블이 지정되지 않은 샘플 파일에서 모델이 실행됩니다.
테스트 파일 목록에서 해당 모델이 필요한 정보를 추출할 수 있는지 여부를 보여 주는 예제 파일이 표시됩니다. 이 정보를 사용하여 문서를 식별하는 데 필요한 분류자의 효율성을 알아낼 수 있습니다.

추출기 추가 구체화

중복 엔터티가 있고 값 하나 또는 특정 수의 값만 추출하려는 경우 규칙을 설정하여 처리 방법을 지정할 수 있습니다. 추출된 정보를 구체화하는 규칙을 추가하려면 다음 단계를 수행합니다.

모델 홈 페이지의 엔터티 추출기 섹션에서 구체화할 추출기를 선택한 다음 추출된 정보 구체화를 선택합니다.
추출된 정보 구체화 페이지에서 다음 규칙 중 하나를 선택합니다.
- 첫 번째 값 중 하나 이상 유지
- 마지막 값 중 하나 이상 유지
- 중복 값 제거
- 첫 번째 줄 중 하나 이상 유지
- 마지막 줄 중 하나 이상 유지
사용할 줄 또는 값의 수를 입력한 다음 구체화를 선택합니다.
줄 또는 값 수를 변경하여 규칙을 편집하려면 편집할 추출기를 선택하고 추출된 정보 구체화를 선택하고 숫자를 변경한 다음 저장을 선택합니다.
추출기를 테스트할 때 테스트 파일 목록의 구체화 결과 열에서 구체화를 볼 수 있습니다.
추출기에서 구체화 규칙을 삭제하려면 규칙을 제거할 추출기를 선택하고 추출된 정보 구체화를 선택한 다음 삭제를 선택합니다.