사전 준비사항

주의 사항¶

개인정보를 포함하지 않도록 데이터 전송 전 마스킹 처리가 필수적으로 진행되어야 합니다.
로그 배치는 백업하는 테이블 데이터를 원본 그대로 저장합니다.
- 스트리밍 방식의 Fluentd나 클라이언트 로그 전송은 IP 등의 기본적인 데이터 파싱 처리를 수행하지만, 로그 배치 방식은 데이터 파싱 처리가 되지 않습니다.
로그 데이터는 dateTime과 category 컬럼이 필수 입니다.
로그 배치 전송은 대량 데이터를 한번에 업로드 하기 위한 기능 입니다. 그러므로, 행 기준으로 나누어진 여러개의 파일은 1개의 파일로 모아서 업로드하고, 실시간 데이터는 클라이언트 로그 전송이나 스트리밍 Fluentd 기능을 사용해주세요.

로그 정의 방식을 통해 사전에 로그 스키마를 지정해 놓아야 합니다.
로그 정의에 대한 상세 내용은 로그 정의하기에서 확인할 수 있습니다.
- 로그 정의에서 설정하는 테이블명은 category 값과 동일해야 합니다.
- 로그 정의를 하지 않고 로그 배치 전송 시 데이터 적재가 되지 않습니다.
로그 배치는 로그 정의 시 dateTime, category를 필수 컬럼으로 사용합니다. 미전송 시 적재 되지 않습니다.
로그 정의 수행 시 애널리틱스에서 사용하는 예약 필드가 포함 될 수 있습니다.

배치 파일 로그는 두 가지 필수 컬럼을 가집니다.

컬럼명	데이터 타입	설명	샘플
dateTime	TIMESTAMP	로그 배치를 추출 또는 업로드 일시 - timezone 제외 (KST)	"YYYY-MM-DD hh:mm:ss"
category	STRING	로그 수집 백오피스에서 설정하는 카테고리 ID	"account_table_snapshot"