CloudWatch Logs Insights를 사용한 로그 분석

간단하지만 강력한 몇 가지 명령이 포함된 특별히 구축된 Logs Insights 쿼리 언어(Logs Insights QL)입니다.

OpenSearch Service Piped Processing Language(PPL) OpenSearch PPL을 사용하면 파이프(|)로 구분된 명령 세트를 사용하여 로그를 분석할 수 있습니다.

OpenSearch PPL을 사용하면 함께 파이프되는 명령을 사용하여 데이터를 검색, 쿼리 및 분석할 수 있으므로 복잡한 쿼리를 더 쉽게 이해하고 구성할 수 있습니다. 구문을 사용하면 명령을 연결하여 데이터를 변환하고 처리할 수 있습니다. PPL을 사용하면 데이터를 필터링 및 집계하고 분석에 풍부한 수학, 문자열, 날짜, 조건부 및 기타 함수 집합을 사용할 수 있습니다.

OpenSearch Service Structured Query Language(SQL)입니다. OpenSearch SQL 쿼리를 사용하면 선언적 방식으로 로그를 분석할 수 있습니다. SELECT, FROM, WHERE, GROUP BY, HAVING 등의 명령과 SQL에서 사용할 수 있는 기타 다양한 명령 및 함수를 사용할 수 있습니다. 로그 그룹 간에 JOINs 실행하고, 하위 쿼리를 사용하여 로그 간에 데이터를 상호 연관시키고, 풍부한 JSON, 수학, 문자열, 조건부 및 기타 SQL 함수 세트를 사용하여 로그에 대한 강력한 분석을 수행할 수 있습니다.

SQL 또는 PPL 명령을 사용하는 경우 필드를 성공적으로 쿼리하려면 특수 문자(비영숫자 및 비숫자)가 포함된 필드를 백틱으로 묶어야 합니다. 예를 들어 , Operation.Export및 @message를 백틱Test::Field으로 묶습니다. 순전히 알파벳 이름의 필드를 백틱으로 묶을 필요는 없습니다.

Amazon Route 53, AWS Lambda AWS CloudTrail및 Amazon VPC와 같은 서비스의 로그 AWS 에서 로그 필드를 자동으로 검색하고 로그 이벤트를 JSON으로 내보내는 애플리케이션 또는 사용자 지정 로그를 자동으로 검색합니다.

특히 많은 수의 로그 그룹 또는 로그 이벤트 쿼리의 경우 비용을 절감하고 결과를 가속화하는 필드 인덱스를 생성합니다. 로그 이벤트에서 일반적인 필드의 필드 인덱스를 생성한 후 쿼리에서에서 사용할 수 있습니다. 쿼리는 인덱싱된 필드를 포함하지 않는 것으로 알려진 로그 이벤트 처리를 건너뛰고 더 적은 데이터를 처리합니다.

로그 이벤트의 패턴 감지 및 분석. 패턴은 로그 필드 간에 반복되는 공유 텍스트 구조입니다. 쿼리 결과를 볼 때 패턴 탭을 선택하면 결과 샘플을 기반으로 CloudWatch Logs가 발견한 패턴을 볼 수 있습니다.

쿼리 저장, 쿼리 기록 보기, 저장된 쿼리 다시 실행. 그러면 복잡한 쿼리를 실행해야 할 때마다 다시 만들지 않고도 실행할 수 있습니다.

대시보드에 쿼리 추가.

를 사용하여 쿼리 결과 암호화 AWS Key Management Service.

자연어를 사용한 쿼리 생성.

Infrequent Access 로그 클래스에서 로그 쿼리.

로그 그룹의 로그 이벤트를 이전 기간의 로그 이벤트와 비교하는 비교 쿼리입니다.

쿼리가 지정한 필드 인덱스가 포함된 로그 이벤트만 스캔하도록 강제하는 filterIndex 명령입니다.