인기 검색어

시스템 로그 분석

LinuxBeginner
지금 연습하기

소개

시스템 로그는 리눅스에서 보안 사고를 조사하거나 시스템 오류를 해결할 때 가장 중요한 정보원입니다. 로그는 사용자 인증부터 커널 메시지에 이르기까지 서버에서 발생하는 거의 모든 일을 기록합니다.

로그가 중요한 이유는 대부분의 공격이 명백한 피해를 입히기 전에 흔적을 남기기 때문입니다. 로그인 실패, 비정상적인 sudo 사용, 서비스 중단, 설정 변경, 이상한 프로세스 활동 등은 대개 로그에 먼저 나타납니다. 숙련된 분석가는 로그를 단순한 배경 소음이 아니라 시스템이 겪은 일을 설명하는 타임라인으로 다룹니다.

이 실습에서는 시스템 관리자의 관점에서 grep 및 awk와 같은 강력한 명령줄 텍스트 처리 도구를 사용하여 표준 리눅스 시스템 로그를 분석하는 방법을 배웁니다. 구체적으로는 인증 로그를 파싱하여 시뮬레이션된 SSH 무차별 대입 로그인 시도를 탐지하고, sudo 권한으로 실행된 명령을 추적합니다.

시스템 로그 위치 확인

이 단계에서는 리눅스 시스템 로그의 위치와 구조를 파악합니다.

위협을 검색하기 전에 각 로그 소스가 어떤 증거를 담고 있는지 이해하는 것이 중요합니다. auth.log는 신원 및 권한 이벤트에 집중하며, syslog는 더 광범위하게 여러 서비스의 메시지를 포함합니다. 각 파일의 역할을 알면 모든 파일을 무작정 grep으로 뒤지는 대신 올바른 위치를 찾아볼 수 있습니다.

일반적으로 리눅스 시스템 로그는 /var/log 디렉토리에 저장됩니다. 보안 분석을 위해 가장 중요한 두 가지 로그 파일은 다음과 같습니다.

  • auth.log: SSH 로그인 및 sudo 사용과 같은 모든 인증 관련 이벤트를 기록합니다.
  • syslog: 일반적인 시스템 활동 및 애플리케이션 메시지를 기록합니다.

실제 시스템 로그를 읽으려면 루트 권한이 필요한 경우가 많고 로그 파일이 매우 클 수 있으므로, 현재 작업 디렉토리 (~/project) 에 샘플 auth.log 및 syslog 파일을 준비해 두었습니다.

먼저 ls 명령어를 사용하여 디렉토리에 로그 파일이 있는지 확인합니다.

ls -l

다음과 같은 출력이 나타나야 합니다.

total 8
-rw-r--r-- 1 labex labex 584 Oct 10 10:30 auth.log
-rw-r--r-- 1 labex labex 245 Oct 10 10:30 syslog

다음으로 인증 로그의 내용을 살짝 살펴보겠습니다. head 명령어를 사용하면 터미널 화면을 가득 채우지 않고도 파일의 앞부분 몇 줄을 확인할 수 있습니다.

다음 명령어를 실행하여 auth.log의 시작 부분을 확인합니다.

head auth.log

여러 줄의 텍스트가 표시됩니다. 각 줄은 하나의 로그 항목을 나타내며, 일반적으로 타임스탬프, 호스트 이름, 로그를 생성한 서비스 (예: sshd 또는 sudo), 그리고 구체적인 메시지 순으로 구성됩니다.

Oct 10 10:00:01 labex sshd[1234]: Failed password for invalid user admin from 192.168.1.100 port 33452 ssh2
Oct 10 10:05:12 labex sshd[1235]: Failed password for root from 10.0.0.5 port 44212 ssh2
...

로그인 실패 분석을 위한 auth.log 분석

이 단계에서는 grep 명령어를 사용하여 로그 파일을 필터링하고 SSH 로그인 실패 시도와 같은 잠재적인 보안 위협을 식별합니다.

로그인 실패가 반드시 악의적인 것은 아니지만, 반복되는 실패는 중요한 약한 신호입니다. 사용자가 비밀번호를 한 번 잘못 입력할 수는 있습니다. 하지만 특정 소스에서 발생하거나 여러 계정을 대상으로 하는 대규모 실패 패턴은 추측 공격 (guessing activity) 을 시사합니다. 훌륭한 로그 분석은 종종 개별적인 약한 이벤트를 그룹화하고 카운트하여 더 강력한 패턴으로 바꾸는 것에서 시작됩니다.

grep은 파일 내에서 특정 텍스트 패턴을 검색하는 강력한 명령줄 유틸리티입니다. 공격자가 비밀번호를 추측하려고 시도할 때 (무차별 대입 공격), SSH 서비스 (sshd) 는 실패할 때마다 "Failed password" 메시지를 기록합니다.

auth.log 파일에서 로그인 실패 사례를 모두 검색해 보겠습니다. 다음 명령어를 실행하세요.

grep "Failed password" auth.log

터미널에는 "Failed password"라는 문구가 포함된 줄만 출력됩니다.

Oct 10 10:00:01 labex sshd[1234]: Failed password for invalid user admin from 192.168.1.100 port 33452 ssh2
Oct 10 10:05:12 labex sshd[1235]: Failed password for root from 10.0.0.5 port 44212 ssh2
Oct 10 10:20:01 labex sshd[1240]: Failed password for invalid user test from 172.16.0.4 port 12345 ssh2

실제 서버를 분석할 때는 이런 줄이 수천 개가 될 수도 있습니다. 실패 시도가 몇 번 있었는지 빠르게 계산하려면 grep의 출력을 파이프 (|) 를 통해 wc -l 명령어로 전달하면 됩니다. wc는 "word count"의 약자이며, -l 플래그는 줄 수를 세라는 의미입니다.

다음 명령어를 실행하여 로그인 실패 횟수를 계산합니다.

grep "Failed password" auth.log | wc -l

터미널에 3이라는 숫자가 출력되어야 하며, 이는 샘플 로그에 3 번의 로그인 실패 시도가 있었음을 의미합니다.

Sudo 권한 상승 추적

이 단계에서는 권한이 상승된 상태에서 실행된 명령을 추적하는 방법을 배웁니다. 사용자가 sudo를 사용하여 명령을 실행하면 auth.log 파일에 기록됩니다.

먼저 grep을 사용하여 로그에서 모든 sudo 활동을 찾아보겠습니다.

grep "sudo:" auth.log

누가 sudo를 사용했고 어떤 명령을 실행했는지 자세한 내용이 출력됩니다.

Oct 10 10:15:22 labex sudo:    labex : TTY=pts/0 ; PWD=/home/labex/project ; USER=root ; COMMAND=/usr/bin/cat /etc/shadow
Oct 10 10:25:33 labex sudo:    labex : TTY=pts/0 ; PWD=/home/labex/project ; USER=root ; COMMAND=/usr/bin/apt update

grep은 줄을 필터링하는 데 유용하지만, 때로는 실행된 정확한 명령과 같이 특정 정보만 추출하고 싶을 때가 있습니다. 이때 awk가 필요합니다.

초보자에게 중요한 단계는 다음과 같습니다. 먼저 관련 줄을 찾고, 그다음 질문에 답이 되는 필드를 추출하는 것입니다. 보안 작업은 종종 이 두 가지 작업 사이를 오갑니다. 필터링은 증거 세트를 좁히고, 필드 추출은 그 증거를 요약하거나 비교할 수 있는 형태로 바꿉니다.

awk는 텍스트 처리 및 데이터 추출을 위해 설계된 다목적 프로그래밍 언어입니다. 기본적으로 awk는 공백을 기준으로 줄을 "필드"로 나눕니다. 하지만 -F 플래그를 사용하여 사용자 지정 구분 기호를 지정할 수도 있습니다.

sudo 로그 항목에서 실제 실행된 명령은 COMMAND= 문자열 바로 뒤에 온다는 점에 주목하세요. awk에게 COMMAND=를 구분 기호로 사용하여 줄을 나누고, 나뉜 줄의 두 번째 부분을 출력하도록 지시할 수 있습니다.

다음 명령어를 실행하여 실행된 명령만 추출합니다.

grep "sudo:" auth.log | awk -F 'COMMAND=' '{print $2}'

작동 원리는 다음과 같습니다.

  • grep "sudo:" auth.log: 로그에서 sudo 항목을 필터링합니다.
  • |: 해당 항목을 awk로 전달합니다.
  • -F 'COMMAND=': awk에게 COMMAND=를 구분 기호로 사용하도록 지시합니다.
  • '{print $2}': awk에게 나뉜 텍스트의 두 번째 조각 (COMMAND= 이후의 모든 것) 을 출력하도록 지시합니다.

실행된 명령의 깔끔한 목록이 표시됩니다.

/usr/bin/cat /etc/shadow
/usr/bin/apt update

IP 주소 추출 및 정렬

마지막 단계에서는 grep과 awk를 다른 명령줄 유틸리티와 결합하여 강력한 데이터 처리 파이프라인을 구축합니다. 명령어를 연결하는 것은 시스템 관리자가 복잡한 스크립트를 작성하지 않고도 원시 로그에서 유용한 정보를 빠르게 추출하기 위해 사용하는 일반적인 관행입니다.

파이프라인은 조사를 점진적으로 수행할 수 있게 해주기 때문에 강력합니다. 한 명령어가 이벤트를 선택하고, 다른 명령어가 필요한 필드를 추출하며, 또 다른 명령어가 결과를 정렬하거나 카운트합니다. 이러한 사고방식은 빠른 사고 대응부터 나중에 과정에서 배울 대규모 자동화까지 확장됩니다.

로그인에 실패한 공격자의 IP 주소만 추출하여 정렬하고 중복을 제거해 보겠습니다.

먼저 awk의 영리한 트릭을 살펴보겠습니다. 로그인 실패 로그에서 IP 주소는 사용자 이름이 유효하든 아니든 항상 줄 끝에서 4 번째 단어입니다. awk에는 줄의 총 단어 수를 나타내는 NF(Number of Fields) 라는 내장 변수가 있습니다. 따라서 $(NF-3)은 항상 IP 주소를 가리키게 됩니다!

파이프라인을 단계별로 구성해 보겠습니다.

  • grep: 실패한 시도를 찾습니다.
  • awk '{print $(NF-3)}': IP 주소를 추출합니다.
  • sort: IP 주소를 숫자 순서대로 정리합니다.
  • uniq: 중복된 IP 주소를 제거하여 각 공격자가 한 번만 나열되도록 합니다.

전체 파이프라인을 실행하고 최종 결과를 suspicious_ips.txt라는 파일로 리다이렉트합니다.

grep "Failed password" auth.log | awk '{print $(NF-3)}' | sort | uniq > suspicious_ips.txt

이제 cat 명령어를 사용하여 새로 생성된 파일의 내용을 확인합니다.

cat suspicious_ips.txt

추출된 고유 IP 주소가 터미널에 출력됩니다.

10.0.0.5
172.16.0.4
192.168.1.100

요약

축하합니다! 이번 실습을 통해 리눅스에서 기본적인 시스템 로그 분석을 수행하는 방법을 성공적으로 배웠습니다.

다음 기술을 마스터했습니다.

  • 표준 리눅스 시스템 로그의 위치를 찾고 확인하는 방법.
  • grep을 사용하여 SSH 로그인 실패와 같은 특정 보안 이벤트를 필터링하는 방법.
  • awk를 사용하여 로그 줄을 파싱하고 sudo를 통해 실행된 명령과 같은 특정 필드를 추출하는 방법.
  • 이러한 도구들을 명령줄 파이프라인으로 결합하여 악성 IP 주소를 추출하고 정렬하는 방법.

이러한 텍스트 처리 기술은 리눅스 환경에서 작업하는 모든 시스템 관리자, DevOps 엔지니어 또는 사이버 보안 전문가에게 필수적인 역량입니다.