SU_DING_GI

로그를 보면 보인다: 우리는 어디를 먼저 최적화해야 할까?

Soonga00 — Tue, 29 Apr 2025 20:12:06 +0900

이상하게 느려진다?

알록(ALOC) 서버를 운영하면서 문득 이런 생각이 들었다.

“지금 API가 느린 건가?”

“뭐가 문제지? 어디를 먼저 개선해야 하지?”

하지만 당시 상황은 이랬다:

요청이 느려도 로그만 보면 느린 건지 알 수 없음
예외는 로그로 찍히지만, 평균 응답 시간은 안 나옴
성능 개선을 하고 싶어도 "어디부터?"가 막막했다

그래서 시작했다: AOP 기반 로깅 시스템

이런 고민 끝에 나온 해결책은 명확했다.

“성능 병목을 알고 싶으면, 먼저 전체 흐름을 로깅하자.”

단순히 로그를 찍는 수준이 아니라:

모든 컨트롤러 API 요청의 시작과 끝을 로깅
파라미터 값과 실행 시간을 수집
500ms 이상 지연된 요청은 디스코드 알림
Prometheus로 수집하고, Grafana로 시각화

까지 통합적인 관측 시스템을 만들기로 했다.

설계 및 구현

AOP 적용 범위

@Around("execution(* com.aloc.aloc..controller..*(..))")

컨트롤러 전역에 적용
메서드명, 파라미터, 시작/종료 시각, 소요 시간 자동 기록

⏱ 실행 시간 측정 & 메트릭 저장

long duration = System.currentTimeMillis() - start;

meterRegistry
  .timer("api.execution.time", "method", method)
  .record(duration, TimeUnit.MILLISECONDS);

Micrometer를 통해 실행 시간 저장
Prometheus에서 수집 가능하도록 구성

⚠️ 슬로우 API 실시간 알림

if (duration > 500) {
  asyncWebhookNotifier.notifySlowApi(method, duration);
}

비동기(@Async)로 디스코드에 슬랙 스타일 알림 전송

도입 후 변화

항목 도입 전 도입 후

API별 실행 시간	❌ 없음	✅ 평균/최대 실행 시간 확인 가능
병목 구간 식별	❌ 감으로 추정	✅ 데이터 기반 파악
슬로우 요청 탐지	❌ 수동 로그 검색	✅ 실시간 알림 전송
시각화	❌ 로그만 존재	✅ Grafana 대시보드 구성

병목 API가 어디인지 명확히 보이고,

디스코드에 오는 알림 덕분에 느린 API에 실시간 대응이 가능해졌다.

얻은 인사이트

✅ 로그는 "분석 가능한 형태"로 남겨야 의미가 있다.
✅ 단순한 로그보다 관측 가능한 시스템을 구축하는 게 훨씬 강력하다.
✅ AOP는 코드 침투 없이도 서비스 전체 흐름을 파악할 수 있게 해준다.

다음 목표

로그를 분석해서 제일 오래 걸리거나 자주 호출되는 API를 최적화 해보자!
그라파나 대시보드에 더 추가해서 보면 좋을 것을 추가해보자!

뭐? 우리 서버가 공격 받고 있다고?

Soonga00 — Tue, 29 Apr 2025 19:51:47 +0900

EC2 서버 장애 분석 및 대응 기록

최근, 알록 서버에 Grafana와 Prometheus를 활용한 모니터링 시스템을 적용해보고 있었다. 그리고 서버의 CPU 사용량, 메모리 사용량이 많아지거나 Spring 서버에서 500 에러가 발생하면, 디스코드 웹훅으로 알람을 받도록 설정했다.

그런데 어느 순간부터...

이 알림이 계속 뜨더니 알람이 resolve되지 않고 서버 도커 컨테이너(Spring 애플리케이션)가 exited 상태로 떨어지는 사건이 발생했다.

처음 생각한 원인

처음에는 그냥 "EC2 프리티어 스펙이 낮아서 그런가?" 하고 단순하게 넘겼다. 그래서 컨테이너를 재시작했는데, 두 번째 반복될 때 느낌이 이상했다.

"이거 진짜 문제가 있는 거 같은데? 제대로 원인 파악해보자."

바로 원인 분석을 시작했다.

1. Spring 서버 로그 분석

먼저 컨테이너 안에서 Spring 로그를 확인했다.

발견된 에러: HikariCP - housekeeper - Thread starvation or clock leap detected

이 에러는 다음을 의미한다.

Thread starvation: 스레드가 부족하거나 CPU가 바빠서 housekeeper 스케줄링이 밀렸다.
Clock leap: 시스템 시간이 비정상적으로 튀었다.

특히, 로그에서는 "50초", "7분 24초" 정도 housekeeper가 밀렸다고 나온다. 30초 주기 작업이 이 정도 밀렸다면 서버에 무슨 문제가 있었다는 뜻이다.

의심했던 원인들

서버 CPU, 메모리 과부하
GC Stop-the-World 발생
서버 시간 변경 (NTP 동기화)
디스크 I/O 과부하

NTP 시간 동기화로 7분이 튈 리 없다고 생각했다. 그래서 1번, CPU/메모리 문제에 집중해서 보게 됐다.

2. 서버 상태 모니터링

2-1. Grafana 대시보드 확인

CPU 사용량: 0%~5% (거의 사용 안 함)
JVM Heap/Non-Heap 메모리: 충분히 여유 있음
JVM Thread 수: 약 25개 (정상)
GC 상태:
- Minor GC만 간간히 발생 (정상 범위)
- Full GC는 거의 없음
- GC Pause 시간도 5~10ms 수준

"서버 애플리케이션(Spring)은 문제 없어 보인다."

2-2. EC2 시스템 로그 확인

dmesg 명령어로 시스템 로그를 확인했더니...

Out of memory: Killed process 259723 (java)

JVM 프로세스가 메모리 부족(OOM) 으로 강제 종료됐다.

추가로 journalctl -xe 로그를 보니

systemd-journald: Under memory pressure, flushing caches

서버 전체가 메모리 압박을 받고 있었다는 사실도 확인했다.

2-3. CloudWatch 확인

AWS EC2 모니터링 지표를 확인했다.

CPU 사용률: 99% 이상 급등
네트워크 트래픽: 입출력 급증

"외부에서 트래픽이 엄청나게 몰려왔다."

3. 비정상 트래픽 분석 (Nginx Access Log)

3-1. 최근 HTTP 요청 확인

sudo cat /var/log/nginx/access.log | tail -n 100

로그를 보니 이상한 요청들이 엄청 많이 들어왔다.

3-2. 이상 요청 패턴 분석

요청 경로 설명 의심 행위

/.git/objects/info/	Git 리포지토리 정보 탐색	소스코드 유출 시도
/.env	환경변수 파일 접근 시도	DB 비번 탈취 시도
/cgi-bin/../bin/sh	시스템 명령어 실행 경로 접근	리모트 코드 실행(RCE) 시도
/vendor/phpunit/phpunit/src/Util/PHP/eval-stdin.php	PHP 취약점 공격	원격 명령 실행 시도

특정 IP에서 지속적으로 공격 시도가 있었다.

3-3. 공격 IP 목록

IP 주소 주요 행위

195.211.191.76	.git 접근
78.153.140.158	.env 접근
223.130.11.165	RCE 시도

4. 보안 강화 조치 (1차)

4-1. 악성 IP 차단

# 악성 IP 차단
deny 195.211.191.76;
deny 78.153.140.158;
deny 223.130.11.165;
allow all;

✅ 악성 IP 차단 완료

4-2. 민감 경로 차단

location ~* /\\.(git|env|htaccess|htpasswd) {
    deny all;
}

location ~* (eval-stdin|phpinfo|vendor) {
    deny all;
}

✅ .git, .env, vendor/ 등 접근 차단

4-3. 요청 속도 제한

limit_req_zone $binary_remote_addr zone=one:10m rate=10r/s;

server {
    location / {
        limit_req zone=one burst=20 nodelay;
        proxy_pass <http://127.0.0.1:8080>;
    }
}

✅ 1초에 10회 요청 제한 (봇 공격 방어)

4-4. 타임아웃 설정

client_body_timeout 10s;
client_header_timeout 10s;
send_timeout 10s;

✅ 요청 지연 공격(슬로우로리스) 방어

그 결과,

5. 아직 부족한 점

설정 적용 후에도

다른 IP로 계속 스캐닝 공격이 발생하고 있음
nginx 차단만으로는 완벽 방어 어려움

그래서 다음 단계로 fail2ban 적용을 준비 중이다.

fail2ban은 nginx 로그를 분석해서 비정상 요청을 자동으로 감지하고, 방화벽(IP 차단)을 걸어주는 도구다.

다음 목표: fail2ban으로 자동 차단 시스템 구축하기!

마무리

이번 경험을 통해

단순한 모니터링만으로는 서버를 지킬 수 없다.
자동 방어 시스템이 반드시 필요하다.

는 걸 제대로 깨달았다.

앞으로는 nginx + fail2ban 조합으로 더 튼튼한 서버를 만들 예정이다.

추가로 디스코드로 오는 웹훅으로 바로 어떤 경고인지 알면 좋을 것 같아서 각 경고 규칙마다 커스텀해서 디스코드로 오도록 수정했다!

[AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 3. CI/CD 코드 및 여러 설정 파일 수정하기

Soonga00 — Thu, 6 Feb 2025 17:21:51 +0900

2025.02.06 - [INFRA] - [AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 2. EC2 인스턴스 생성하기

[AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 2. EC2 인스턴스 생성하기

2025.02.04 - [INFRA] - [AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 1. RDS 생성 및 백업 [AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 1. RDS 생성 및 백업기존에 운영하던 알고리즘

sua-su-ding-gi.tistory.com

이전 글에서 EC2와 RDS 연결까지 완료했었다. 원래 우리는 깃 action을 통해 CI/CD를 구현해놨지만 내가 그 설정을 담당하지 않았어서.. 처음 부터 다시 공부하면서 EC2 서버에 배포할 수 있도록 설정해 보겠다!

1. CI/CD란?

CI(Continuous Integration)/CD(Continuous Deployment)는 소프트웨어 개발 및 배포를 자동화하는 과정이다.

CI/CD를 적용하면 코드 변경이 자동으로 테스트 되고, 빌드되며, 배포까지 자동으로 이루어질 수 있기 때문에 이를 통해 개발 속도를 높이고, 오류를 줄이며, 운영 효율성을 개선할 수 있다.

1-1. CI(Continuous Integration, 지속적 통합)

CI는 코드 변경이 생길 때마다 자동으로 테스트하고 빌드하는 과정이다.

✅ CI의 핵심 목표

코드 변경 사항을 빠르게 검증하여 오류를 미리 발견
여러 개발자가 동시에 작업하더라도 코드 충돌을 최소화
자동화된 테스트로 안정적인 코드 유지

✅ CI 동작 방식

코드 변경 사항을 Git에 푸시
Github Actions, Jenkis, GitLab CI/CD같은 CI 서버가 자동으로 실행
코드가 자동으로 빌드되고, 테스트 실행
테스트를 통과하면 배포를 준비, 실패하면 즉시 개발자에게 알림

1-2. CD(Continuous Deployment, 지속적 배포)

CD는 CI이후, 테스트를 통과한 코드를 자동으로 서버에 배포하는 과정이다

CD는 Continuous Deployment라는 지속적 배포외에도 추가로 Continuous Delivery라는 지속적 전달 방식도 있다.

Continuous Delivery(지속적 전달)
- 배포 준비까지 자동화되지만, 배포는 사람이 승인 후 진행
- 일반적으로 "배포 버튼"을 눌러야 실제 서버에 반영됨
- 대기업에서는 주로 이 방식을 사용하여 실수를 방지
Continuous Deployment(지속적 배포)
- 완전히 자동으로 배포까지 진행
- 사람이 개입할 필요 없음
- 스타트업이나 DevOps 환경에서 많이 사용됨

✅ CD의 핵심 목표

코드가 안전하게 배포될 준비가 되었는지 확인
배포 프로세스를 자동화하여 운영 부담 감소
코드 변경이 빠르게 실제 서비스에 반영

✅ CD에서 수행하는 작업 (aloc 웹서버 기준)

CI 단계를 통과한 코드르 자동으로 Docker 이미지로 빌드
Docker 이미지를 업로드
EC2 서버에서 최신 Docker 이미지를 받아 실행

2. CI/CD 스크립트 및 EC2 서버 초기 설정하기

2-1. CI/CD 스크립트 수정

우선, 우리 CI 관련 스크립트는 프로젝트 폴더에 .github/workflows/gradle.yml에 작성되어있다.

기존에는 lightsail로 사용하고 있어서 PostgreSQL을 로컬로 설치하고 있었는데, 이제는 RDS를 사용해야 하므로 해당 내용을 수정해보겠다.

✅ application.yml 수정

application.yml의 db관련 설정(url, username, password) 정보를 반영한다.

그외에는 gradle.yml을 그대로 사용해도 되기때문에 특별한 수정은 안했다.

# This workflow uses actions that are not certified by GitHub.
# They are provided by a third-party and are governed by
# separate terms of service, privacy policy, and support
# documentation.
# This workflow will build a Java project with Gradle and cache/restore any dependencies to improve the workflow execution time
# For more information see: https://docs.github.com/en/actions/automating-builds-and-tests/building-and-testing-java-with-gradle

name: CI

on:
  push:
    branches: [ "main" ]
  pull_request:
    branches: [ "main" ]

jobs:
  build:
    runs-on: ubuntu-latest
    permissions:
      contents: read

    steps:
    - uses: actions/checkout@v4
    - name: Set up JDK 17
      uses: actions/setup-java@v4
      with:
        java-version: '17'
        distribution: 'temurin'

    - name: Make gradlew executable
      run: chmod +x gradlew

    - name: Cache Gradle packages
      uses: actions/cache@v3
      with:
        path: ~/.gradle/caches
        key: ${{ runner.os }}-gradle-${{ hashFiles('**/*.gradle') }}
        restore-keys: ${{ runner.os }}-gradle-

    - name: Create application.yml
      run: |
        mkdir -p ./src/main/resources
        cd ./src/main/resources
        echo "${{ secrets.APPLICATION }}" base64 -d > application.yml
        echo "${{ secrets.JWT_APPLICATION }}" base64 -d > application-jwt.yml
        echo "${{ secrets.TEST_APPLICATION }}" base64 -d > application-test.yml

    - name: Install PostgreSQL client
      run: sudo apt-get install -y postgresql-client

    - name: Build with Gradle Wrapper
      run: ./gradlew build --parallel --daemon

✅ CD 스크립트를 수정

우리 CD 관련 스크립트는 프로젝트 폴더에 .github/workflows/deploy.yml에 작성되어있는데,

기존 코드에 수정해야될 점은

CI/CD 스크립트로 수정 및 작업 분리
lightsail 에서 EC2로변경
EC2에서는 필요없는 네트워크 설정을 제거

이다. 따라서 해당 수정사항을 반영해서

name: CI/CD

on:
  push:
    branches: [ "develop" ]  # develop 브랜치에 푸시되면 실행

jobs:
  build:
    name: CI - Build & Test
    runs-on: ubuntu-latest
    permissions:
      contents: read

    steps:
      - uses: actions/checkout@v4

      - name: Set up JDK 17
        uses: actions/setup-java@v4
        with:
          java-version: '17'
          distribution: 'temurin'

      - name: Make gradlew executable
        run: chmod +x gradlew

      - name: Cache Gradle packages
        uses: actions/cache@v3
        with:
          path: ~/.gradle/caches
          key: ${{ runner.os }}-gradle-${{ hashFiles('**/*.gradle') }}
          restore-keys: ${{ runner.os }}-gradle-

      - name: Create application.yml
        run: |
          mkdir -p ./src/main/resources
          cd ./src/main/resources
          echo "${{ secrets.APPLICATION }}" base64 -d > application.yml
          echo "${{ secrets.JWT_APPLICATION }}" base64 -d > application-jwt.yml
          echo "${{ secrets.TEST_APPLICATION }}" base64 -d > application-test.yml

      - name: Install PostgreSQL client
        run: sudo apt-get install -y postgresql-client

      - name: Build with Gradle Wrapper
        run: ./gradlew build --parallel --daemon

      - name: Save JAR Artifact
        uses: actions/upload-artifact@v4
        with:
          name: built-jar
          path: build/libs/*.jar

  deploy:
    name: CD - Deploy to EC2
    needs: build
    runs-on: ubuntu-latest

    steps:
      - name: Checkout source code
        uses: actions/checkout@v4

      - name: Download JAR Artifact
        uses: actions/download-artifact@v4
        with:
          name: built-jar
          path: build/libs/

      - name: Set up Docker Buildx
        uses: docker/setup-buildx-action@v2

      - name: Login to DockerHub
        uses: docker/login-action@v2
        with:
          username: ${{ secrets.DOCKER_USERNAME }}
          password: ${{ secrets.DOCKER_PASSWORD }}

      - name: Build and push Docker image
        uses: docker/build-push-action@v2
        with:
          context: .
          platforms: linux/amd64,linux/arm64
          push: true
          tags: ${{ secrets.DOCKER_USERNAME }}/aloc-spring:latest

      #   SSH 키 설정 (base64 디코딩 없이 원본 그대로 저장)
      - name: Setup SSH Key
        run: |
          echo "${{ secrets.EC2_SSH_KEY }}" > key.pem  #   디코딩 없이 저장
          chmod 600 key.pem

      # ✅ SSH 연결 테스트
      - name: Test SSH Connection
        run: ssh -i key.pem -o StrictHostKeyChecking=no ${{ secrets.EC2_USER }}@${{ secrets.EC2_HOST }} "echo '✅ SSH 연결 성공!'"

      # ✅ SSH 실행 시 key_path 사용
      - name: Deploy to EC2
        uses: appleboy/ssh-action@master
        with:
          host: ${{ secrets.EC2_HOST }}
          username: ${{ secrets.EC2_USER }}
          key_path: key.pem  #   key_path로 직접 지정
          script: |
            echo "  Starting Deployment on EC2..."
            docker login -u ${{ secrets.DOCKER_USERNAME }} -p ${{ secrets.DOCKER_PASSWORD }}

            echo "  Stopping and removing old container..."
            if [ "$(docker ps -q -f name=aloc-spring)" ]; then
              docker stop aloc-spring
              docker rm aloc-spring
            fi

            echo "  Pulling the latest image..."
            docker pull ${{ secrets.DOCKER_USERNAME }}/aloc-spring:latest | exit 1

            echo "  Running new container..."
            docker run -d --name aloc-spring \
              -e TZ=Asia/Seoul \
              -p 8080:8080 \
              -v /home/ubuntu/upload/user:/app/upload \
              ${{ secrets.DOCKER_USERNAME }}/aloc-spring:latest

            echo "✅ Deployment completed!"

      - name: Send deployment status to Discord
        if: success()
        uses: tsickert/discord-webhook@v5.3.0
        with:
          webhook-url: ${{ secrets.DISCORD_WEBHOOK_URL }}
          content: |
            [aloc-spring]
              배포가 성공적으로 완료되었어요!
            커밋한 사람   ${{ github.actor }}
            ${{ github.event.head_commit.message }}

      - name: Send deployment failure to Discord
        if: failure()
        uses: tsickert/discord-webhook@v5.3.0
        with:
          webhook-url: ${{ secrets.DISCORD_WEBHOOK_URL }}
          content: |
            [aloc-spring]
            ❌ 배포 중 문제가 발생했어요!
            확인이 필요합니다.  
            잘못한 사람   ${{ github.actor }}
            URL: https://github.com/ALOC-UOS/aloc-backend/actions/runs/${{ github.run_id }}
            ${{ github.event.head_commit.message }}

이렇게 수정해주고 github setting에서 secrets를 업데이트 해줬다.

2-2. EC2 초기 설정

그후, EC2의 보안 그룹에 가서 22, 80, 443, 8080 포트를 개방해주고

EC2에 접속해 docker 와 docker-compose를 설치해준다!

그후 develop 브랜치에 push 해주면

짜잔 완성이다~

이제는 DNS에 EC2 퍼블릭 ip 등록하고 Nginx 사용해서 ssl 설정까지 해주면 진짜 완성~

사실 ssl 인증서 등록하는 것도 작성하려 했지만.. 너무 지친 관계로 작성하지 못했다

생각보다 되게 오래걸렸지만 다음에 또 이런 설정을 하게되면 순차적으로 잘 할 수 있을 것 같다!

[AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 2. EC2 인스턴스 생성하기

Soonga00 — Thu, 6 Feb 2025 10:24:28 +0900

2025.02.04 - [INFRA] - [AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 1. RDS 생성 및 백업

[AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 1. RDS 생성 및 백업

기존에 운영하던 알고리즘 웹사이트 Aloc은 개인 계정으로 운용하고 있어서 비용 문제가 발생하기 시작했기에 잠시 중단했다가, 공동 계정으로 서버를 옮기게 되면서 과정을 기록하면 좋겠다~

sua-su-ding-gi.tistory.com

이전에 RDS에 DB 백업 복구를 완료하였으니 이제는 EC2 인스턴스를 생성해서 새로운 서버를 만들어보겠다!

1. EC2 인스턴스 생성하기

인스턴스 시작 버튼을 누르고

ubuntu 서버가 익숙하기 때문에 ubuntu를 선택해줬다

프리티어를 사용할 것이기 때문에 t2.micro로 인스턴스 유형을 선택해주고

키페어를 새로 생성해줬다

그리고 네트워크 설정은 rds랑 같은 보안그룹을 선택해줬다

그 후 인스턴스 시작을 눌러주면

이렇게 성공이 뜬다 이제 RDS 데이터 베이스 연결을 해보자

2. EC2와 RDS 보안그룹 추가하여 연결하기

RDS 데이터 베이스 연결 버튼을 누르면

이런 화면이 뜨고 나는 postgreSQL을 쓰므로 인스턴스를 선택하면 내가 생성한 데이터베이스가 뜬다 연결버튼을 눌러주면

이렇게 성공이 뜬다! 자동으로 보안그룹을 추가해서 연결해줌으로 쉽게 해결할 수 있다!

3. 쉘로 직접 EC2 인스턴스에 접속하기

인스턴스를 선택하고 연결 버튼을 눌러주면

하단에 아주 상세하게 방법이 나와있다 해당 방법을 그대로 쉘에서 입력해주면 접속할 수 있다

만약 접속이 안되면, 보안그룹에서 22번포트(ssh)를 추가했는지 확인해봐야 한다!

이렇게 하면 EC2 인스턴스 생성이 완료 된 것이다. 다음은 CI/CD 코드와 여러가지 yml파일, build 파일 등을 다 수정해 보겠다~

[AWS] 기존 서버에서 새로운 서버로 마이그레이션 하기 - 1. RDS 생성 및 백업

Soonga00 — Tue, 4 Feb 2025 14:15:13 +0900

기존에 운영하던 알고리즘 웹사이트 Aloc은 개인 계정으로 운용하고 있어서 비용 문제가 발생하기 시작했기에 잠시 중단했다가, 공동 계정으로 서버를 옮기게 되면서 과정을 기록하면 좋겠다~ 싶어서

1. RDS 복구하기

2. EC2 인스턴스 생성하기

3. 기존 CI/CD 코드에 변경 사항 적용해서 서버 키기

로 단계별로 구현해보려한다!

1. RDS 생성하기

DB 백업 파일을 스냅샷으로 받은게 아니라서 일단은! RDS 인스턴스부터 생성해보겠다

RDS에 들어가서 새로운 데이터베이스를 생성해주고,

기존에 PostgreSQL을 사용했어서 PostgreSQL 엔진을 선택해줬다

템플릿은 프리티어를 선택하여 추가로 내는 비용 없이 사용할 수 있도록 하는데, 이때 추후 엔진 버전을 활용해 파라미터 그룹을 만들어야하기 때문에 엔진 버전을 기억해준다.

그리고 식별자나 자격 증명은 기존에 사용했던대로 그대로 옮겨줬다

프리티어를 선택했기때문에 인스턴스나 스토리지 값은 기본값을 유지했고,

추가 과금이 되지 않도록 스토리지 자동 조정 활성화를 해제했다.

그 후에, 아직 EC2를 생성하지 않았기 때문에 EC2컴퓨팅 리소스에 연결하지 않고

EC2를 생성하기 전에 로컬에서 DB에 직접 연결해서 백업 데이터를 복구하고 로컬에서 잘 접속이 되는지 확인할 예정이기 때문에 퍼블릭 엑세스를 "예"로 바꿔주고 나머지는 기본 값을 유지해줬다.

그외에는 따로 손대지 않고 초기 데이터베이스 이름을 기존이름으로 설정하고, 백업기간을 3일정도로 설정하고, 다른 운영진 친구들이 사용할 때 괜히 복잡해질 수 있으니 암호화 활성화를 해제해줬다.

그 이후에 아래 데이터베이스 생성을 누르면,

이렇게 데이터베이스가 생성된다.

2. RDS 초기 필수 설정

우선, 새로운 파라미터그룹을 생성해야한다! 우측의 버튼을 눌러 새로운 파라미터 그룹을 생성하여

앞서, 기억해두었던 엔진 버전으로 새로운 파라미터 그룹을 생성한다

그후 생성한 파라미터를 선택하고 작업-편집을 누르고

timezone을 UTC -> UTC+9로 바꾼 후 변경사항저장을 눌러준다.

이제 다시 데이터 베이스로 돌아가

만든 데이터베이스를 선택하고 수정을 눌러준 후

추가 구성에서 방금 만든 새로운 파라미터 그룹으로 교체해준다.

이렇게 하면 초기 설정 끝!

3. 로컬 환경에서 RDS에 접속해 기존 데이터 백업 하기

EC2 - 보안그룹 - default로 들어가 인바운드 규칙을 편집해 내 로컬 PC에서도 데이터베이스에 접속할 수 있도록 규칙을 생성해주자!

규칙 추가 버튼을 누르고 PostgreSQL을 선택하고 내 IP를 추가한 후 규칙을 저장한다.

나는 인텔리제이의 데이터 베이스 연결 탭에서
host -> 엔드포인트

user -> 기존에 설정한 마스터 사용자 이름

password -> 기존에 설정한 마스터 사용자 이름
database -> 데이터베이스 이름

입력하고 테스트 connection을 눌렀을 때 잘 된다면 연결이 잘 되는 것이다.

이렇게 연결이 잘된다는 것을 확인했으면 로컬에서 백업파일을 전부 실행해 보자!

파일을 확인해보니 스키마 생성 코드(DML)은 없고 데이터 관련 코드(DDL)만 있는 상황이라 우선 Schema 파일부터 만들어주겠다!

기존에 로컬에서 사용하던 postgresql이 14버전이라 16버전으로 재설치 해준 후,

pg_dump -h localhost -U postgres -d aloc --schema-only > schema.sql

이 코드로 shcema 파일을 만들어줬다.

백업 파일들이 있는 폴더에 schema.sql 파일을 옮겨주고

psql -h <RDS_엔드포인트> -U <DB_사용자> -d <DB_이름> -f aloc_backup.sql

DML 코드를 실행 시켰고

잘 추가된 것을 확인할 수 있다!

마지막으로 이제 데이터만 복구하면 되는데... 코드르 잘보니 INSERT코드가 아니라 전부 UPDATE로만 이루어진 코드 였다.. 허허..

음 데이터쪽이라 망가지면.. 안되기 때문에.. 노가다를 조금 해보려고 한다

연관관계 고려해서 가장 말단 엔티티 코드를 GPT한테 insert 코드로 바꿔달라고 하고 하나씩 위에 코드로 실행시켜줬다

이마저도 너무 로우가 많은 테이블들은 할 수가 없어서 파이썬으로 코드 짜서 수정해줬다 ㅠ

짠~ 백업 성공~~

RESTful API

Soonga00 — Wed, 27 Mar 2024 11:30:13 +0900

API

API란 Application Programming Interface의 약자로 프로그램을 실행하는 인터페이스이다

API를 통해 프로그램에 요청을 전달하기 위한 통로 혹은 방법이다.
라이브러리를 설치하고 호출하는 함수도 API이다.

REST API

REST는 REpresentational State Transfer라는 용어의 약자로 HTTP method별로 역할 명시한 API

REST API 디자인 가이드

URL은 정보의 자원을 표현해야 한다.
1. 정보의 자원 이름은 동사보다 명사를 사용한다.
2. /members/1
자원의 대한 행위는 HTTP Method(GET, POST, PUT, DELETE 등)로 표현
GET /members/1

URL 설계 시 주의할 점

슬래시 구분자(/)는 계층 관계를 나타내는 데 사용한다.
URL 마지막 문자로 슬래시(/)를 포함하지 않는다.
하이픈(-)은 URL 가독성을 높이는데 사용한다.
1. 불가피하게 긴 URL 경로를 사용한다면 하이픈을 사용해 가독성을 높일 수 있다.
밑줄(_)은 URL에 사용하지 않는다.
1. 밑줄은 보기 어렵거나 밑줄 때문에 문자가 가려지는 경우가 있기 때문에 밑줄보다는 하이픈을 사용하는 것이 좋다
URL경로에는 소문자가 적합하다.
1. RFC 3986(URL 문법 형식)은 URL 스키마와 호스트를 제외하고는 대소문자를 구별하도록 규정
파일 확장자는 URL에 포함시키지 않는다.
1. Accept header를 사용하여 파일 명시
2. GET /members/soccer/245/photo HTTP/1.1 Host: restapi.example.com Accept: imgae/jpg

자원을 표현하는 Collection과 Document

Document : 문서 혹은 객체 (단수로 표현)
Collection : 문서들의 집합 혹은 객체들의 집합 (복수로 표현)

HTTP 상태 코드

200 : 클라이언트의 요청을 정상적으로 수행
201 : 클라이언트가 어떠한 리소스 생성을 요청, 해당 리소스가 성공적으로 생성됨 (POST를 통한 리소스 생성 작업 시)
400 : 클라이언트의 요청이 부적절 할 경우 사용하는 응답 코드
401 : 클라이언트가 인증되지 않은 상태에서 보호된 리소스를 요청했을 때 사용하는 응답 코드
- ex) 로그인 하지 않은 유저가 로그인 했을 때, 요청 가능한 리소스를 요청했을 대
403 : 유저 인증 상태와 관계 없이 응답하고 싶지 않은 리소스를 클라이언트가 요청했을 때 사용하는 응답 코드
- 403 보다는 400이나 404를 사용할 것을 권고. 403 자체가 리소스가 존재한다는 의미 내포
405 : 클라이언트가 요청한 리소스에서는 사용 불가능한 메소드를 이용했을 경우 사용하는 응답 코드
301 : 클라이언트가 요청한 리소스에 대한 URL이 변경되었을 때 사용하는 응답 코드
- 응답 시 Location header에 변경된 URL을 적어줘야 한다
500 : 서버에 문제가 있을 경우 사용하는 응답 코드

CRUD vs REST

CRUD

CRUD는 CREATE, READ, UPDATE, DELETE의 약자로, 데이터 베이스 응용프로그램에서 실행되는 네 가지 기본 작업을 나타내는 데 사용되는 약어

REST

REST는 클라이언트와 서버 간의 HTTP 프로토콜 인터페이스를 표준화하기 위해 만들어진 웹 API에서 널리 사용되는 디자인 스타일 중 하나

REST와 CRUD의 유사점

	REST	CRUD
데이터베이스에 새 레코드 생성	POST	CREATE	insert 문을 통해 새 레코드 생성
데이터베이스에서 가져온 정보를 읽기	GET	READ/RETRIEVE	입력 매개변수를 기반으로 데이터를 가져옴
개체를 업데이트	PUT/PATCH	UPDATE	데이터를 덮어쓰지 않고 업데이트
데이터베이스에서 레코드 제거	DELETE	DELETE	데이터 제거

REST와 CRUD의 차이점

CRUD는 데이터베이스 설정에서 영구적인 기록을 하기 위한 주기이고, RESTful 아키텍처의 목표를 준수하기 위해 REST 명령에 매핑 된다
즉 REST api는 표준이고, CRUD는 함수이다.

출처

[04] CRUD vs REST 무슨 의미인가?

개발 초보를 위한 RESTful API 설계 가이드

[9663] N-Queen

Soonga00 — Sun, 17 Mar 2024 18:01:37 +0900

문제

N-Queen 문제는 크기가 N × N인 체스판 위에 퀸 N개를 서로 공격할 수 없게 놓는 문제이다.

N이 주어졌을 때, 퀸을 놓는 방법의 수를 구하는 프로그램을 작성하시오.

입력

첫째 줄에 N이 주어진다. (1 ≤ N < 15)

출력

첫째 줄에 퀸 N개를 서로 공격할 수 없게 놓는 경우의 수를 출력한다.

예제 입력 1

예제 출력 1

풀이

n-queen은 사이서울에서 한번 구현한 적이 있어서 이미 알고 있는 문제였다 그때는 2차원배열로 구현했어서 이번에는 인덱스를 이용해서 일차원 배열을 활용하여 n-queen을 구하려고했다. 그런데 자꾸 시간초과가 나서.. pypy로 했더니 시간초과가 나지 않는다.. 흠 어떤게 문제인지 모르겠으나 추후에 시간이 날때 pypy랑 python3의 차이를 알아봐야겠다

구현 방법은 윗행부터부터 오른쪽으로 한칸씩 배치해놨다고 가정한 후, 같은 열에 이미 queen이 있는지와 왼쪽 대각선 위, 오른쪽 대각선 위에 queen 이 있는지 검사해줬다. 2차원 배열로 그것도 c언어로 구현할때 꽤나 길게 작성했던 것 같은데 파이썬으로 짜니까 훨씬 간단했다.

n = int(input())
queen = [0 for _ in range(n)]
cnt = 0

def is_possible(x):
    for i in range(x):
        if queen[x] == queen[i] or abs(queen[x] - queen[i]) == abs(x-i):
            return False
    return True

def n_queen(x):
    global cnt
    if x == n:
        cnt +=1
        return
    
    for y in range(n):
        queen[x] = y
        if is_possible(x):
            n_queen(x+1)
n_queen(0)
print(cnt)

[1107] 리모컨

Soonga00 — Sun, 17 Mar 2024 17:10:38 +0900

문제

수빈이는 TV를 보고 있다. 수빈이는 채널을 돌리려고 했지만, 버튼을 너무 세게 누르는 바람에, 일부 숫자 버튼이 고장났다.

리모컨에는 버튼이 0부터 9까지 숫자, +와 -가 있다. +를 누르면 현재 보고있는 채널에서 +1된 채널로 이동하고, -를 누르면 -1된 채널로 이동한다. 채널 0에서 -를 누른 경우에는 채널이 변하지 않고, 채널은 무한대 만큼 있다.

수빈이가 지금 이동하려고 하는 채널은 N이다. 어떤 버튼이 고장났는지 주어졌을 때, 채널 N으로 이동하기 위해서 버튼을 최소 몇 번 눌러야하는지 구하는 프로그램을 작성하시오.

수빈이가 지금 보고 있는 채널은 100번이다.

입력

첫째 줄에 수빈이가 이동하려고 하는 채널 N (0 ≤ N ≤ 500,000)이 주어진다. 둘째 줄에는 고장난 버튼의 개수 M (0 ≤ M ≤ 10)이 주어진다. 고장난 버튼이 있는 경우에는 셋째 줄에는 고장난 버튼이 주어지며, 같은 버튼이 여러 번 주어지는 경우는 없다.

출력

첫째 줄에 채널 N으로 이동하기 위해 버튼을 최소 몇 번 눌러야 하는지를 출력한다.

예제 입력 1

5457
3
6 7 8

예제 출력 1

예제 입력 2

100
5
0 1 2 3 4

예제 출력 2

예제 입력 3

500000
8
0 2 3 4 6 7 8 9

예제 출력 3

예제 입력 4

100
3
1 0 5

예제 출력 4

예제 입력 5

14124
0

예제 출력 5

예제 입력 6

1
9
1 2 3 4 5 6 7 8 9

예제 출력 6

예제 입력 7

80000
2
8 9

예제 출력 7

풀이

아이디어는 채널 N과의 차이의 절대값이 가장 작은 값으로 우선 이동하고 그다음 그 차이만큼 이동한 수와 그냥 100번에서 차이만큼 이동한 수 중 min 값을 출력하려고 한다.

뭔가 처음에는 중복 순열을 이용해서 가능한 시간 복잡도를 낮추려고 했는데 괜히 더 복잡해지기만 했다.. 그래서 나중에 그냥 모든 숫자를 돌면서 가장 작은 값을 출력하도록 구현했다.

n = int(input())
m = int(input())
if m:
    broken_btn = list(map(int, input().split()))
else:
    broken_btn = []

min_cnt = abs(n-100)

for i in range(1000001):
    num = str(i)
    for j in range(len(num)):
        if int(num[j]) in broken_btn:
            break
        elif j == len(num)-1:
            min_cnt = min(min_cnt, len(num) + abs(n-i))
print(min_cnt)

[14888] 연산자 끼워넣기

Soonga00 — Fri, 15 Mar 2024 09:49:59 +0900

문제

N개의 수로 이루어진 수열 A1, A2, ..., AN이 주어진다. 또, 수와 수 사이에 끼워넣을 수 있는 N-1개의 연산자가 주어진다. 연산자는 덧셈(+), 뺄셈(-), 곱셈(×), 나눗셈(÷)으로만 이루어져 있다.

우리는 수와 수 사이에 연산자를 하나씩 넣어서, 수식을 하나 만들 수 있다. 이때, 주어진 수의 순서를 바꾸면 안 된다.

예를 들어, 6개의 수로 이루어진 수열이 1, 2, 3, 4, 5, 6이고, 주어진 연산자가 덧셈(+) 2개, 뺄셈(-) 1개, 곱셈(×) 1개, 나눗셈(÷) 1개인 경우에는 총 60가지의 식을 만들 수 있다. 예를 들어, 아래와 같은 식을 만들 수 있다.

1+2+3-4×5÷6
1÷2+3+4-5×6
1+2÷3×4-5+6
1÷2×3-4+5+6

식의 계산은 연산자 우선 순위를 무시하고 앞에서부터 진행해야 한다. 또, 나눗셈은 정수 나눗셈으로 몫만 취한다. 음수를 양수로 나눌 때는 C++14의 기준을 따른다. 즉, 양수로 바꾼 뒤 몫을 취하고, 그 몫을 음수로 바꾼 것과 같다. 이에 따라서, 위의 식 4개의 결과를 계산해보면 아래와 같다.

1+2+3-4×5÷6 = 1
1÷2+3+4-5×6 = 12
1+2÷3×4-5+6 = 5
1÷2×3-4+5+6 = 7

N개의 수와 N-1개의 연산자가 주어졌을 때, 만들 수 있는 식의 결과가 최대인 것과 최소인 것을 구하는 프로그램을 작성하시오.

입력

첫째 줄에 수의 개수 N(2 ≤ N ≤ 11)가 주어진다. 둘째 줄에는 A1, A2, ..., AN이 주어진다. (1 ≤ Ai ≤ 100) 셋째 줄에는 합이 N-1인 4개의 정수가 주어지는데, 차례대로 덧셈(+)의 개수, 뺄셈(-)의 개수, 곱셈(×)의 개수, 나눗셈(÷)의 개수이다.

출력

첫째 줄에 만들 수 있는 식의 결과의 최댓값을, 둘째 줄에는 최솟값을 출력한다. 연산자를 어떻게 끼워넣어도 항상 -10억보다 크거나 같고, 10억보다 작거나 같은 결과가 나오는 입력만 주어진다. 또한, 앞에서부터 계산했을 때, 중간에 계산되는 식의 결과도 항상 -10억보다 크거나 같고, 10억보다 작거나 같다.

예제 입력 1

2
5 6
0 0 1 0

예제 출력 1

30
30

예제 입력 2

3
3 4 5
1 0 1 0

예제 출력 2

35
17

예제 입력 3

6
1 2 3 4 5 6
2 1 1 1

예제 출력 3

54
-24

풀이

dfs를 돌면서 남아있는 연산자의 개수를 바탕으로 모든 경우의수를 탐색하도록 코드를 작성했다. 근데 계속 예제 3에서 최댓값이 48이나와서 왜 틀렸나 하니, 처음에 div 연산 할때 몫만 필요하다길래 // 연산자를 이용해서 계산해줬는데 그렇게 구해줬을 때 -1 // 3은 -1이 나온다 하지만 문제에서 의도한 답은 0이다 따라서 -1/3을 해주고 정수형으로 캐스팅하여 div를 구해줬다.

import sys
def dfs(total, i, add, sub, mult, div):
    global max_num
    global min_num
    if i == N:
        max_num = max(max_num, total)
        min_num = min(min_num, total)
        return
    
    if add:
        dfs(total + arr[i], i+1, add-1, sub, mult, div)
    if sub:
        dfs(total - arr[i], i+1, add, sub-1, mult, div)
    if mult:
        dfs(total * arr[i], i+1, add, sub, mult-1, div)
    if div:
        dfs(int(total / arr[i]), i+1, add, sub, mult, div-1)

N = int(input())
arr = list(map(int, input().split()))
op = list(map(int, input().split()))

tmp_op = []
max_num = -sys.maxsize
min_num = sys.maxsize

dfs(arr[0], 1, op[0], op[1], op[2], op[3])
print(max_num)
print(min_num)

[1182] 부분수열의 합

Soonga00 — Thu, 14 Mar 2024 09:56:15 +0900

문제

N개의 정수로 이루어진 수열이 있을 때, 크기가 양수인 부분수열 중에서 그 수열의 원소를 다 더한 값이 S가 되는 경우의 수를 구하는 프로그램을 작성하시오.

입력

첫째 줄에 정수의 개수를 나타내는 N과 정수 S가 주어진다. (1 ≤ N ≤ 20, |S| ≤ 1,000,000) 둘째 줄에 N개의 정수가 빈 칸을 사이에 두고 주어진다. 주어지는 정수의 절댓값은 100,000을 넘지 않는다.

출력

첫째 줄에 합이 S가 되는 부분수열의 개수를 출력한다.

예제 입력 1

5 0
-7 -3 -2 5 8

예제 출력 1

풀이

후아 백트래킹 첨으로 이렇게 빨리 그리고 아무런 도움 없이 푼것 같다 약간 뿌듯 tmp 배열에 각 값을 넣고 sum 함수를 이용해 원하는 값이 나오면 그때 카운트 변수를 증가시켜주는 방식으로 코드를 짰다.

def dfs(start, tmp, s):
    global cnt
    if sum(tmp) == s and len(tmp) > 0:
        cnt += 1
        # print("cnt = ", cnt, "tmp = ", tmp)
        # print()
    if start == n:
        return
    for i in range(start, n):
        tmp.append(arr[i])
        # print(i, "'s append : ", arr[i], " tmp = ", tmp)
        dfs(i+1, tmp, s)
        tmp.pop(-1)
        # print(i, "'s pop : ", tmp.pop(-1), " tmp = ", tmp)
n, s = map(int, input().split())

arr = list(map(int, input().split()))
cnt = 0
tmp = []
dfs(0, tmp,s)
print(cnt)