[TIL] 2025-01-02 (API/Linux)

Today I Learned (2025-01-02)

---

목차

• Today I Learned (2025-01-02)
• 오늘 공부한 내용
  • 1. 중간 프로젝트
  • 2. 리눅스
• 어려웠던 내용
• 궁금한 내용과 부족한 내용
• 느낀 점
• 오늘 하루

---

오늘 공부한 내용

1. 중간 프로젝트

• FastAPI(GTK Model, M/L) CI/CD 수정 및 API 테스트
• GTK 모델 배포(ec2,ecr)
• GTK API 최적화
  • Pandas → Polars
    • 전처리 데이터 990mb → 74mb
    • 데이터 로드(csv, 10회)
      • Pandas 평균 로드 시간: 12.3838 초
      • Polars 평균 로드 시간: 1.3710 초
    • 데이터 로드 개선(parquet, 10회)
      • Pandas 평균 로드 시간: 5.1043 초
      • Polars 평균 로드 시간: 0.6272 초
    • API 응답 속도 개선(5회)
      • 평균 8초
      • 평균 4.5초
      • numpy → torch
      • 스레드 수 조절(cpu 코어 수 절반)
• GKT 도커 이미지 용량 최적화
  • 3.16gb → 523mb
    • torch cpu 버전 설치 → 불필요한 cuda 제외
• S3 → Lambda → Github Actions(CI/CD) 파이프라인

2. 리눅스

• 리눅스 Cron(크론) - 스케줄링

---

어려웠던 내용

• API 속도 개선

---

궁금한 내용과 부족한 내용

• API 최적화 방법

---

느낀 점

• API 응답을 더 빠르게 하고 싶다.

---

오늘 하루

• 빠름