pile·
백엔드·다나와다나와·

검색파트의 반복 작업 자동화 과정

다나와 검색 서비스 개발팀이 처리 키워드 업데이트 수작업을 Kotlin + Spring Boot 기반 자동화 도구로 대체한 사례를 다룬다. SSH 터널링, 파일 업로드, API 호출을 순서대로 반복하던 작업을 자동화하고 전략 패턴으로 여러 검색 서버에 유연하게 배포 가능하게 만들었다.

핵심 포인트
  • 기존 수작업: 엑셀 수신 → SSH 서버 접속 → 파일 다운로드 → 키워드 업데이트 → 업로드 → API 호출을 여러 검색 서버에 반복했다.
  • JSch 라이브러리로 SSH 터널링을 구현하고 Kotlin 확장 함수로 use()를 작성해 세션·채널 자원 해제를 자동화했다.
  • 전략 패턴으로 SSH 연결 이후 수행할 작업(파일 업로드, 백업 활성화 등)을 인터페이스로 추상화해 연결 로직과 작업 로직을 분리했다.
  • Docker + Gitlab CI 파이프라인으로 자동화 도구 자체도 빌드·배포를 자동화했다.
상세 정리
  • 배경: 처리/비처리 키워드 목록을 정기적으로 업데이트해야 하는 작업이 있었는데, 프로세스가 복잡해 매번 문서를 다시 찾아 확인해야 했다.
  • 기존 흐름: 엑셀 파일 수신 → SSH로 검색 서버 접속 → 키워드 파일 다운로드 → 내용 업데이트 → 업로드 → API 호출로 반영 → 여러 서버에 반복 수행.
  • 문제: 여러 대의 검색 서버에 같은 작업을 반복하다 보니 시간 소모가 크고 누락 위험도 있었다.
  • 기술 선택: Kotlin 1.8.22 + Spring Boot 3.1.5 조합으로 자동화 도구를 개발했다.
  • JSch SSH 터널링: JSch 라이브러리로 프로그래밍 방식 SSH 연결을 구현했다. Kotlin의 확장 함수로 use() 함수를 직접 작성해 try-with-resources 패턴을 적용, 세션·채널 자원이 자동으로 닫히게 했다.
  • 전략 패턴 적용: SSH 연결 이후 수행할 작업(파일 업로드, 백업 파일 활성화 등)을 전략 인터페이스로 추상화했다. SSH 연결 코드와 실제 작업 코드를 명확히 분리해 새 작업 유형 추가 시 기존 연결 코드를 건드리지 않는다.
  • Docker 컨테이너화: 자동화 도구를 Docker 이미지로 패키징해 환경 일관성을 유지했다.
  • Gitlab CI 파이프라인: 도구 코드 변경 시 빌드·배포가 자동으로 진행되도록 파이프라인을 설정했다.
왜 읽나Kotlin + Spring Boot로 SSH 기반 서버 자동화 도구를 처음 만들 때 JSch 터널링 구현과 전략 패턴 적용 방법을 실무 사례로 함께 참고할 수 있다.
다나와
다나와 블로그
원문은 여기서 이어서 읽을 수 있어요
원문 읽기
읽음 (0)

이 글과 비슷한

  1. 백엔드·twilio-engTwilio Engineering·

    Programmable Messaging에서 Verify API로 마이그레이션하기

    Twilio의 Programmable Messaging API로 자체 OTP 솔루션을 운영하던 서비스가 Verify API로 전환하는 방법을 코드 예시와 함께 설명한다. Verify는 OTP 전송·검증을 위한 전용 API로, 전화번호 구매, 토큰 생성, DB 저장·만료 관리를 내부에서 처리해 개발자가 직접 구현할 코드를 크게 줄인다.

    요약 이어보기
    #authentication#twilio#sms+2
  2. 백엔드·포스타입포스타입·

    포스타입이 개인화 추천을 하는 방법 2부

    포스타입 백엔드 엔지니어가 벡터 기반 개인화 추천 시스템을 실제 운영하며 맞닥뜨린 성능 장애와 용량 문제를 해결한 과정을 담은 2부다. 수백만 개의 벡터 KNN 검색이 피크 시간대에 전체 Elasticsearch 검색 성능을 흔드는 문제부터 클러스터 OOM 사태까지, 쿼리 최적화와 인프라 분리 두 가지 경로로 근본 해결에 이른다.

    요약 이어보기
    #elasticsearch#vector-search#recommendation-system+2
  3. 백엔드·포스타입포스타입·

    포스타입이 개인화 추천을 하는 방법 1부

    포스타입이 태그 기반 추천의 한계를 극복하고 벡터 임베딩 기반 개인화 추천 시스템을 구축한 과정을 담은 1부다. 유사한 콘텐츠가 다른 용어를 쓰거나 동일한 태그가 전혀 다른 톤의 콘텐츠를 가리키는 문제를 임베딩 벡터로 해결하고, OpenSearch의 HNSW ANN 검색으로 수백만 벡터를 실시간 검색하는 시스템을 구축해 구매율 15% 향상을 달성했다.

    요약 이어보기
    #opensearch#vector-search#recommendation-system+2