Sentivex ㈜인브릿지
멀티테넌트 데이터 수집 플랫폼 설계 및 구축
문제 상황
기존 수집기는 하나의 벤더/고객사 전용이라 수집 대상을 추가할 때마다 별도 프로젝트로 구현하고 배포해야 했습니다. 여러 고객사를 하나의 플랫폼에서 지원하려면 고객사와 보안 벤더의 연결인 '연동'마다 자격증명을 관리하고, 한 연동의 API 호출 한도 초과가 다른 연동의 수집을 막지 않도록 해야 했습니다.
접근 방식

- 연동마다 자격증명과 수집 대상을 관리하도록 모델링했습니다. 자격증명은 암호화해 저장하고, 기존 연동을 갱신할 때 고객사와 벤더가 일치하는지 검증했습니다.
- 벤더/데이터 유형별 수집 로직을 구현체로 분리하고 Registry에 등록하도록 설계했습니다. 벤더별 설정과 수집 대상도 등록 정보로 옮겨, 공통 제어 로직에 흩어져 있던 벤더별 분기를 제거했습니다.
- 호출 한도 초과가 반복되던 벤더 엔드포인트에 Redis 기반 연동별 대기 시간을 적용했습니다. 429 응답을 받으면 Retry-After를 기준으로 해당 연동의 동일 엔드포인트 호출을 제한하고, 다른 연동에는 같은 제한이 적용되지 않도록 했습니다.
해결 및 성과
- 공통 인터페이스를 재사용해 신규 벤더 수집기 13종을 약 1주 만에 구현하고 실제 벤더 API로 검증했습니다.
- 4개 보안 벤더를 지원하고, 운영 15일간 약 65만 건의 데이터를 안정적으로 수집했습니다.