Software Engineer (Data & Crawling)

[포지션 소개]

단순히 데이터를 쌓아두는 것이 아니라, 외부의 데이터를 우리 시스템으로 흐르게 하고(Sourcing), 고객이 사용하는 다양한 업무 도구와 매끄럽게 연결하는(Integration) 역할을 담당합니다.

방대한 데이터 파이프라인을 설계하고, 외부 시스템과의 연동 구조를 고민하며, 데이터가 비즈니스 가치로 전환되는 길을 닦아주실 분을 찾습니다.

[담당 업무 | Responsibilities]

• 데이터 파이프라인 구축 및 고도화
• 다양한 원천(Source)의 데이터를 수집하고 정제하여 적재하는 백엔드 프로세스 개발
• 데이터 최신성(Freshness) 유지를 위한 자동화 로직 구현
• 서비스 연동 (Integration) 개발
• 고객사 내부 시스템 및 3rd-party SaaS 솔루션과 데이터를 교환하는 API 구조 설계
• 양방향 데이터 동기화(Sync) 및 매핑 로직 구현
• 데이터 운영 도구 개발 및 관리
• 데이터 정합성을 검증하고, 데이터 라벨링 팀이 효율적으로 일할 수 있도록 관리
• 리드 데이터 분석 및 가공
• 수집된 로그와 데이터를 분석하여 유의미한 영업 기회(Lead)로 가공하는 알고리즘 구현

• python, java/kotlin, javascript/typescript 등을 이용한 백엔드 개발 경험이 있으신 분
• 외부 API 연동 및 시스템 통합(Integration) 경험이 있으신 분
• NoSQL(MongoDB) 설계 및 대용량 데이터 모델링 경험
• 비동기 데이터 파이프라인(AWS MSK/Kafka, Redis, Taskiq 등) 구축 경험
• 회사 조직에서 6개월 이상 업무를 수행해본 경험 (정규직, 계약직, 인턴 등 형태는 무관)

• Python - FastAPI 를 사용한 서버개발 경험이 있으신 분
• Polars 등을 활용한 고성능 데이터 프레임 처리 및 전처리 경험
• 대규모 데이터를 메모리 효율적으로 처리해보신 분
• 대용량 데이터 처리 및 비정형 데이터 구조화 경험
• 데이터 결합(Data Merging) 및 정합성 확보 경험
• B2B SaaS 제품의 연동 개발 경험

서류 전형 > 과제 전형 > 실무 인터뷰 > 컬처 인터뷰 > 레퍼런스 체크(경력의 경우) > 최종 합격