- 직무 데이터 엔지니어
- 경력 5 ~ 24 년
- 기간 상시 채용
- 위치 서울시 강남구 영동대로 607 랜드마크빌딩 6층
기술 스택
PostgreSQL
AWS Lambda
Python
|
업무 소개
- 대규모 비정형 금융거래 데이터 수집, 변환 및 적재를 위한 인프라 구축 및 운영
- 고성능 데이터 파이프라인 설계, 개발 및 운영
- 중소사업자 금융거래 데이터 수집 및 전처리 과정 개발 및 운영
- 외부 데이터 이슈 대응 및 지속적인 자동화를 통한 운영 개선
- 수십만 사업자 데이터를 빠르고 안정적으로 처리하기 위한 데이터 인프라 구축
- 데이터 처리 배치 작업 간의 의존성 관리 시스템 구축
자격 조건
- Python 기반 데이터 엔지니어링 혹은 백엔드 개발 경험
- 프로덕션 환경에서 실시간 대용량 분산 처리에 필요한 인프라 구축 경험
- 데이터 이슈 분석 및 모니터링을 포함한 데이터 파이프라인 운영 경험
우대 사항
기술스택
- Python 3+로 데이터 스크래핑 서버를 구현
- PostgreSQL 데이터베이스를 AWS RDS 상에서 운영
- Codeship, AWS EB를 사용하여 CI/CD
- 정적 분석에 pycodestyle/autopep8을 사용하며 CI 과정에 통합하여 자동화
개발 팀 & 환경
| 팀내 개발자 | 5명 |
