Data Engineer

직무 Summary 넥스트증권 AI데이터플랫폼팀과 함께 차세대 금융 데이터 레이크하우스를 만들어갈 데이터 엔지니어(경력)를 모집합니다. Confluent Kafka 기반 실시간 스트리밍과 Databricks Delta Lake 기반 레이크하우스 아키텍처를 설계·구축하고, Flink CDC를 활용한 거래·시세·고객 행동 데이터의 실시간 수집부터 서빙까지 End-to-End 데이터 파이프라인을 책임집니다. IaC(Terraform, Ansible)로 인프라를 자동화하고, Unity Catalog 기반 데이터 거버넌스와 금융 규제 준수를 기술적으로 구현합니다. [주요 업무책임] 실시간 데이터 파이프라인 구축: Confluent Kafka(KRaft 모드) 기반 스트리밍 아키텍처를 운영하고, Flink CDC를 활용하여 Oracle 계정계 시스템의 거래·시세 데이터를 exactly-once 보장으로 실시간 수집합니다.데이터 레이크하우스 설계·운영: Databricks Delta Lake 위에 Bronze/Silver/Gold 메달리온 아키텍처를 구축하고, Delta Live Tables(DLT)와 Lakeflow를 활용하여 선언적 데이터 파이프라인을 개발합니다.데이터 서빙 레이어 개발: OpenSearch(텍스트/시맨틱 검색), Redis(실시간 랭킹/캐싱), FastAPI 기반 REST API를 통해 다양한 소비자에게 데이터를 제공하는 멀티엔진 서빙 아키텍처를 구축합니다.AWS 클라우드 서비스 활용: S3(데이터 레이크 스토리지), EC2(데이터 처리 워크로드), EKS(컨테이너 기반 서비스) 등 AWS 서비스를 활용하여 데이터 파이프라인과 서빙 레이어를 구축·운영합니다.데이터 거버넌스 및 규제 준수: Databricks Unity Catalog 기반 데이터 접근 제어, PII 마스킹/탐지, 금융 규제 준수를 위한 아카이빙 및 보안 아키텍처를 구현합니다.크로스팀 협업: AI/ML 엔지니어, 프로덕트 엔지니어, 데이터 분석가와 긴밀히 협업하여 시세 데이터, 뉴스 데이터, 행동 분석 데이터 등의 요구사항을 파악하고 최적의 데이터 솔루션을 제공합니다. [필수 자격요건] 5년 이상의 데이터 엔지니어 경력Python 또는 Java 중 하나 이상의 프로그래밍 언어에 능숙하신 분SQL 활용 능력이 뛰어나고 데이터 모델링에 대한 깊은 이해를 갖추신 분Apache Kafka 기반 대규모 실시간 스트리밍 데이터 처리 경험이 있으신 분Apache Spark 또는 Databricks 등 대용량 데이터 처리 프레임워크 사용 경험이 있으신 분CDC(Change Data Capture) 파이프라인 구축 경험이 있으신 분 (Flink CDC, Debezium 등)AWS 등 퍼블릭 클라우드 환경에서 데이터 인프라 구축 및 운영 경험이 있으신 분RDBMS(Oracle, PostgreSQL 등)에 대한 이해가 있으신 분 [선호 자격요건] 증권, 은행, 카드사 등 금융 도메인에서 데이터 플랫폼 구축/운영 경험이 있으신 분Databricks(Delta Lake, Unity Catalog, DLT) 또는 유사 레이크하우스 플랫폼 운영 경험이 있으신 분Confluent Platform(Schema Registry, KRaft, Cluster Linking) 운영 경험이 있으신 분Terraform, Ansible 등 IaC 도구를 활용한 인프라 자동화 경험이 있으신 분데이터 품질 모니터링 및 데이터 거버넌스 체계 구축 경험이 있으신 분OpenSearch, Redis 등 서빙 엔진 운영 경험이 있으신 분전자금융감독규정 등 금융 규제 환경에 대한 이해가 있으신 분CI/CD 파이프라인 구축 및 DevOps 문화에 대한 이해가 높으신 분AI 코딩 에이전트(Claude Code, Codex, Cursor 등)를 활용한 Agentic Engineering 경험 또는 관심이 있으신 분AI 도구의 출력을 검증·조합하여 복합적인 엔지니어링 산출물을 만들어내는 Compound Engineering 역량이 있으신 분AI Harness(MCP 서버, 커스텀 스킬, 훅 등)를 설계·구성하여 개발 생산성을 극대화한 경험이 있으신 분 [제출 서류 (필수)] 국문 이력서 및 자기소개서(자유 양식) 제출(선택) GitHub/기술 블로그/포트폴리오 링크 첨부 --- [유의사항] 상기 영입 절차는 기본 프로세스이며, 회사의 사정에 따라 전형 절차가 추가 또는 변경될 수 있습니다.세부 사항(지원 자격, 전형 방식 등)은 공고별로 상이하며, 지원자는 공고 내용을 충분히 확인할 책임이 있습니다.지원서 및 제출 자료에 기재된 내용이 사실과 다르거나 허위로 판명될 경우, 전형 진행 중 또는 합격 이후라도 채용이 취소될 수 있습니다.전형 진행 과정에서 필요 시, 지원자의 사전 동의를 받아 레퍼런스 체크 등 추가 검증 절차가 진행될 수 있습니다.장애인 및 국가보훈대상자는 관련 법령에 따라 우대합니다.원활한 채용 운영을 위해 동일 기간 내 복수 포지션에 대한 동시 지원은 제한될 수 있습니다.본 채용은 수시채용으로 진행되며, 적합한 인재 채용 시 공고는 사전 고지 없이 조기 마감될 수 있습니다.면접 방식 및 소요 시간은 전형 단계 및 상황에 따라 변경될 수 있습니다.복지 및 혜택은 회사의 내부 규정, 취업규칙 및 개별 근로계약에 따라 변경 또는 제한될 수 있으며, 근로 형태에 따라 적용 범위가 상이할 수 있습니다. *문의: TA팀 recruit@nextsecurities.com