About the Role
한국에 기반을 둔 데이터 기반 솔루션 리딩 기업에서 AI 및 머신러닝 모델의 핵심 동력이 되는 데이터 파이프라인을 설계하고 최적화할 데이터 엔지니어를 찾습니다. AI와 애플리케이션의 성공적인 구현 및 운영을 위해 벡터 데이터베이스 구축과 데이터 마이그레이션을 통해 효율적인 데이터 운영 자동화를 구현하는 중요한 역할을 담당합니다. 정형/비정형 데이터를 아우르는 데이터 레이크 플랫폼 구축을 주도하고, 특히 LLM(대규모 언어 모델)이 이해할 수 있도록 데이터 전처리 작업을 수행하며, 생성형 BI(비즈니스 인텔리전스) 구현을 위한 RAG(검색 증강 생성), 프롬프팅 등 AI+BI 전문 역량을 발휘할 분을 모십니다.
[주요 업무 내용]
- AI 및 머신러닝 모델의 학습과 추론을 위한 데이터 파이프 라인을 설계하고 최적화 합니다.
- 벡터 데이터베이스 구축 및 데이터 마이그레이션을 통해 효율적인 데이터 운영 및 자동화를 구현합니다.
- 정형/비정형 데이터 레이크 플랫폼 구축의 PM/PL 역할을 수행하며, RDB의 정형 데이터를 LLM 모듈이 이해할 수 있도록 전처리(청킹, 임베딩)를 담당합니다.
- 생성형 BI 구현을 위한 AI+BI 전문가로서, Text2SQL에 필요한 RAG 및 프롬프팅을 담당합니다.
[자격 요건]
- SQL, Python 등 데이터 처리 기술에 대한 실무 경험이 3년 이상인 분
- 분산 데이터 처리 프레임워크 경험이 있는 분 (예: Apache Spark)
- 데이터 모델링, 데이터 품질 관리, 거버넌스 경험이 있는 분
- DataOps 기반의 CI/CD 환경에 대한 이해가 있는 분
- 학사 이상 학위 소지자
[우대사항]
- 대규모 데이터 플랫폼 구축 프로젝트 PM/PL 경험
- Databricks, Bigquery, Snowflake, Palantir Foundry 등 실무 경험
- VectorDB, GraphDB 활용을 포함하여 생성형 AI 서비스를 위한 데이터 파이프라인 구현 경험
- PostgreSQL (EDB, Greenplum, PGSQL 등) 관련 경험 및 PGVector 구현 경험 및 이해도 보유
[이런 분들께 적합합니다]
- AI/ML 모델을 위한 데이터 파이프라인 설계 및 최적화에 깊은 관심을 가진 분
- 정형 및 비정형 데이터를 아우르는 데이터 레이크 플랫폼 구축 경험을 쌓고 싶은 분
- LLM 기반의 데이터 전처리 및 생성형 BI 구현에 기여하고 싶은 분
- 데이터 엔지니어링 전문성을 바탕으로 AI 기술의 비즈니스 가치를 극대화하고 싶은 분
[복지 및 처우]
- Competitive (본 포지션에 적합한 매칭 후보자분들께 상세 JD 및 Compensation 규모에 대한 MyNext의 전문적인 어드바이스를 제공합니다.)
#데이터엔지니어 #데이터파이프라인 #LLM데이터 #생성형BI #DataOps #MyNext커리어
포지션 매칭 문의 및 프로필 등록하기 →
관심 포지션에 즉시 매칭 되지 않더라도, 향후 유사한 리더십 기회가 열릴 경우 우선적으로 연락 드릴 수 있도록 사전 프로필 등록을 권장 드립니다.
MyNext 인사이트
오늘날의 IT 환경에서 데이터는 모든 Ai 및 머신러닝의 핵심 동력으로 작용합니다. 데이터 기반 솔루션 기업들은 이러한 첨단 모델을 구동할 데이터 파이프라인을 설계하고 최적화할 데이터 엔지니어를 적극적으로 찾고 있습니다. 특히 LLM(대규모 언어 모델)과 생성형 Ai의 부상으로 정형/비정형 데이터를 아우르는 데이터 레이크 플랫폼을 구축하고, Ai가 이해할 수 있도록 데이터를 전처리하며 생성형 BI 구현을 이끌 Ai+BI 전문가의 중요성이 그 어느 때보다 커지고 있습니다.
이처럼 빠르게 가속화되는 Ai 시대에 데이터 엔지니어로서 커리어를 성공적으로 이끌어가는 것은 단순한 기술적 숙련을 넘어 전략적인 시야를 요구합니다. 많은 데이터 전문가들이 벡터 데이터베이스 구축이나 LLM 데이터 전처리 같은 심도 있는 기술 역량은 갖추고 있지만, 이러한 전문성이 비즈니스 가치로 어떻게 연결되고 커리어의 다음 단계를 어떻게 설계해야 할지에 대한 고민을 할 수 있습니다. MyNext 커리어 코칭 서비스는 Ai/ML 모델을 위한 데이터 파이프라인 설계 및 최적화에 대한 여러분의 깊은 관심을 바탕으로, Ai 기술의 비즈니스 가치를 극대화하는 전략가적 데이터 엔지니어로 성장하기 위한 명확한 커리어 로드맵을 제시해 드립니다.