마감 1일 전
[GC] 데이터 엔지니어 인턴(채용연계형)
[GC] 데이터 엔지니어 인턴(채용연계형)
[함께 할 업무]
- AI 기반 수집 파이프라인 운영: LLM 및 AI 에이전트 도구를 활용하여 외부 데이터 자동 수집 및 추출
- 프롬프트 엔지니어링: 다양한 웹 구조에서 JSON 등 데이터 추출을 위한 최적 프롬프트 설계 및 고도화
- 데이터 적재 및 정합성 운영: LLM 에이전트 추출 데이터를 Snowflake 환경에 맞게 변환·적재·업데이트
- 데이터 검증 및 클렌징:
1) AI 데이터의 환각(Hallucination) 여부 확인 및 규칙 기반 검증 로직으로 정합성 확보
2) SQL을 활용하여 Snowflake 저장 데이터를 조회하고 오류 및 품질 이슈 상시 모니터링
[필수 조건]
- Solution Seeker: 문제 상황에서도 최신 AI 도구를 활용해 대안을 탐색하시는 분
- Data Driven: 감이 아닌 데이터를 기반으로 현상을 분석하고 결과물을 검증할 수 있으신 분
- Communication: 기술적 구현 내용을 비개발 팀원도 이해할 수 있도록 설명할 수 있으신 분
[지원 자격]
- Python 기반 데이터 처리 또는 크롤링 경험
- Selenium, BeautifulSoup 등 웹 데이터 수집 도구 사용 경험
- Python 기반 RESTful API 설계(FastAPI, Django 등) 역량
[우대사항]
- Snowflake 환경에서 데이터를 다뤄보거나 관련 클라우드 DW(BigQuery, Redshift 등) 사용 경험이 있으신 분
- Python 라이브러리(Snowflake Connector, SQLAlchemy 등)를 활용해 DB에 데이터를 직접 입력해 본 경험이 있으신 분
- LangChain, CrewAI 등 AI 에이전트 프레임워크 사용 또는 학습 경험이 있으신 분