Data Pipeline
One Bite Article
AI 기반 IT 뉴스 학습 플랫폼
- Airflow 기반 기사 수집·선별·본문 저장·AI 처리 API 연계 자동화
- MySQL 메타데이터와 MongoDB 기사 본문 분리 저장
- 누적 순위 점수·등장 빈도·갱신 시점 기반 상위 5개 기사 선별
- Docker 기반 Airflow 실행 환경 및 DAG 재시도 정책 구성
- Airflow
- Python
- Docker
- MySQL
- MongoDB
About · Data Engineer
분석에서 시작해, 시스템으로 이어갑니다.
데이터 사이언스 전공으로 시작해 B2B 컨설팅 기업에서 데이터 분석 업무를 수행했습니다. 분석 결과가 장기적인 비즈니스 자산으로 이어지기까지의 어려움을 경험하면서, 데이터를 분석하는 일에서 데이터를 계속 활용할 수 있는 시스템을 만드는 일로 관심을 넓혔습니다.
이후 백엔드 개발, 클라우드 인프라, 실시간 데이터 엔지니어링, LLM 애플리케이션을 경험했습니다. 데이터가 일회성 분석에 머무르지 않고 안정적인 시스템을 통해 흐를 때 지속적인 가치를 만든다고 믿습니다.
01 / Experience
분석에서 개발로,
데이터를 다루는 범위를 넓혀왔습니다.
Data Engineer · Data Backend
SSAFY 14기 DATA 트랙
Data Analyst Intern
Data Science
02 / Selected Projects
데이터 흐름부터 서비스 배포까지,
프로젝트로 쌓은 경험입니다.
Data Pipeline
AI 기반 IT 뉴스 학습 플랫폼
Infrastructure · CI/CD
여행·약속의 공동 경비 기록 및 정산 서비스
AI · Data Pipeline
어린이 금융 학습을 위한 게이밍 핀테크 플랫폼
AI Gateway · Infrastructure
청각장애인을 위한 AI 영어 발음 학습 플랫폼
03 / Toolkit
04 / Recognition
05 / Certifications
취득
한국데이터산업진흥원
자격번호 SQLD-041000591
취득
한국데이터산업진흥원
자격번호 ADsP-032000622
취득
한국산업인력공단 (HRD Korea)
자격번호 25201100769K