본문으로 건너뛰기

Hyoyoul Park (박효열) — Data Engineer Portfolio. hi hyo here. 👋

Software engineer from South Korea 🇰🇷

커머스와 게임 산업에서 8년 이상 데이터 엔지니어·아키텍트로 일하며, 80PB+ 규모의 데이터 환경에서 플랫폼을 설계·운영해 왔습니다. 현재 화해에서 AWS 데이터 플랫폼 전환과 AI 운영·분석 에이전트를 개발하고 있습니다. AI로 생산성을 높이면서도 데이터 정합성, 보안, 기본기를 놓치지 않는 것을 지향합니다.

맨 위 사진을 클릭하거나, 좌우로 밀거나, 좌우 화살표 키를 눌러 다음 사진을 볼 수 있습니다.

프로필 사진 2장 남음

사진을 눌러 넘겨보세요

  • 버드뷰 (화해) logo

    버드뷰 (화해)

    Data Engineer · 데이터전략팀

    • 단독 데이터 엔지니어로 DAE와 협업해 GCP → AWS 데이터 플랫폼 전환을 4주 내 완료하고, 7년 이상 누적된 기술부채 정리
    • S3·Apache Iceberg·Glue/Athena 레이크하우스와 MSK·Debezium·Flink CDC 설계, Cloud Composer → EKS Airflow 3 전환 및 DAG 60개 이상 이식
    • DW 106개 테이블 엔진 전환, 핵심 602개 테이블의 BigQuery ↔ Athena 정합 검증 체계 구축 및 데이터 소비처 9곳 절체
    • 컷오버 후 기존 GCP·AWS 혼합 스택 대비 비용 85% 이상 절감, embulk·Jenkins ETL 실행 시간 3시간 → 27분 단축
    • Vertex AI → SageMaker 토픽분류 파이프라인 이관: 7,205행 검증에서 분류 결과 변경 0%, 실행 시간 39%·비용 51% 절감
    • 추천·분석 모델의 Athena 전환과 재현성 검증, CRM 추천 Lambda의 사전계산·캐시 구조로 응답 시간 1.6~2.4초 → 3~7ms 단축
    • Bedrock AgentCore 기반 운영 에이전트 ‘운영해’ 구축: 제품 검수·OCR·중복 탐지와 Slack 승인 자동화, 외주 운영 비용 95% 절감 및 사람 승인·CI 게이트를 갖춘 자율 개선 루프 도입
    • DataHub 시멘틱 레이어와 Claude 기반 분석 에이전트 ‘다해’ 개발·최적화: 자연어 → SQL, 병렬 분석, PII 마스킹 및 프롬프트 캐싱 등으로 Claude API 비용 80% 절감
    • Terraform·Atlantis·ArgoCD 기반 IaC/GitOps, Grafana 관측성, DataHub 카탈로그·리니지 및 개인정보 거버넌스 구축
  • KRAFTON Inc. logo

    KRAFTON Inc.

    Data Architect & Engineer

    • 80PB+ 데이터 환경에서 일부 워크로드와 자회사 AWS 분석 인프라를 Databricks로 통합 이관, 배치 시간 5시간 → 2시간 및 자회사 인프라 운영 비용 80% 절감
    • Medallion Architecture·Unity Catalog 기반 데이터 레이어와 거버넌스 정립, 클러스터 최적화로 연산 비용 30%·Materialized View 증분 추출로 비용 60% 절감
    • PUBG PC·Mobile, TERA, ELYON, Subnautica 등 10개 이상 게임의 데이터 설계·운영 및 북미·해외 스튜디오 온보딩 지원
    • 전사 인게임 재화 회계·이연수익 검증과 EMR → Databricks 이관, 회계 검증 시간 80% 및 리소스 부족 오류율 90% 감소
    • Apache Ambari 기반 Hadoop 현대화와 Kubernetes Airflow 도입, YARN OOM·GC 튜닝 및 ETL 개선으로 배치 시간 7시간 → 5시간 단축
    • TERA 자체 퍼블리싱 데이터 정합성 검증과 Kinesis 실시간 파이프라인 구축, Locust 초당 10,000 이벤트 부하 테스트 및 shard 최적화
    • ELYON 출시 로그 설계·검증과 이상 탐지 운영, 유저 이탈 구간 분석 및 개선 제안으로 이탈률 13% 감소
    • 퍼블리셔 권한 기반 LogQ 로그 조회 도구·내부 분석 플랫폼 운영, AppAnnie API와 AWS Lambda·S3 기반 모바일 매출 수집 파이프라인 구축
  • Bluehole Studio Inc. logo

    Bluehole Studio Inc.

    Data Architect & Engineer (Intern)

    • Hadoop 생태계 이해 및 cronjob을 활용한 기본 데이터플로우 스케줄링 관리
    • 기본적인 게임 스튜디오 운영 이해 및 데이터플로우 다이어그램 작성

Writing

최근 글

전체 글 보기