Shaplay 수학적 접근
🎲 Shapley 값의 수학적 배경 SHAP(SHapley Additive exPlanations)는 협동 게임 이론에서 유래한 Shapley 값을 기반으로 하여, 머신러닝 모델의 예측에서 각 피처가 얼마나 기여했는지를 계산하는 방법입니다. 협동 게임 이론이란? 🤝 Shapley 값은 원래 협동 게임 이론(cooperative game theo...
박상필
SANGPHIL PARK DX · AI ENGINEER
회사의 일하는 방식을
시스템으로 연결합니다.
업무·규칙·데이터의 관계를 정리하고, 화면부터 API와 저장소까지 구현합니다. 사람과 AI가 같은 업무 맥락을 활용할 수 있는 기반을 만들고 있습니다.
- AI Ready · 업무 모델
- 풀스택 · 시스템 연계
- 변경 이력 · 검증
대표 프로젝트
설계 판단과 구현 기록개발 기록 문제와 판단을 남깁니다
데이터 엔지니어링 시 고민거리
🚀 대규모 트래픽 로그 저장 및 인공지능 적용 모델링 고찰 1. 🔍 Spark를 통한 분산처리의 판단 기준 다양한 소스(예: 로그, 이벤트, 스트리밍 데이터 등)를 동시에 처리해야 하는 경우 정기적인 배치 작업(예: 일별, 주별)을 빠르게 수행해야 하는 경우 실시간 데이터 처리 필요가 있는 경우 (Spark Streaming) 데이터...
로그 데이터 - ML 데이터 파이프라인
📊 IoT 데이터 파이프라인 구축 1. 데이터 수집 (Data Collection) 🚀 ELK Stack의 Logstash가 IoT 센서와 외부 소스의 데이터를 실시간으로 수집합니다. 수집된 데이터는 Elasticsearch에 저장되어 실시간 검색 및 분석이 가능해집니다. 원본 데이터는 데이터 레이크에도 저장되어, 후속 Spark 및 머...
doc2vec based on gensim library
패키지 설치 # 0. 만약 윈도우라면 conda 환경 변수 추가 source ~/.bashrc # 1. 콘다 환경 사용 conda create -n doc2vec python=3.12.3 -y conda activate doc2vec pip install torch faiss-cpu pip install pandas numpy scikit-lear...
웹의 역사와 발전
2024-09-24 오전 <!DOCTYPE html> 웹의 역사와 발전 🌐 웹의 역사와 발전 English Version 한국어 버전 🌐 The History & Evolution of the Web ...