Develop/DevOps
2022. 1. 7.
[MLOps] FastCampus 강의 정리 - 개념, DVC, MLFlow
MLOps관련 분야를 공부하다가 패스트캠퍼스에서 개설된 수업이 있다하여 신청을 했다. 그에대해 도움이 되는 정보를 간략하게 정리하고자한다. ML프로젝트와 SW프로젝트의 유사성 버전관리 데이터 버전 관리 모델 버전 관리 테스트 자동화 모델 학습 자동화 모델 성능 평가 자동화 모니터링 서빙 모델 모니터링 데이터 변화 모니터링 시스템 안정성 모니터링 AI서비스와 일반 SW서비스의 차이점은 "데이터"의 차이이며, Andrew ng교수는 "모델보다는 데이터의 품질이 더 중요"하다고 강조했음 MLOps 구성요소 (+ 활용 툴) 데이터 데이터 수집 파이프라인(Sqoop, Kafka, Spark Streaming, Airflow ...) 데이터 저장 (MySQL, Haddop, S3 ...) 데이터 관리 (TFDV, ..