데이터 수집

Azure Data Factory는 다양한 저장소 간에 데이터를 복사/이행/변환/로드할 수 있습니다.

• 데이터 오케스트레이션을 지원하고 워크플로우를 생성하는 데이터 통합 서비스
• 연결된 서비스 (Linked Services) 지원
• 데이터 파이프라인 모니터링

데이터 수집

Azure Event Hubs는 실시간 이벤트를 처리할 수 있는 분산 스트림 프로세싱 플랫폼입니다.

• 실시간 분산 배치처리 지원
• 자동 스케일 확장 지원
• 이벤트 데이터 캡처 기능 추가

데이터 저장

Azure Data Lake Storage는 다양한 형태로 수집되는 대용량 데이터를 통합/저장/관리합니다.
수백 기가비트의 처리량을 유지하면서 모든 형식의 대량 데이터를 저장, 액세스, 분석할 수 있도록 지원합니다.

• 클라우드 기반 엔터프라이즈 Data Lake 솔루션
• Hadoop 호환 액세스
• 계층적 디렉터리 구조 및 세분화된 보안

데이터 통합

Azure Synapse Analytics는 데이터 통합, 웨어하우징, 데이터분석을 결합한 엔터프라이즈 서비스입니다.
데이터 웨어하우스 SQL, 빅데이터 Spark, ETL/ELT를 위한 파이프라인과 데이터 분석 서비스를 통합 제공합니다.

• 다양한 데이터 형태에 쿼리 방식 지원
• 통합 분석환경 Synapse Studio 제공
• 다양한 규모의 ETL 파이프라인 구성

데이터 분석

Azure Machine Learning은 수집된 데이터를 기초로 머신러닝을 분석/개발하는 고급분석 플랫폼입니다.
파이프라인을 구성하고 AutoML, 모델 튜닝 등 ML자동화 기능을 제공합니다.

• 머신러닝/딥러닝 분석 환경과 모델 관리
• Azure Machine Learning Studio 제공
• 모델 재학습을 위한 MLOps 지원

데이터 시각화

Microsoft Power BI는 데이터를 연결 및 분석하여 시각화 하고 인사이트를 공유하는 플랫폼입니다.
실무자가 직접 경영 환경을 분석하여 의사 결정을 돕는 비즈니스 분석 도구입니다.

• 대시보드 및 리포트 작성 기능
• 편리하고 손쉬운 인터페이스 환경 제공
• 다양한 데이터 원본의 데이터 통합
• 다양한 통계분석 및 인공지능 서비스의 손쉬운 연동
• 리포트 데이터 자동갱신으로 효율성 증대

• 실시간, 배치분석 시나리오 등 다양한 비즈니스 시나리오에 적합한 새로운 데이터 분석 서비스를 검증
• 기존에 정형분석과 더불어 최신 오픈소스 분석 언어인 R, Python, Spark를 사용한 자유로운 분석환경 토대 마련
• Scikit Learn, TensorFlow, Keras 등 머신러닝과 딥러닝에 필요한 다양한 분석 기법과 모델 활용 및 검증

• 동일 노트북 내에서 Python, R, Scala, SQL을 지원하여 사용 편리성 증대, Data 분석 테스트 및 성능 검증
• 데이터 엔지니어, 사이언티스트의 협업 환경 편리성 검증
• 유연한 환경의 분석플랫폼으로 다양한 서비스 타입의 업무 연계성 최적화 테스트
• 데이터 보호 및 관리 정책의 유효성 검증

• Cloud기반 분석 서비스 구축의 예상비용 산출 및 TCO 절감을 위한 최적화 아키텍처 검증
• 향후, 시스템 증설 or 확장에 대비하여 사용량 기반 비용 관리 계획 사전검증