뉴스[시사,정치,경제,사회,교육,국제,경영,직장,스포츠,IT,과학]]/AI,IT,과학
빅테이터 처리 시스템의 기능성 비교
스마트통통 님의 블로그
2026. 1. 20. 22:21
1.배치(Batch)처리
여러 데이터 소스로부터 유입된 데이터의 일괄처리
일간,주간,월간,연간
2. 실시간 (Real-time)
현재 발생하는 상황파악 및 발생 원인의 실시간 분석
더 큰 메모리에 대한 요구
인-메모리 처리 기술 필요
확장성- 폭발적으로 증가하고 있는 대량의 데이터를 처리하기 위해서는 시스템 확장 필수
클라우데라 EDH기반의 아마존 AWS의 확장성 사례
수직확장 하나의 시스템 한계성의 단점
수평확장 -병렬처리 구조
3.결함 허용 시스템 - Multiple Region,Load Banlancing,Active/Standby,Data Mirroring,Data Mirroring,Data Replication
데이터 복제 기술 필요 -하둡 분산 파일 시스템 결함 허용 시스템 사례
4.다양한 도구 지원
1). 빅데이터 수집,저장,처리,분석,시각화 도구 등 다양한 도구 지원 필요
2). 다양한 도구들 간 시스템 호환성 지원 필요