정보의 홍수에서 살아남기, 패스트 데이터(Fast Data)

 

쏟아지는 데이터를 빠르게 처리하는, 패스트 데이터(Fast Data)란?

 

• 쏟아지는 엄청난 양의 데이터를 실시간으로 처리해 분석하는 게 더 중요하다는 것을 강조하는 용어로 데이터의 수명주기 내에 분석 대응이 최고의 가치
• 기업 비즈니스 환경에서 경쟁우위를 확보하기 위해 빅데이터를 저장하고 분석하는 것을 넘어 데이터 발생 시점에 실시간으로 처리하고 예측 가능하게 하는 데이터 분석기술

 

패스트 데이터(Fast Data) 분석 단계별 기술 요소

 

• 수집/실행: CEP(Complex Event Processing), EDA(Event Driven Architecture)
• 저장: In-memory Database
• 분석: 상관분석, 의사결정나무, 군집분석, 연관분석, 연속성 분석
• 실행(Decision): R, 데이터 시각화(시간 시각화, 분포 시각화, 관계 시각화, 비교 시각화, 공간 시각화) 

 

주요 도구

• Spark
• Storm
• Kafka
• Flume

 

콘텐츠 더 보기

2021/02/07 - [IT Contents/빅데이터와 인공지능] - 모델의 성능을 높이기 위한 결측치(Missing Value) 처리 방법

2021/02/08 - [IT Contents/빅데이터와 인공지능] - 매트릭스를 통한 데이터 모델 평가 기법, 혼동행렬(Confusion Matrix)

2021/02/02 - [IT Contents/IT는 미래를 어떻게 바꿀까] - AI를 우주 탐사에 이용하는 5가지 방법

2021/02/01 - [IT Contents/IT는 미래를 어떻게 바꿀까] - 딥마인드 개발 AI가 "단백질 접힘" 예측에 성공 - 신약 개발 급진전 예상

2021/01/28 - [IT Contents/IT는 미래를 어떻게 바꿀까] - 양자 컴퓨터는 어떻게 조작된 기억을 우리 뇌에 심을 수 있을까

 

이 포스트는 IT토픽의 주요 내용과 핵심 키워드를 간략히 설명하는 것이 목적으로, 디테일한 내용에 대해서는 깊이 다루지 않습니다.