빅데이터 분석
◆ 빅데이터 시스템 아키텍쳐
- 대용량 데이터의 Repository 인 Hadoop 클러스터를 기반으로 구성
- Hive, HBase, MongDB 등 No-SQL 기반의 DB 를 구성
- R, Mahout, Spark 등 In -Memory 기반의 머신러닝 분석 도구 구성 - Device Log 및 Streaming Data 를 제어하는 KAFKA , STORM 구성
- 빅데이터 Process Workflow 를 관리하는 airflow, oozie 구성
- Lucene 기반의 대용량 검색도구 구성
◆ 머신러닝 ( Machine Learning ) 도구
- R, Mahout, Spark, Tensor Flow 등 다양한 분석 도구 구성
- 지도학습 ( Supervised Learning), 비지도 학습 ( UnSupervised Learning), 강화학습 기능 제공
- 회귀분석, 군집분석, 자동분류, 차원축소 등 분석 기능 제공
- 형태소분석을 통한 감성분석 기능 제공
◆ 시각화, 그래프 도구
- D3 기반의 시각화 도구 제공
|