데이터 분석) 빅데이터의 정의 1

빅데이터 시대

빅데이터

단순히 데이터가 많은 것 뿐만 아니라
급격히 증가하고 있는 현재의 데이터는 규모나 형태가 기존의 데이터 베이스 및 정보 기술로는 보관, 처리, 분석하기 어렵다.

• 빅데이터란 표현의 등장
• 혁신, 경쟁, 생산성을 위한 미개척 지대
• 게임의 승부를 뒤엎는 자산

데이터 급증에 대한 대처가 필요

빅데이터를 활용하는 기술과 기법이 발전하고 경제적 효과가 증가할수록 계속 진화할 것

전혀 다른 데이터 환경

전 세계에서 매일 생성되는 데이터는 2.5 퀸틸리언(1퀸틸리언 == 100경)
-> 90%는 최근 2년 동안 생성된 것
-> 국내 무선 인터넷 데이터 이용량은 2012년 50580 테라바이트에서 2013년에 4만 8천 테라바이트로 급증

미국 대형 보험회사 존핸콕이 1955년 처음 컴퓨터를 도입하여 처리한 전체 데이터량은 600메가 바이트
페이스북에서 하루 처리하는 데이터량은 500 테라바이트

데이터의 의미

데이터의 어원: Things given (주어진 것)
데이터와 정보의 차이: 정보는 데이터가 가공된 것라고 생각했으나 빅데이터 시대에는 점점 구분하기 어려워지고 있다

기업들의 데이터 관리 어려움 증가

수집, 저장, 분석, 개인정보 등의 어려움 증가
스마트 기기, SNS, 사물 네트워크 등의 확산으로 데이터의 폭발적 증가

빅데이터의 출현 배경

PC와 인터넷, 모바일 기기 이용이 생활화로 데이터가 기하급수적 증가
SNS, 사물인터넷(m2m) 등으로 데이터 증가

데이터 증가와 정보기술 발전 추이

통신 속도의 증가, 데이터 저장 능력 증가, CPU의 발전 등
데이터 저장 매체의 가격 하락

새로운 데이터 유형을 다루는 기술과 전문가 등장

비정형 데이터를 저장 분류하는 하둡의 출현, 비정형 데이터를 분석할 수 있는 텍스트 애널리스트, 데이터 과학자 등장 등