빅데이터 2019. 3. 6. 11:43

Understanding of Big Data 


What is Big data?  빅데이터란?



컴퓨터 시스템의 발전

8bit computer, 디스크 소켓에서 시작


->컴퓨터가 점점 발전하면서 빅데이터 개념이 생김.



Big data is when the normal application of current technology does not enable users to be obtain timely, cost-effective, and quality answers to data-driven questions.



ex) 기상예보

컴퓨터로 어떻게 구름을 표현할까?

-> 1픽셀에 구름크기를 맞추며 대략 1byte로 예측한다.


하나의 1byte는 작은 정보이지만, 대한민국 전체 구름과, 구름의 이동, 몇년 동안의 날씨 정보까지 합쳐지면 데이터의 양이 방대해진다.



'Big-data' is similar to 'small-data', but bigger.

but having data bigger consequently requires different approaches.



과거에도 데이터는 많았다. ex) 신문데이터


빅데이터는 단지 데이터의 수집에서 데이터를 어떻게 해석하고, 어떻게 처리하냐에 따라 그 의미가 달라진다.


빅데이터라는 단어의 개념은 기존의 개념에서 시대의 변화에 따른 용어의 변화라고 볼 수도 있다.



Characterization of Big data

Volume, Velocity, Varierty


Volume

terabyte -> zettabyte

데이터 사이즈의 크기 변화


Velocity 

batch -> steaming data

일괄처리. 데이터를 한번에 쭉 처리한다.  -> 필요에 따라 데이터를 처리


Varierty

structured-> structured & unstructured



key enables for the growth of "Big Data" are:

Increase of storage of capacities

Increase of processing power

Availability of data

현재 빅데이터의 발전이 급격히 이루어질수 있던 이유는 환경이 뒷받침이 가능해졌기 때문이다. 현재는 컴퓨팅환경이 많이 발전했기 때문에

2012년부터 빅데이터의 popularity가 증가했다.

과거에도 인공지능의 붐은 있었지만, 환경이나 시스템이 받쳐주지 못해서 오래가지 못했다. (인프라의 구축이 부족했다.)

posted by 마스터박 MasterPark

댓글을 달아 주세요