빅데이터

IT융합 소셜미디어 서비스 산업의 고도화 기업들의 고객데이터 수집활동, 멀티미디어 콘텐츠의 폭발적 증가와 스마트폰 보급, SNS활성화 사물통신망의 저변확대로 데이터양은 그 종류와 수가 급격히 증가되고 있다. 모든 기업이 보유한 빅데이터가 거대한 가치 추출이 가능할 만큼 충분한 규모에 도달해 누가 먼저 가치를 추출하느냐가 기업의 성패를 가늠할 상황에 직면.

하지만 볼륨 폭증에 대한 기회를 확보 할수 있는 방법은 미흡. 빅데이터는 기업의 가치극대화를 위해 활용될 수 있는 만큼 기존환경과의 연계, 고가용성, 사용의 용이성, 보안, 시각화 적시 분석 등이 가능해야 됨,

빅데이터 정의

현재시스템으로 처리 가능한 범위를 넘어서는 데이터이다 라고 정의되거나

1. 혁신적인 형태의 자료처리 방법이 필요할 정도의 양 -용량

2. 데이터의 생성과 흐름이 매우 빠르게 진행되는 속도

ex)기상정보측정 장치는 시시각각으로 변화하는 기상정보를 측정하며 기록하는데 그 데이터의 생성 속도는 오로지 미리정한 데이터 측정 사이클에 의해 결정됨.

3. 사진 동영상 등 기존의 구조화된 데이터가 아닌 다양성

가트너에 의해 정의된 빅데이터 3V 의 특징이며 복잡성을 추가해 3V+C로 정의 하기도 함.

ex)이미지 처리기술이 급격히 발전하며 안면인식을 통해 고객의 성별과 나이 등을 파악할 수 있고 이를 마케팅에 활용하는 일이 현실화되기 시작했음. 즉 종전에는 축적해 놓았을 뿐 제대로 활용할 수 없었던, 특수한 처리기술이 요구되는 다양한 형태의 데이터가 풍부하고도 유용한 정보를 제공할 수 있는 소중한 자원의 지위에 자리매김하게 됨.

소셜미디어

빅데이터 80%이상은 비정형데이터로 추정되며 이 가운데 특히 텍스트데이터가 매우 중요한 위치를 차지하고 있음. 빅데이터의를 구성하는 텍스트 데이터의 주요 원천은 소셜미디어임.

인간의 사고와 행위를 인간스스로 기록하여 생성하는 장이라는 검에서 특수한 가치를 지니고 있고 사용자들은 소셞디어를 통해 연결되어있는 온라인 환경에서 새로운 공동체를 형성하고 서로의 생각과 일상을 공유하며 그 가록을 텍스트형태로 남김.

빅데이터의 종류

정형 - 고정된 필드에 저장된 데이터를 뜻함. 관계형 데이터베이스나 스프레드시트가 여기에 속함.

반정형 -고정된 필드에 저장되어있진 않지만 메타데이터나 스키마 등을 포함하는 데이터 틔, HTML, 텍스트가 여기 속함

비정형 - 고정된 필드에 저장되어있지 않은 데이터를 뜻함. 텍스트 분석이 가능한 텍스트문서, 이미지나 동영상 , 음성데이터가 여기에 속함.