※ 데이터 분석과 빅데이터 분석의 차이점

- 데이터 크기 : 데이터는 일반적으로 기가바이트와 테라바이트 단위로 측정됩니다.

따라서, 서버 한 대에도 중앙 집중식 스토리지를 사용할 수 있으며,

빅데이터는 크기뿐만 아니라 볼륨으로도 구분됩니다.

빅데이터는 일반적으로 페타바이트, 제타바이트 또는 엑사바이트 단위로 측정됩니다.

-  데이터의 확장 : 데이터 분석은 조직 내부의 데이터 분석을 중심으로 이루어졌다면,

빅데이터 분석은 웹 상, SNS상의 외부 데이터까지 활용합니다.

- 데이터의 다양화 : 데이터 분석은 정형 데이터 분석 중심으로 이루어졌지만,

빅데이터 분석은 사진, 동영상, 텍스트 모두 포함하여 비정형 데이터까지 활용한다는 점에서 차이가 있습니다.

- 데이터의 대규모화 : 데이터 분석에 비해서 빅데이터 분석은 분석 대상 데이터의 규모에 큰 차이가 있습니다.

※ 데이터 전처리 기술 3가지

-데이터 청소 :　데이터 수집 과정에서 생긴 오류나 잡음을 제거하는

-데이터 편집　:　데이터에 포함된 불완전 정보를 교정하는

-데이터 라벨링　: 데이터마다 분석에 필요한 태그(tag)를 붙여주는