빅 데이터 종류

빅 데이터란 무엇인가?

빅 데이터는 현재 시대에서 가장 핫한 키워드 중 하나입니다. 간단하게 정의하자면, 정형, 비정형, 반정형 모든 데이터를 수집, 저장, 처리하는 기술입니다. 빅 데이터를 통해 산업에서 사용되는 대부분의 자료들을 처리할 수 있게 되어, 예측분석, 딥러닝, 머신러닝 등의 분야에서 큰 진보를 이루게 되었습니다.

데이터 종류

빅 데이터는 크게 정형 데이터, 비정형 데이터, 반정형 데이터로 구분됩니다.

정형 데이터(Structured Data)

정형 데이터는 데이터베이스에서 사용되는 테이블 형태로 저장이 되며, 가장 일반적인 데이터 종류입니다. 일반적으로 데이터베이스의 엑셀과 같은 모양을 한 것으로 생각하시면 되겠습니다. 정형 데이터는 형식이 일정하기 때문에 분석하기 쉬우며, 가장 많이 사용됩니다.

비정형 데이터(Unstructured Data)

비정형 데이터는 정형 데이터와는 반대로 형태가 일정하지 않습니다. 비정형 데이터에는 대부분의 사람에게 친숙한 이미지, 동영상, 음악, 사운드 등의 데이터들이 포함됩니다. 이러한 데이터들은 파일 형태로 저장이 되어 분석하기 어렵고, 처리가 느립니다.

반정형 데이터(Semi-Structured Data)

반정형 데이터는 정형 데이터와 비정형 데이터의 중간에 위치한 데이터입니다. 이 데이터는 형식이 일정해놓고 각각의 범주를 나눠 놓은 파일 형태로 저장이 되어있으며, 주로 텍스트 파일들이 대표적인 데이터 종류입니다.

빅 데이터의 활용 분야

빅 데이터의 활용 분야는 상당히 광범위합니다. 가장 대표적인 활용 분야는 영상분석, 센서 데이터분석, 로그 데이터분석, 소셜 미디어 데이터분석 등이 있습니다.

영상분석

영상분석은 영상 데이터를 분석하여 객체 검출, 동작분석, 인간 행위 분석, 물체 인식, 사람 인식 등의 분야를 포함하고 있습니다. 이러한 기술들은 CCTV 혹은 보안 용도, 게임, 로봇 등의 분야에서 널리 활용됩니다.

센서 데이터 분석

센서 데이터 분석은 아두이노와 같은 일반화 적인 센서 데이터를 분석하여 생활 속의 모든 것에 활용될 수 있는 다양한 분야에 적용됩니다. 예를 들어, 조명, 공기청정기, 가습기 등의 가전 제품에서 더욱 효율적인 수명을 꾀할 수 있습니다.

로그 데이터분석

로그 데이터 분석은 웹 사이트에서 사용자 로그 정보를 수집하고, 이 데이터를 기반으로 행동 분석, 행동 예측, 이탈 분석, A/B 테스트 등 다양한 분석을 수행합니다. 이러한 분석을 통해 모바일 앱, 웹 사이트, 소셜 미디어 등에서 쉽게 수익을 창출할 수 있습니다.

소셜 미디어 데이터분석

소셜 미디어 데이터 분석은 SNS, 블로그, 포럼 등의 소셜 미디어의 데이터를 수집하여, 사용자의 데이터 정보를 분석해 다양한 분야에 활용됩니다. 이러한 데이터를 분석하면 문화, 건강, 교육, 운동, 식음 등의 분야에서 유용한 정보를 얻을 수 있습니다.

마무리

사실상 우리가 산업 및 일상생활에서 사용되는 모든 데이터가 빅 데이터인 것입니다. 이러한 데이터의 분석을 통해, 우리는 보다 효율적인 업무 운영, 더 나은 상품/서비스 개발 및 합리적인 의사 결정이 가능해집니다. 이러한 빅 데이터 기술의 발전은 기술, 경제 발전을 동시에 이루어지게 하며, 지속 가능한 미래를 위한 무한한 가능성을 제공합니다. 앞으로도 지속적인 기술 발전과 새로운 분야 활용으로 더욱 많은 변화가 예상됩니다.