곳곳에 퍼져있는 빅데이터!

빅데이터(big data)란 데이터베이스

(Database-체계화된 데이터의 모임)의 관리도구로 

데이터를 수집, 저장, 관리, 분석할 수 있는 역량을 넘어서는 

대량의 무작위한 데이터 집합 및

 이러한 데이터로부터 가치를 추출하고

 결과를 분석하는 기술을 의미합니다. 

대량의 데이터는 크기는 테라바이트,

페타바이트에 이르며

 그 크기가 계속해서 증가하고 있습니다.

(https://ko.wikipedia.org/wiki/%EB%B9%85_

%EB%8D%B0%EC%9D%B4%ED%84%B0 에서 발췌)

(이미지 출처 :https://datafloq.com/read/6-tips-for

-landing-a-job-in-the-big-data-industry/521)

데이터를 다루기 위한 도구

이렇게 방대한 데이터들을 관리하는 방법은

 매우 다양하며 분석 방법은 크게 

분석 기술과 표현 기술로 나누어지게 됩니다. 

분석한 이후 시각화 하기 위해서 프로그래밍 언어를 사용합니다. 

이때에 사용될 수 있는 Microsoft office프로그램중에서 

방대한 숫자의 데이터를 다룰 경우에는

Excel이 대표적인 프로그램이 될 것이며

 개인의 간단한 보고서나 폼을 사용하기 위해서는

Access프로그램을 사용할 수 있습니다. 

대표적인 개발도구는 Oraclel에서

 제공하는 SQL Developer이 있습니다.

이외에도 다양한 데이터를 다룰 수 있는

 프로그램 도구들이 있습니다.
 

빅데이터 사용범위

빅데이터의 사용범위는 매우 방대합니다.

(https://www.youtube.com/watch?v=k5tNBYenU7M)

위의 동영상은 빅데이터란 무엇인지

 간략하게 설명하고 있습니다.

위의 한 남자가 빅데이터에 대해서 

미국 시민들에게 질문을 하고 있습니다.

위의 질문에 대부분의 사람들은 

빅데이터에 대해서 모른다고 답합니다.

빅데이터? 

빅데이터에 대한 개념을 알고 있는 사람들은 이렇게 말합니다.

“데이터가 없다면 실속없는 빈털터리와 마찬가지 입니다.

할 수 있는 게 아무 것도 없습니다. 

비즈니스 의사 결정을 내리는데 기준이 될 수 있는

 견고한 정보가 없기 때문이죠”

기업 분석가는 이렇게 말합니다.

“중요한 점은 우리가 사용하고 있는 툴이 향상되어야 

향후 의사 결정을 추천할 수 있고 

이런 유형의 결과가 가져오는 의미를 이해할 수 있으며

 빅데이터는 광범위하고 매우 모호한 개념이지만 

세상에 이러한 모든 정보가 널려 있다고 해서

 결코 이를 간과해서는 안 되며

 더 나은 정보 체계를 구축해야 합니다. “

라고 말합니다.

이는 향후 빅데이터를 관리하는 기구의

 중요성을 이야기 하고 있으며

 또한 우리가 필요로 하는 정보를 정리 하는 방법의

 필요성에 대해서 이야기 하고 있습니다.

정보의 바다에서 우리가 원하는 정보를 얻기 위해서

 빅데이터를 정리하는 방법은 무엇일까요?

미국의 경제에 가장 큰 영향을 끼칠 수 있는

 도구라고 말하는 빅데이터! 

과연 우리의 생활 속 

얼마나 많은 곳에 숨어 있을까요?

빅데이터는 우리가 컴퓨터로 검색하는 구글에서의 기록,

여권 스캔기록, 슈퍼마켓 정보 ,cctv로도 남겨지기도 하고 

당신의 샌드위치 선호도를 알 수 있으며

 이것은 모아진 데이터 정보를 

특정 알고리즘을 통해서 분석합니다.

 빅데이터로 인해서 10년 이내에

 CPU가 사람의 생각 방식을 앞지른다고 하고 

설문에 따르면 인공지능 로봇이 회사의 책임자로서

 회의에 참석할 수 도 있다고 합니다. 

이외에도 15년 이내에 컴퓨터가 

사람의 일을 대신하고 ,

자신이 수집한 데이터와 상황의 경우를 기준으로

 차량을 사람처럼 운전하며,

 대량의 정보를 바탕으로 

여행을 안전하도록 유도할 수 있다고 합니다. 

이외에도 의학정보를 바탕으로

 각각의 사람이 가지고 있는

 조건을 분석하여 치료를 적용하도록 

도움을 줄 수 있다고 합니다. 

이처럼 빅데이터는 세상의 무수한 분야의 

정보를 수집하고 분석하여 인간에 도움을 줍니다. 

하지만 동시에 사적인 정보를 공개하게 될 수도 있는

 위험을 가지고 있기도 합니다.

또한 데이터를 수집할 때 

분야를 나누어 수집하지 않기 때문에 

잉여 정보가 수집되어 

잘못된 정보를 접하게 될 수도 있다고 합니다.

(https://twitter.com/big_data_news)

빅데이터 활용 사례

(https://www.youtube.com/watch?v=-Wy5-iRj5zk)

대표적인 빅데이터 활용 사례의 기업은 NIKE로

 이전의 데이터를 기반으로 하여

 소비자들이 요구하는 조건을 파악하고 제공하여

 이윤을 창출을 유도합니다.

판매 데이터와 수많은 공급망의 모든 단계로부터 

생성되는 데이터를 배경으로

 소비자에게 적시적소에 제품을 제공합니다. 

그리고 생성이 될 예정인 제품의 

낭비를 막기 위해서 

다양한 요소를 더 빠르고 더 효율적인 방법으로

 접근하는 도구가 이용됩니다. 

빅데이터가 회사의 경쟁력을 판단하는

 하나의 요소가 된 것입니다!

 

빅데이터의 활용 사례2

 

바둑선수 이세돌과 알파고의 대결에서도 알 수 있습니다.

알파고(Alphago)는 인공지능 바둑프로그램으로써 

대국을 할 때 수집한 데이터와 경우의 수를 분석하여 

알고리즘을 적용하여 진행하도록 되어있습니다. 

빅데이터를 통한 수많은 경우의 수를 배경으로 

이세돌이 바둑알을 두었을 때 

자신이 이길 수 있는 경우의 수를 

예측, 분석하고 알고리즘을 통해서 정리합니다.

(http://www.wired.com/2016/03/final-game-alphago-lee-sedol-big-deal-humanity/)

이외에도 정치 사회 분야에서는 

대통령의 후보를 분석할 경우에도 

빅데이터를 배경으로 분석하기도 하였으며

 기업들도 더 많은 이윤창출과 

소비자들의 욕구를 해결하기 위하여

 설문지등을 통한 정보를 수집,분석합니다. 

이와 같이 수 많은 분야가 

빅데이터와 관련이 되어있습니다. 

이는 우리의 사회의 편의에 도움을 주기도 하지만 

사생활 정보를 원치 않게 공개할 수도 있으며

 일자리를 빼앗길 수 있는 위험을 주기도 합니다.

사회,세상의 요소 하나가 정보가 되는 환경이니 만큼

 자신의 개인정보를 다룰 때 와 자신이 접하는 정보에 대해서 

한 번씩 더 생각해 보도록 해야겠습니다.