연재칼럼 지난칼럼
오소영
박종배
정동희
한일수
정윤성
크리스티나 리
송영림
김준
오클랜드 문학회
박명윤
강명화
새움터
수선재
휴람
마리리
김임수
조성현
박기태
성태용
피터 황
Jane Jo
조석증
배태현
명사칼럼
수필기행
조병철
최형만
조기조
Neil PIMENTA
김수동
변상호경관
신지수
김지향
안호석
엔젤라 김
최성길
동진
이동온
김지향
유영준
이현숙
김영안
한 얼
박승욱경관
김영나
정석현
Shean Shim
빡 늘
CruisePro
봉원곤
Mina Yang
김철환
박현득
Jessica Phuang
임종선

빅 데이터, 커서? 많아서?

조기조 0 186 2019.11.12 12:59

숲속, 바다 속, 땅속에 무엇이 있을까? 우리는 잘 알지 못한다. 그래서 탐험을 하거나 탐사를 한다. 숲과 바다, 땅 속을 잘 알 수 있다면 먹고사는데 그리 어렵지 않을 것이다. 지하자원이나 고기떼가 어디 있는지 알 수 있다면, 또 산삼이나 불로초가 있는 곳을 알 수 있다면 왜 이 고생을 하고 살겠는가 말이다. 그러면 바다나 숲, 땅 속 말고 우리가 모르는 자원의 보고(寶庫)는 어디일까?

 

ff9a570302ed2b32b98d83c4a6b3af2f_1573516
 

스마트폰이 나오고 초고속 통신망이 갖추어지니 사람들이 SNS를 통해 소통하는 데이터가 방대하다. 많은 데이터를 크던지 많던지 간에 빅 데이터(big data)라고 불렀다. 이렇게 엄청나게 늘어나는 데이터의 특성을 Volume 이라고 한다. 데이터는 글과 사진, 소리, 동영상 등 다양한 형태(Variety)로 존재한다. 또한 엄청 빠르게 생겨난다(Velocity)는 특성이 있다. 이 3가지 특성을 V3라고 하였다. 

 

여기에 더하여 이 많은 데이터를 잘 가공하면 정확한 지식 또는 진실한 해답(Veracity)을 얻을 수 있다거나 가치(Value)를 창출할 수 있다고 하여 V4, V5까지 들고 나서는 사람도 있다.

 

숲이나 땅, 바다 속이 아니라도 사람들이 생각하고 검색하고 주고받는 일상에는 흔적인 데이터가 남고 이 빅 데이터를 수집해 신속하고 정확하게 분석할 수만 있다면 무언가 얻을 것이 있으리란 점에는 이의가 없다. 그래서 검색사이트 운영자는 검색 키워드를 분석하고 SNS 운영자는 사람들이 소통하는 내용을 분석하는 것이다. 

 

최근에 나오는 자동차는 전자적으로 제어된다. 자동차의 엔진 상태, 실내 온도나 조명, 타이어의 압력이 어떠한지 뿐만 아니라 도로 상태나 주변 차량, 신호의 정보까지도 읽고 자동으로 반응하게 된다. 그래서 자동차는 기계장치라기보다는 전자장치가 되었다. 

 

자동차가 움직이며 읽고 반응하는 데이터가 바로 빅 데이터이다. 만약 자동차 제조회사에서 어떤 자동차의 운행시 발생하는 각 부품의 상태정보를 받는다면 정비가 필요한 부품과 그 시기를 알려줄 수도 있을 것이다. 고장을 미연에 방지하고 안전 운행을 하게하며 수명을 연장시키는 방법이다. 자동차만 그렇겠는가?

 

너른 서울 바닥에는 자정이 다가와 지하철이 끊어지면 택시가 귀하신 몸이 된다. 승차거부는 물론 바가지요금은 각오해야 한다. 이런 저런 이유로 서울시가 따로 노선을 정하여 심야버스를 운행한다. 당연히 많은 이용자를 효율적으로 운행하도록 노선을 정해야 하는데 모 통신사의 스마트폰 이용자 데이터와 서울시가 수집한 교통 데이터를 함께 분석하여 심야에 사람들이 많은 곳으로 노선을 만들었더니 성공적이다. 적용할 분야는 너무 많다. 

 

일상생활에서 발생하는 빅 데이터를 제대로 수집하고 가공하지 못해서나 저 바다의 고기떼를 두고도 어디에 있는지를 몰라 잡아오지 못하는 것과 다를 바 없다.

 

ff9a570302ed2b32b98d83c4a6b3af2f_1573516
 

우리가 적은 비용으로 사람들의 생각을 알아보기 위해 여론조사를 한다. 대한민국 국민들의 생각을 알아보기 위해 질문지를 만들어 전화로 1,000명의 의견을 듣고 분석하여 나온 것을 전 국민의 생각이라고 하기에는 부담스럽다. 전 국민을 다 조사할 수가 없기 때문에 적용가능한 것이 국민들이 검색하고 소통하는 빅 데이터를 분석하는 것이다. 온라인에서 사람들이 활동하는 내용을 보면 수많은 벌들이 윙윙거리며(buzz) 사는 것처럼 보인다. 버즈 분석을 하면 보물을 찾을 수도 있다. 어떤 기업이 영업을 목적으로 할 때 특정 제품과 서비스에 대한 반응을 모니터링하고 사람들의 생각을 분석하여 그 집단에 적용할 방안을 찾는 타깃 마이닝(mining; 발굴)을 하는 것이다.

 

재판은 증거로 말한다. 증인이나 증거가 있어야 한다. 먹고 사는 일도 증거인 데이터로 말하는 시대가 되었다. 그것도 확실하게 많은 데이터로 증명해야 하는 것이다. 데이터란 그 자체로는 의사결정에 활용할 수 없는 어떤 객체나 사실이다. 사람과 관계있는 개인정보 데이터는 사생활을 보호해야 되기 때문에 가명이나 익명으로 처리해야 한다. 

 

가공하여 의사결정에 쓸 수 있는 상태의 것을 정보(information)라고 한다. 이 정보에서 패턴을 추출하여 보편타당한 지식(knowledge)을 낳고 이 지식을 인류 사회에 유익하게 활용하면 지혜(wisdom)가 되는 것이다. 

 

쓰레기도 잘 가공하면 정보와 지식을 얻고 지혜를 발견할 수 있다는 것이니 놀랍기만 하다. 어디에 귀하지 않은 것이 있겠는가? 분석기술이 또 놀랍다. 

  • 페이스북으로 보내기
  • 트위터로 보내기
  • 구글플러스로 보내기
  • 카카오스토리로 보내기
  • 네이버밴드로 보내기

Comments

 플러스 광고

KS Trans Co. LTD (KS 운송 (주))
KS TRANSPORT / KS 운송 (YEONGWOONG Co. Ltd) T. 0800 479 248
(주)웰컴뉴질랜드 Welcome New Zealand Ltd
웰컴뉴질랜드, Welcome NZ, 뉴질랜드 여행, 북섬여행, 남섬여행, 패키지여행, 호주여행, 피지여행, 맞춤여행, 자유여행, 단체여행, 개별여행, 배낭여행, 현지여행, 호텔예약, 투어예약, 관광지 예약, T. 302 7777, 027 488999

갑상선암

댓글 0 | 조회 704 | 2019.12.07
갑상선암 진단을 받았습니다.꼭 수술해야 할까?누구나 암을 진단받게 되면 두려움과 막막함을 느끼는 가운데 최신 건강 정보에 목마름을 느끼게 된다. 이번 주부터 휴람에서는 휴람 의료네… 더보기

연근과 우엉

댓글 0 | 조회 307 | 2019.12.07
요즘 우리집 식탁에는 가을 제철요리로 연근(蓮根)조림과 우엉(牛蒡)조림이 자주 올라와 맛 있게 먹고 있다. 가을은 ‘땅속의 보물’ 이라 불리는 뿌리채소가 제철이다. 농림축산식품부와… 더보기

여행자들을 위한 팁: 차 사고 났을 때 대처 법

댓글 0 | 조회 689 | 2019.12.05
지난 시간에 차 사고 나는 주요 원인들에 대해 이야기 하였습니다;1. Restraints (안전벨트)2. Impairment (마약 및 음주 운전)3. Distraction (핸드… 더보기

어떻게 하면 1억불 부자가 될 수 있나?

댓글 0 | 조회 1,056 | 2019.11.27
이 칼럼을 쓰고 있는 현재까지 한국정부가 취하고 있는 완고한 입장에 비추어 볼 때 일본과 맺은 지소미아(GSOMIA) 조약이 내일(11/23) 종료될 것이 확실시 됨에 따라 고국에… 더보기

다양한 상속제도

댓글 0 | 조회 758 | 2019.11.27
인류역사상 가장 널리 퍼진 상속제도는 부계상속이다. 장남의 특권적 지위를 인정하는 장자상속을 비롯해, 막내아들이 재산을 상속하는 말자상속, 여러 아들들이 고루 나눠 갖는 균분상속,… 더보기

싸가지없는 젊은이들 vs 경우없는 어른들

댓글 0 | 조회 695 | 2019.11.27
제목부터 속어를 사용해서 송구하다. 다소 자극적인 용어 선택이지만 세대간의 갈등을 부각하기 위해 이러한 제목을 붙인 것은 아님을 양해해 주시기를 바란다. 다만, 기성세대와 젊은 세… 더보기

박경리선생의 삶과 문학(작가론) 1

댓글 0 | 조회 97 | 2019.11.27
박경리 선생(본명: 금이今伊)은 1926년 10월 28일, 경남 충무시 명정리 서피랑 꼭데기 허름한 집에서 태어납니다.선생 스스로 ‘불합리한 출생’ 이라고 말한 바대로, 선생은 아… 더보기

손 없는 처녀 이야기 3편

댓글 0 | 조회 120 | 2019.11.27
손 없는 처녀(독일)옛날 한 물방앗간 주인이 점점 가난해져 마침내 물레방아와 그 뒤에 있는 사과나무 밖에 남지 않게 되었다.어느 날 방앗간 주인은 숲으로 나무를 하러 가서 한 노인… 더보기

회사차량 GST환급 및 FBT

댓글 0 | 조회 681 | 2019.11.27
사업주에게 오해의 소지가 많은 세법규정 중의 하나는 차량에 대한 내용들이다. 규정대로 알고 있는 사업주도 많지만, 지인으로부터의 정보에 선택적으로 의지하여 잘못 알고 있는 경우도 … 더보기

Dark Web, Dark Fate

댓글 0 | 조회 143 | 2019.11.27
어둠(dark)은 암흑, 지하, 비밀, 죽음 등과 연상된다. 시리즈로 나온 영화 터미네이터에 다크 페이트(dark fate)란 부제가 붙었다. 주인공의 힘들고 어두운, 시련의 운명… 더보기

길에서

댓글 0 | 조회 124 | 2019.11.27
시인 황 동규무너진 사당 앞나뭇가지에서 도토리를 먹는 다람쥐와그 옆 나무 둥치 구멍에 숨어 있는나무 결 빼어 닮은 올빼미를 만난다.올빼미는 눈을 감고 있지만곤두세운 촉각이 손에 잡… 더보기

WORK VISA 최신 승인 사례 모음

댓글 0 | 조회 537 | 2019.11.27
이민은 real time입니다. 강산이 두 번이나 변한다는 20년이나 지금 2019년의 시점에서 1999년에 이민 온 분의 사례를 심각하게 고려할 일은 거의 없다고 보셔야 합니다.… 더보기

한 지붕 아래 여러 가구

댓글 0 | 조회 311 | 2019.11.27
뉴질랜드 생활 20년 동안 좌충우돌 정신없이 세월을 보내다가 보니, 어느덧 아이들이 성인이 되었다. 정부의 지원과 세월이 아이들을 키우는데 큰 후원자 역할을 했다. 감사하다.지금 … 더보기

또 하루가 가고

댓글 0 | 조회 113 | 2019.11.27
세상 살아가는 것이 예측할 수 없는 일들의 이어짐이라 말할 수 있지만 요즘 날씨 또한 종잡을 수 없는 것 같다. 여름이 다가오는 것 같아 두꺼운 겨울 옷들을 다 집어 넣었는데 갑자… 더보기

강점과 약점

댓글 0 | 조회 194 | 2019.11.26
사람들은 누구나 예외 없이 나름의 강점(strength)들을 가지고 있습니다. 그러나 많은 경우 사람들은 자신의 강점을 발견하고, 그것을 갈고 닦고, 활용하기 보다는 자신의 약점을… 더보기

4차 산업혁명 시대는 언제부터 언제까지인가?

댓글 0 | 조회 299 | 2019.11.26
▲ 출처: ICTs for Development -Talking about information and communication technologies and socio-econo… 더보기

노력 2020

댓글 0 | 조회 268 | 2019.11.26
뉴턴이 창시했다고 알려진 고전 역학은 고도로 체계화된 물리학의 한 분야 입니다. 고전역학이 다루고 있는 물리량은 참으로 다양하지만 그 중 모든 다른 개념들의 근본이 되는 것이 하나… 더보기

뉴질랜드 홈스테이에서 지키면 좋을 예절들

댓글 0 | 조회 896 | 2019.11.26
이번에는 뉴질랜드 홈스테이에서 주의해야 할 일들을 적어 보려한다. 뉴질랜드에 오면 문화 충돌이 주로 홈스테이에서 생기니까 홈스테이 위주로 상황을 만들어서 설명해 보았다. 우리가 많… 더보기

Mokoia Restaurant

댓글 0 | 조회 259 | 2019.11.26
Mokoia Restaurant 은 로토루아에 위치한 서양요리 전문 레스토랑이다. 뉴질랜드 대표 관광지의 레스토랑이지만 현지인들에게도 인기 있는 고급 레스토랑이다. 로토루아를 여행… 더보기

복직명령 (reinstatement)

댓글 0 | 조회 351 | 2019.11.26
피고용인이 고용주로부터 부당한 대우를 당하였을 경우 구제수단으로 금전적인 보상을 요구하는 것이 일반적입니다. 하지만 피고용인의 상황에 따라서 금전보상 외에 다른 구제수단을 법원에 … 더보기

그때는 맞고 지금은 틀렸는가?

댓글 0 | 조회 267 | 2019.11.26
늙어지면 수시로 잠이 오고 또 수시로 잠이 깬다. 남들이 다 자는 한밤중에 도깨비처럼 깨어 거실을 어슬렁거리고 남들이 TV를 보는 시간에는 혼자서 꾸벅거리고 한밤중에는 아무리 자려… 더보기

알뜰 장보기 2탄

댓글 0 | 조회 313 | 2019.11.26
안녕하세요 코끼리 아줌마 제인입니다. 지난번에 저렴장보기와 식단공개이후로 포셔닝에 대한 질문들이 있으신데요.재료비를 적게하는 방법중에 하나가 손질되지 않은 재료를 사서 직접 프렙을… 더보기

땡 할비 꽃밭

댓글 0 | 조회 186 | 2019.11.26
할아버지 집에 며칠째 인기척이 없다. 커튼도 젖혀진채 그대로인데...아침 7시면 어김없이 쇼핑가방을 들고 집 앞을 지나시는 분이다. 늦잠으로 게으름을 좀 떨다보면 벌써 다녀오시는 … 더보기

11월 월간조황

댓글 0 | 조회 142 | 2019.11.26
활기차지 못했던 봄 시즌이 금새 끝날것 같던 11월이었지만 수온의 등락을 거듭하며 봄 시즌이 길어졌던 11월 이었던것 같습니다. 산란기에 접어든 참돔 입질이 반짝 입질에 그치는 경… 더보기

우울할 때 대추차 한잔 어떠세요?

댓글 0 | 조회 142 | 2019.11.26
최근 한방의 질병 예방 및 치료 효과가 부각되면서 주위에서 손쉽게 구할 수 있는 한약재에 대한 사람들의 관심이 높아지고 있다. 특히 남용이나 오용의 위험이 상대적으로 적고 만드는 … 더보기