Today : 2024-12-27 Friday
홈 현재 경제노트 가족은 388,872명 입니다.
당신은 14,355,396번째 방문객 입니다.
경제노트 서가 가족이 쓰는 노트 책밑줄긋기 독서모임
로그인 |
회원가입없이 경제노트를 이메일로 받고 싶으신 분은 이름과 이메일을 입력해 주세요
개인정보 수집및 이용 안내에 동의
(확인하기)
뉴스레터 수정/해지
추천인
이름
메일
추천받는 분
이름
메일
인사말
개인정보 수집및 이용 안내에 동의
(확인하기)
한번에여러명추천하기
지식 자기계발&리더십 일반글
빅데이터 시대, 넘치는 '소음'에서 의미있는 '신호'를 분리해야
입력 2014-07-30 오후 3:07:44
트위터에 담기 스크랩하기 내모임에담기 이메일추천하기 인쇄하기
인간의 두뇌는 크다. 그러나 우리는 우리가 이해할 수 없을 정도로 광대한 우주 속에 살고 있다. 확률적으로 생각하는 것의 미덕은, 확률적으로 생각하면 무조건 앞으로만 나아가는 게 아니라 잠시 걸음을 멈추고 서서 자료를 살펴보게 된다는 데 있다.
즉, 자신의 믿음에 잘못된 게 없는지 생각할 수 있다는 말이다. 이런 과정이 오랜 시간에 걸쳐 반복되면, 당신은 자신이 내리는 판단의 질이 점점 더 좋아진다는 사실을 깨닫게 될 것이다.(653쪽)
 
 
눈에 보이는 것이 전부는 아닙니다. 보이는 것 너머에 있는 본질, 실제를 알아볼 수 있는 혜안이 필요하지요.
 
미국 메이저리그의 전설적인 유격수 데릭 지터. 골든글로브상을 다섯 번이나 받았던 그는 다이빙캐치로 유명했습니다. 관중들은 그의 다이빙캐치에 열광했고, 중계방송을 하는 캐스터와 스카우터들도 지터를 대단히 훌륭한 유격수라고 평가했습니다. 
그런데 '통계적'으로 분석해보니 결론은 달랐습니다. 물론 지터는 매우 뛰어난 선수이긴 했지만, 사실은 자신의 느린 점프 동작 때문에 자주 다이빙캐치를 했다는 것이 밝혀진 겁니다. 오지 스미스같은 진정 뛰어난 유격수라면 별 어려움 없이 잡아냈을 공도 지터는 몸을 던져 잡았습니다. 그래서 지터는 사람들에게 멋진 유격수라는 찬사를 받았지만, 정작 통계적으로 실력이 더 뛰어난 것이 입증된 스미스는 오히려 어렵지 않게 공을 잡아내는 바람에 상대적으로 지터보다 눈길을 덜 받았던 것이었지요.
 
이렇듯 데이터와 통계는 우리에게 보이는 것 너머에 있는 실제를 파악하는데 도움을 줍니다. 
 
그런데 문제가 하나 더 있습니다. '빅 데이터 시대'가 되면서 데이터의 양이 기하급수적으로 증가하고 있습니다. 양이 절대적으로 많아진 것도 문제이고, 그 늘어난 데이터에 유용한 정보가 상대적으로 많지 않다는 것도 문제입니다. 저자는 이를 "소음에 대한 신호의 비율이 점점 작아지고 있다"고 표현했더군요. 
 
"예측은 아주 중요하고, 그 때문에 더욱 어렵다. 소음에서 신호를 분리하려면 과학적 지식과 자기 인식을 동시에 갖추어야 한다. 즉, 객관적 실체와 주관적 실체를 교차시켜야 한다. 우리가 예측할 수 없는 것에 대한 겸손함과 예측할 수 있는 것을 예측할 수 있는 용기, 그리고 이 둘 사이의 차이를 아는 지혜가 필요하다."(656쪽)
 
빅데이터 시대입니다. 눈에 보이는 것 너머에 존재하는 본질을 파악할 수 있도록, 과학적인 통계와 확률에 대한 지식은 물론 자신의 독단과 선입견을 극복할 수 있는 지혜와 업에 대한 이해가 우리에게 필요합니다. 그것을 통해 넘치는 소음속에서 의미있는 신호를 분리해 인식해야 합니다.
 
 
 
 
예병일의 경제노트 - 트위터 : @yehbyungil / 페이스북 : www.facebook.com/yehbyungil
예병일의경제노트 추천정보
 
공유하기
덧글(2) 스크랩(1) 이 노트 글을...
예병일의경제노트 노트지기 덧글
최병훈

0

0
절대적으로 공감하는 부분입니다. 빅데이터를 분석할 수 있는 전문가의 몸값이 엄청나게 비싼 이유도 여기에 있는 것 같습니다. 국내에는 아직 거의 없는 것 같지만 실제 빅데이터를 잘 분석하면 속된말로 요긴하게 쓸수 있는 부분이 많지만 어찌보면 쓰레기 더미에서 쓸만한 물건 찾는 것과 같습니다. 잘못분석했다가는 오히려 독이 될 수 있으니까요.. [2014-08-01 오전 10:09:56]

1
답글열기
이덧글에답글달기
덧글 달기
덧글달기
이름     비밀번호
이순신의 '통찰력'과 '긍정의 용기'... 일부당경(一夫當逕)과 상유십이(尙有十二)
아마존 파이어폰, 실제 성능은 어느 정도?
노트 목록으로 이동
필자 예병일 소개 경제노트 소개 1:1문의하기 개인정보 취급방침
예병일의 경제노트    대표자: 예병일    개인정보 관리책임자: 조영동 팀장    전화: 02-566-7616   팩스: 02-566-7619