최근 빅데이터에 대한 기대와 관심이 매우 높다. 정부, 솔루션 벤더, 학회, 대학, 기업, 언론에 이르기까지 관련 조직이 만들어지지 않은 곳이 없을 정도이다. 하지만 빅데이터에 대해 제대로 이해하고 접근하는 기업이 얼마나 있을지 의문이다. 빅데이터에 대한 기대가 높은 만큼 실망도 크고 결국은 다른 IT 프로젝트와 마찬가지로 한때의 유행으로 끝나지 않을까 걱정이 앞선다.

여러분들 중에도 많은 분들이 기업의 IT 프로젝트에 직간접적으로 참여한 경험이 있을 것이다. 대부분의 경험은 당황, 황당, 실망, 경악 등으로 묘사되지 않을까 싶다. 기업의 많은 IT 프로젝트들이 예산은 초과되고, 목표기한은 훌쩍 넘기고, 결과는 기대에 미치지 못한다고 한다. 일부 조사에 의하면 IT 프로젝트의 30% 정도만이 성공하는 것으로 알려져 있다[Standish Group, Chaos Summary, 2010]. 특히 IT 프로젝트를 지원하는 다양한 도구과 방법론이 쏟아져 나옴에도 불구하고 성공비율은 크게 변하지 않고 있다는 사실은 우리를 더욱 의아하게 만든다. Continue reading →