"How Companies Learn Your Secrets"란 제목의 2012년 2월 16일자 기사입니다. 내용이 좀 긴데, 인사이트 및 요약은 다음과 같습니다. Target사는 고객 정보를 "Guest ID number"를 통해 관리하며, 고객의 행동정보와 관련 인구통계학적 정보를 수집 또는 구매하여 분석한다. Target은 고객의 구매습관을 분석하여, 적절한 제품광고/쿠폰 발송시기를 예측하고자 했다. 관련연구: 습관은 뇌에서 크게 "cue(유발인자) --> routine(일상행동) --> reward(보상)"의 3단계를 거친다. 즉, 고객의 습관을 분석하여 습관 유발인자(cue)에 영향을 미쳐, 제품판매를 촉진할 수 있다. 사람들의 구매패턴은 보통 의식없이 진행되기 때문에 일상적인 구매형태를 바꾸기..

빅데이터는 이제 귀가 닳도록 들어서 어떤 의미로 쓰이는지 널리 알려졌다. 다시 한번 강조하면, 빅데이터는 기존의 데이터 처리 기술로 쉽게 처리할 수 없는 데이터로 간략히 정의할 수 있다. 최근 공기업 프로젝트를 진행하면서, 빅데이터 프로젝트의 범위에 대한 논쟁이 잠시 있었다. 논쟁의 핵심은 데이터 품질 관련한 프로젝트가 빅데이터 프로젝트로 인정받는 프로젝트일까 하는 것이다. 빅데이터를 비즈니스와 관련지어 광의의 의미로 생각하면, 빅데이터를 비즈니스적 가치를 창출해 내는 경영혁신 방안으로 볼 수 있다. 기존에는 보관만 했던 데이터, 또는 기술적인 한계로 쌓지 못하고 버렸던 내부데이터, 실시간으로 볼 수 없었던 외부 오픈데이터를 이제는 기술적으로 처리할 수 있게 되었고, 결과적으로 이러한 환경은 빅데이터를 ..

빅데이터 프로젝트 (여기서 빅데이터 프로젝트란 데이터 품질, MDM, 데이터 거버넌스, 분석기반 가치 창출을 포함하는 광의의 프로젝트 개념으로 본다)를 효과적으로 진행하려면, 각종 데이터를 처리할 수 있는 수준의 품질로 유지해야 한다. 분석가능한 수준의 품질로 데이터를 처리(manipulation)하는 것을 데이터 전처리라 한다. 일반적으로, 데이터 분석시 가장 많은 시간을 차지하는 부문이 데이터 전처리 단계이다. 실제 분석하는데 걸리는 총 시간을 100으로 본다면, 데이터 전처리에 약 80의 시간이 걸린다고 본다. 빅데이터를 통해 가치를 창출하는 방법은 크게 2가지 접근 방법으로 볼 수 있다. 하나는 데이터로부터 의미있는 것을 찾는 Bottom-up 방식이고, 다른 하나는 비즈니스적 가치에서 의미를 찾..

지난 2012년 2월 15일 참석한 제7회 ACC 컨퍼런스 주요 내용입니다. 총 3섹터로 나눠서 컨퍼런스가 진행이 됐는데, 저는 첫번째 섹터에서 강의를 들었습니다.공통 발표 내용은 다음과 같습니다. 장영재 카이스 교수님의 발표는 "빅데이터시대의 경영의 새로운 패러다임"이라는 주제로 발표하셨습니다. 예전에는 데이터가 없었는데 지금은 어떤 데이터를 찾기만 하면 나온다라는 가설을 말씀해주셨습니다. 그리고 분석을 통해 사실을 알아낼 수 있다고 하시면서, 야구에서 번트가 과연 점수를 내는데 도움이 더 되는가 설명해주셨습니다- 무사 1루에서 번트를 통해 1점 날 확률이, 번트없이 1점 활 확률보다 높은것 으로 나타났습니다. 그 차이는 정말 미미하지만요. 이제는 분석을 통해 예측뿐만이 아니라, 구체적인 운영안을 제안..

2011년 12월 2일(금) 오전에 참석했던 "빅 데이터 시대의 데이터마이닝 역할" 학술대회 자료 내용 입니다. 3가지 분야에 관한 내용이였습니다. 1) Recommender System with Big Data 세션은 미국 현지 Yahoo Research에서 근무하다 삼성전자 DMC 연수소 재직중인 박승택 박사가 발표해주셨습니다. 추천 시스템은 현재 삼성전자 쪽에서 많은 연구를 하고 있다고 합니다. 1992년 부터 시작된 추천 시스템이라는 것이 현재까지 약 10년동안 정확성은 발전한 것이 보이지 않는다라고 하셨습니다. 소셜화되는 관점이 이젠 부각되어야 한다는 것을 말씀하셨고요. Hadoop이란 Open Source에 대한 언급이 있었고, Map/Reduce라는 것에 대한 언급이 있었습니다. Map --..