[정보] A/B 테스트를 활용한 데이터 사이언스 이해하기

A/B 테스트를 활용한 데이터 사이언스 이해하기 관련 자료입니다.

내용 참고 하시기 바랍니다.

 

 

A/B 테스트를 활용한 데이터 사이언스 이해하기 from rockplace

 

 

1. 빅데이터 쇼케이스 시즌 2 A/B 테스트를 이용한 데이터 사이언스의 이해 권수용 SA(sykwon@rockplace.co.kr) 2017. 09.28
 2.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트란? 2 이미지 출처: https://brunch.co.kr/@gimmesilver/15 - 의미 ... 시스템 방문자를 임의로 두 집단으로 나누고, 한 집단에게는 기존 사 이트를 보여주고 다른 집단에게는 새로운 사이트를 보여준 다음, 두 집단 중 어떠한 집단이 더 높은 성과 또는 만족을 나타내는지 측정하여, 정량적 으로 평가하는 것 - 대상 ... 웹 및 앱 서비스 - 목적 ... 복수의 상황에 대한 고객 반응을 테스트하여 최적의 방안을 식별함
3.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트 사례 1. 미국 대통령 선거 홈페이지 3 오바마 캠프에서 유용하게 사용되어 더욱 그 유용성이 주목 받음. * 실제로 오바마 대선은 SNS 분석, A/B 테스트 등 많은 데이터 분석 기법을 활용한 사례로 많이 언급
4.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트 사례 2. 정치 기금 모금활동 웹사이트 4 Contribute 단어 사용만으로도 기금 모금 10% 증가
5.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트 사례 3. 광고 사이트 5 요약 정보 이미지 추가만으로도 전환율을 기존대비 100% 증가시킴 increased conversions by 100 percent
 6.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트는 그래서 뭐라고? 6 A = B ? 기금액 차이가: 있다/없다 전환율 차이가: 있다/없다 이 차이를 보는 것이 A/B 테스트의 본질 테스트는 1회로 멈추지 않고 계속 상황을 변경시키며 발전시켜 나가야 함
7.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved Quiz Time 7 두 차트에서 무엇이 잘못되었는지 아시겠습니 까?
8.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved The Answer ^^ 8 데이터 표현의 오류, 올바른 표현방법 선 택
9.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? - 현실 9 현실에서는 단순 통계도 제대로 사용하지 못하는 경우가 태반 기본이 지켜지지 않은 상태로 잘못된 데이터 취합 및 활용이 만연 데이터의 신용 불가, 활용도 미비
10.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? - Groupping 실험 대상을 나누는 방법은?
11.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? - Groupping (계속)
12.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? - Groupping (계속) 실제로, 분할 테스트(split test)라고도 불려요...
13.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? - Groupping(계속) Facebook에서 고객의 광고 서비스 개선을 위해 사용하고 있답니다.
14.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? - 수학 본인도 이해하기 어려운데 이걸 어떻게 적용하고 써먹지? 입증은 어떻게 해?
15.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – System & Process 저장 처리 분석 시각화 데이터 수집/처리/분석을 용이하게 설계 해야 합니다.
16.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – System & Process (계속) 출처: http://lambda-architecture.net/ by 트위터 Nathan Marz 빅데이터 아키텍처는 구현하기가 너무 어렵습니다. ㅜ.ㅜ 구현 하더라도 운영은 더 어려워요 ㅠ.ㅠ
17.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 그래서 뭘 하면 되는데? 통계 분석을 잘 알고, 데이터 플랫폼을 구축하고, 실험 설계를 잘 하면, 목표
18.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 왜 다들 안하지? 통계 분석을 모르고 데이터 플랫폼을 구축하다 돈과 시간 날리고 실험 설계는 넘어가고 두려움
19.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – F.A.C.T
 20.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 자... 잠시만요 잠깐,, A/B 테스트 왜 한다고 했죠?
21.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 기억을 되돌려봐요 increased conversions by 100 percent
 22.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 기본 고려사항 테스트해서 뭐하지? 무엇을 테스트 해야 하나? 테스트 환경는 어떻게 구성하나? 한번하고 끝? 필요 없는 리소스는 줄이고, 본질에 충실해보자..
23.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 수학... How?? conversion rate = a + b * 세션 체류 시간 보는 이의 관점에 따라 쉬울 수 도 어려울 수도 있는 것이 수학
24.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 수학... 시작은 무조건 쉽게! A/B 테스트로 얻고자 하는 목표를 달성하기 위한 최소한의 수학만 생각하세요
25.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved A/B 테스트, 쉬운가? – 이것에 집중하자!!!! 아이디어 개발과 체계적 테스트 관리, 그리고 데이터 통합이 보다 중요 목적을 이루기 위한 환경은 단지 수단일 뿐! 제발 주객전도 하지 말자구요 ^^ 이 생각만 지키면 쉽습니다!
26.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved 데이터 과학이란 무엇을 하는 것인가?
27.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved 빠르고 쉽게 해보자. 어떻게?? 구글 클라우드로!!!! analytics engine
 28.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved 빠르게 적용하자... 구글 클라우드로!!! Pub/Sub DataFlow BigQuery DataStudio (in Google Compute Engine) kafka beam jupiter hadoop & spark 제약조건 때문에 클라우드가 망설여 지신다구요?? 클라우드에서 여러분의 상상을 현실화해보시고 오픈소스로 On-Prem 구축하 세요 구글과 락플레이스는 은 여러분에게 기회와 선택을 제공하니까요 ^^
29.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved 그 다음엔,,?? 끊임없는 브레인스토밍 아이디어, 아이디어, 아이디어.... 모방은 창조의 어머니! 이것저것 고민하지 말고 일단 한번 뭐든지 시도해보자 공부는 당연히 항상 하셔야죠 ^^
30.  Copyright ⓒ 2016 Rockplace Inc. All rights Reserved 마치면서... 목적을 이루기 위한 수단에 얽매이지 마세요. 필요한 기술을 직접 구현하려 하지말고 쓸수 있는건 다 가져다 쓰세요. 기술는 창의적이지 않습니다. 하지만 빠르고 편리하고 강력하지요. 창의적인 활동에 집중하세요. 여러분이 기술을 이길수는 없습니다. 역할에 얽메이지마세요. 모르는 것은 부끄러운 것이 아닙니다. 아는 사람과 협업하세요. IT로 예술하지 마세요, 돈을 버세요 ^^
31.  감사합니다 cloud@rockplace.co.kr 문의 : 권수용, 010-8718-9131, sykwon@rockplace.co.kr