동아대 IT 취업 동아리의 A/B 테스트 스터디입니다.
- 권미정(리더/데이터분석가 지망) 블로그
- 주은진(데이터분석가 지망) 블로그
- 최승현(MLops 엔지니어 지망) 블로그
- 최성훈(데이터 또는 ERP 지망/5주차부터~) 블로그
- 김준모(데이터분석가 지망/~1주차까지) 블로그
- 천혜지(CRM 지망/~3주차까지) 블로그
- 이유림(데이터분석가 지망/~4주차까지) 블로그
- 활용 도서: A/B 테스트(론 코하비.다이앤 탕.야 쉬 지음)
- 1부: 모두를 위한 입문 주제
- 2부: 모두를 위해 선택된 주제
- 3부: 종합 대조 실험에 대한 보완 및 대체 기법들
- 4부: 실험 플랫폼 구축을 위한 고급 주제
- 5부: 실험 분석을 위한 고급 주제
- 각 챕터 내용을 요약 또는 추가적인 사례를 찾아 블로깅, PPT 등 다양한 방식으로 발표를 한다.(발표 형식에 제약X)
- 한 주에 1-3개의 챕터(약 2-30쪽)를 학습한다.
- 발표는 분량과 난이도에 따라 챕터를 나누어 한 주차에 2명이 준비한다.(자세한 분담은 아래 참고)
- 발표자는 발표 마지막에 자신의 발표 내용과 관련한 퀴즈를 2개 준비한다.
- 퀴즈는 그 주의 발표자 외의 스터디원들이 무조건 각자 최소 1개씩은 풀어야 한다.
- 23.06.27부터 매주 화요일 저녁 8시에 줌으로 진행한다.
- 23.09.05부터 매주 화요일 저녁 9시에 줌으로 진행한다.
- 스터디는 카메라를 키고 참여한다.
- 발표자는 2주마다 랜덤으로 정한다.
- 스터디에 참여를 못 할 상황이 생기면 최소 2일 전에는 리더에게 미리 연락한다.(무단 불참 -1점)
- 자신의 발표 차례였는데 사정으로 스터디에 참여를 못 하게 됐을 경우
- 발표 준비를 했다면: 준비했던 자료로 다음 주 첫 번째 발표 진행
- 발표 준비를 못 했다면: 다음 주 스터디 내용으로 준비하여 첫 번째 발표 진행
- 퀴즈 정답에 대한 점수 배점은 발표자마다 첫 번째 퀴즈는 2점, 두 번째 퀴즈는 1점이다.(230725부터) 한 문제도 풀지 못한 스터디원은 -1점.
- 마지막 주에 퀴즈 점수가 가장 높은 사람에게 기프티콘을 증정한다.
- 감점 2번 시 벌금 2000원.(기프티콘에 보탬)
- 5주차부터 참여한 스터디원은 3점부터 시작.
- OT: 스터디 개요 소개 및 규칙 회의
- 교재: 1부 01 소개와 동기
- 교재: 1부 02 실험의 실행과 분석(엔드-투-엔드 예제), 03 트위먼의 법칙과 실험의 신뢰도
- 교재: 1부 04 실험 플랫폼과 문화
- 교재: 2부 05 속도의 중요성:엔드-투-엔드 사례 연구, 06 조직 운영을 위한 지표
- 교재: 2부 07 실험을 위한 지표와 종합 평가 기준, 08 제도적 기억과 메타 분석, 09 종합 대조 실험의 윤리
- 교재: 3부 10 보완 기법들, 11 관측 인과 연구
- 교재: 4부 12 클라이언트 측 실험, 13 계측, 14 랜덤화 단위 선택
- 교재: 4부 15 실험 노출 증가시키기:속도.품질 및 위험의 트레이드오프, 16 실험 분석 확장, 5부 17 온라인 종합 대조 실험에 사용되는 통계 이론
- 교재: 5부 18 분산 추정 및 민감도 개선:함정 및 해결책, 19 A/A 테스트
- 교재: 5부 20 민감도 향상을 위한 트리거링, 21 샘플 비율 불일치 및 기타 신뢰 관련 가드레일 지표