[노티플라이 소식] '오늘의집' 실험 플랫폼 고도화 컨설팅 – 이민용 대표의 자문으로 더욱 강화된 실험 시스템 구축

안녕하세요, 노티플라이 팀입니다! 오늘은 노티플라이 이민용 대표가 온라인 홈 인테리어 플랫폼 '오늘의집'에 제공한 실험 플랫폼 컨설팅 후기를 공유하려고 합니다. 이번 컨설팅은 오늘의집의 자체 실험 플랫폼을 고도화하고자 하는 목표를 가지고 진행되었습니다. 이를 통해 오늘의집은 더욱 효과적인 실험 플랫폼을 구축할 수 있었고, 실험을 중심으로 한 의사결정 시스템을 강화할 수 있었습니다.

오늘의집의 요구사항: 데이터 기반 의사결정 시스템 강화

오늘의집은 고객 경험을 개선하고, 데이터를 기반으로 한 더 나은 의사결정을 내리기 위해 실험 시스템을 강화하고자 했습니다. 이 과정에서 메트릭 정의, 올바른 실험 방법론, 통계 검정 방법에 대한 자문이 필요 했는데요, 이번 컨설팅을 통해 실험 문화를 체계적으로 개선하고 실험 결과를 제품 개선에 활용할 수 있는 방안을 구체화했습니다.

이번 컨설팅은 두 차례에 걸쳐 진행되었으며, 첫 번째 세션에서는 실험 플랫폼의 핵심 요소와 통계적 검정 이론을 다루었고, 두 번째 세션에서는 메트릭 설정과 실험 기간의 통계적 계획, 그리고 실험 결과를 어떻게 해석할 것인지에 대한 구체적인 논의가 이루어졌습니다.

1차 세션: 실험 플랫폼의 핵심 요소와 온라인 실험 기초

첫 번째 세션에서는 실험 플랫폼의 필수 구성 요소와 온라인 실험을 어떻게 설계할지에 대한 논의가 이루어졌습니다. 이민용 대표는 실험에서 중요한 요소인 온라인 실험의 통계적 검정 방법과 분기 처리 및 트리거링 분석을 설명하며, 실험 결과의 신뢰도를 높이는 구체적인 방법을 제시했습니다.

오늘의집의 실험 플랫폼이 실시간 데이터를 바탕으로 더욱 정확한 결과를 도출할 수 있도록 유의미한 메트릭 설계와 실험 설계 방법론을 논의했으며, 이를 통해 오늘의집 팀은 실험 결과를 기반으로 한 의사결정을 더욱 체계적으로 운영할 수 있게 되었습니다.

2차 세션: 메트릭 설정과 실험 결과의 통계적 해석

두 번째 세션에서는 메트릭 설정과 실험 기간 계획에 대한 구체적인 자문이 진행되었습니다. 이민용 대표는 Delta Method와 비율 지표 계산법 등 고급 통계 개념을 소개하며, 오늘의집 팀이 실험을 더욱 정교하게 관리할 수 있도록 메트릭 설정에 대한 피드백을 제공했습니다.

또한, 실험 결과를 제품 의사결정과 어떻게 연결할지에 대해 깊이 있는 논의가 이어졌습니다. 이 대표는 "실험 설계는 자유도 높게, 분석은 보수적으로"라는 원칙을 강조하며, 실험 결과를 통해 명확한 결정을 내리기 위한 방법론을 설명했습니다. 이를 통해 오늘의집 팀은 실험 결과를 기반으로 한 비즈니스 의사결정의 정확성을 높일 수 있게 되었습니다.

오늘의집 팀의 긍정적 피드백: 실험 플랫폼의 고도화 방향 정립

오늘의집 팀은 이번 컨설팅을 통해 실험 플랫폼 시스템 고도화 계획을 체계적으로 정립할 수 있었다고 밝혔습니다. 데이터 플랫폼 팀의 한민규 데이터 엔지니어는 "이번 컨설팅을 통해 구성원들의 온라인 실험의 방법론에 대한 이해도를 높이고, 구체적으로 실험 플랫폼 시스템을 고도화하는데 필요한 통계적인 기반을 마련할 수 있었습니다. 이를 바탕으로 오늘의집에서 향후 실험 플랫폼 시스템을 고도화하고, 더욱 과학적인 실험 프로덕트 조직으로 거듭나는데 있어서 더욱 체계적으로 접근할 수 있을 것입니다."이라고 말했습니다.

이승하 데이터 분석가는 "실험 플랫폼과 사후 분석에 대해 이해도를 높일 수 있었으며, 실험 플랫폼을 통한 실험 문화를 어떻게 가져가면 좋을지도 정리할 수 있었습니다. 또한 실험 분석을 하면서 마주했던 문제들에 대해 통계적으로 접근하여 답변해주심에 따라 그동안 궁금했던 점들을 해소할 수 있었습니다. 컨설팅 덕분에 향후 실험 분석 진행시 유관부서들과 보다 명확하게 커뮤니케이션할 수 있을 것 같습니다." 며 긍정적인 후기를 남겼습니다.

오늘의집은 이번 컨설팅을 통해 실험 문화와 데이터 기반 의사결정 시스템을 더 강화할 수 있었고, 앞으로도 이를 바탕으로 고객 경험을 지속적으로 개선해 나갈 계획입니다.

이민용 대표의 실리콘밸리 경험: A/B 테스트의 전문성

이민용 대표는 실리콘밸리에서 에어비앤비 실험 플랫폼 팀에서 데이터 사이언티스트로 일하며 수많은 실험을 설계하고 분석한 경험을 가지고 있습니다. 이 대표는 에어비앤비에서 Selection Bias in Online Experimentation등의 프로젝트를 이끌며, 대규모 실험 플랫폼의 도전 과제와 그 해결 방안을 연구했습니다. 

이번 오늘의집 컨설팅에서 이 대표는 에어비엔비에서의 경험을 기반으로, 실험 결과를 효과적으로 분석하고 실질적인 비즈니스 결정에 반영하는 방법에 대해 깊이 있는 자문을 제공했습니다. "실험은 제품 개선의 필수적인 도구이며, 고객의 반응을 실시간으로 확인하고 개선할 수 있는 가장 효과적인 방법"이라고 이 대표는 설명했습니다.

노티플라이에서도 A/B 테스트 제공하며 마케팅 성과 극대화

이민용 대표가 운영하는 노티플라이 역시 A/B 테스트를 통한 데이터 기반의 마케팅 성과 극대화를 목표로 하고 있습니다. 노티플라이는 기업들이 A/B 테스트 기능을 활용하여 마케팅 캠페인의 성과를 실시간으로 분석할 수 있도록 돕고 있습니다. 두잇, 모드하우스, 마미톡, 핀트와 같은 고객사들이 노티플라이의 A/B 테스트 기능을 통해 더욱 효과적인 마케팅 메시지를 실행하고, 이를 통해 마케팅 성과를 향상시키고 있습니다.

이민용 대표의 실험과 데이터 분석에 대한 깊은 이해는 노티플라이의 철학과 깊이 맞닿아 있습니다. 데이터 기반 실험은 기업이 고객과의 소통을 최적화하고, 더 나은 결과를 만들어내는 데 핵심적인 역할을 하고 있습니다.

미래를 향한 오늘의집과 노티플라이의 도전

이번 컨설팅을 통해 오늘의집은 자체 실험 플랫폼을 고도화할 수 있는 기반을 마련했으며, 앞으로도 실험을 중심으로 한 의사결정 시스템을 강화할 계획입니다. 노티플라이 역시 CRM 마케팅 자동화 솔루션을 통해 더 많은 기업과 협력하며, 데이터 기반 마케팅을 지원하고 있습니다.

이민용 대표는 "데이터에 기반한 실험은 기업의 성장을 돕는 중요한 도구"라며, 앞으로도 노티플라이가 더 많은 기업들의 성장을 지원할 수 있기를 기대한다고 전했습니다.

노티플라이는 데이터를 통해 CRM 마케팅 성과를 극대화하는 솔루션입니다. 현재 30일 무료 체험도 가능하니 많은 관심 부탁드립니다! 😊

함께 읽어보면 좋은 글

• AB테스트 완벽 가이드: CRM마케터를 위한 핵심 전략
• 재피어로 알림톡 자동화 구현, 노티플라이 Zapier 연동 활용하기
• 마케팅 자동화, 브레이즈가 답일까? 솔루션 비용 및 성능 비교 - 브레이즈, 채널톡, 그루비, 노티플라이