분석 그래프가 오르거나 내렸을 때 당시 사이트와 캠페인에서 무엇이 바뀌었는지 기록이 없으면 원인을 추측하게 됩니다. ‘페이지 수정’ 같은 짧은 메모만으로도 어떤 가설과 지표에 영향을 줄 수 있는지 알기 어렵습니다. 주석은 날짜표시가 아니라 변경 사건의 범위를 재현하는 기록이어야 합니다.
주석 대상은 콘텐츠, 디자인, 기능, 분석 설정, 광고 시작·종료, 운영시간 변경으로 나눕니다. 모든 작은 편집을 넣기보다 사용자 행동이나 측정 정의에 영향을 줄 수 있는 사건을 기준으로 합니다.
각 주석에는 변경 전 문제, 바꾼 항목, 대상 URL이나 채널, 적용 시각, 담당자, 예상 영향 지표를 적습니다. 예상은 가설로 표시하고 실제 결과처럼 쓰지 않습니다. 관련 배포나 작업표 링크를 연결합니다.
분석 설정 변경은 별도 표지를 둡니다. 이벤트 이름, 필터, 동의 설정이 바뀌면 수치 단절이 생길 수 있으므로 사업 변화와 구분합니다. 과거 데이터가 재처리됐는지도 기록합니다.
여러 변경이 같은 날 이뤄졌다면 한 주석에 뭉치지 않고 영향 범위를 나눕니다. 원인 분석이 필요하다면 통제하지 못한 시즌이나 외부 사건도 관찰 항목으로 남깁니다.
검토 시 주석 전후 수치를 보되 인과를 확정하지 않습니다. 가설과 맞지 않는 결과도 삭제하지 않고 다음 점검을 기록합니다. 담당자가 바뀌어도 같은 사건을 찾을 수 있게 공통 형식을 사용합니다.
최종 산출물은 변경 사건, 가설, 범위, 측정 영향, 근거 링크, 검토 결과가 담긴 분석 변경 연표입니다. 연표를 그래프와 함께 보면 수치 변화가 콘텐츠 반응인지 측정 조건 변경인지 구분할 단서를 얻을 수 있습니다.
변경 연표는 긴 설명만 쌓이지 않도록 사건 유형과 영향 범위를 필터할 수 있게 합니다. 주석이 없는 큰 수치 변화도 별도 조사 항목으로 남기되 원인을 억지로 만들어 채우지 않습니다. 회의에서 내린 해석과 실제 검증 결과를 구분해 다음 담당자가 당시 추측을 사실로 받아들이지 않게 합니다.
연표의 시간대와 배포 완료 시각을 통일해 날짜 경계에서 변경 전후 기간이 뒤섞이지 않게 합니다.