Nhà sáng lập
Buổi tối, phòng họp. AI đã viết báo cáo tháng này cho nhà sáng lập của GreenLeaf, và nó rất tự tin. Bạn biết những điều mà dữ liệu không biết.
Quyết định điều gì mở đầu ghi chú của bạn, bạn bổ sung gì trước khi duyệt, và ghi chú được gửi đi tối nay hay chờ bạn kiểm tra xong.
- Báo cáo của AI mở đầu bằng mức cải thiện 15% tỷ lệ nhấp như một câu chuyện thành công. Ở phía dưới: tỷ lệ hoàn thành quiz trên di động giảm từ 45% xuống 28%.
- Trên tập giấy ghi chú của bạn, một mức trần (suy ra): nếu mọi lượt bắt đầu quiz đều từ di động và mọi người đăng ký mới đều đi qua quiz, sự sụt giảm làm mất khoảng 630 lượt hoàn thành quiz và khoảng 42 lượt mua đầu tiên mỗi tháng, tương đương tối đa khoảng $8.900 doanh thu đăng ký mỗi tháng vào cuối quý.
- Điều bạn biết mà dữ liệu không biết: trang quiz đã thay đổi vào thứ Ba; thử nghiệm LinkedIn cần thêm hai tuần nữa; nhà sáng lập quan tâm đến việc giữ chân người đăng ký.
- Bản tóm tắt báo cáo: sự nhạy cảm của nhà sáng lập với LinkedIn, đợt sụt giảm quiz hằng tháng, những sai lầm của agency trước.
- Lauren: Tỷ lệ nhấp là tín hiệu tối ưu hóa, không phải kết quả kinh doanh. AI sẽ tô vẽ nó thành kết quả nếu chúng ta để mặc.
- Emily: Trang quiz đã thay đổi vào thứ Ba. Không điều gì trong dữ liệu biết chuyện đó.
- Megan: Tối nay nhà sáng lập không cần biết tỷ lệ thoát. Họ cần biết điều này có thay đổi cả năm không, và chúng ta có biết nguyên nhân không.
Điều gì mở đầu ghi chú gửi nhà sáng lập?
- Mức cải thiện 15% tỷ lệ nhấp: Nó có thật, đã được đo, và đưa tin tốt lên trước giúp giữ niềm tin của nhà sáng lập trong lúc bạn sửa phần còn lại.
- Sự sụt giảm của quiz trên di động: chuyện gì đã xảy ra, vì sao quan trọng, bước tiếp theo: Sự sụt giảm mới là điều đe dọa số người đăng ký; hãy nói rõ chuyện gì đã xảy ra, vì sao quan trọng và bạn sẽ làm gì tiếp theo.
- Thử nghiệm LinkedIn, điều nhà sáng lập theo dõi sát: Bản tóm tắt báo cáo ghi nhận sự nhạy cảm của nhà sáng lập với LinkedIn; trả lời điều họ quan tâm trước sẽ giành được sự chú ý cho phần còn lại.
Trước khi duyệt, bạn bổ sung điều gì?
- Không gì cả: duyệt nguyên bản AI đã viết: Dữ liệu là dữ liệu; thêm câu chuyện của riêng bạn vào có nguy cơ thành tô vẽ.
- Quy cho đợt sụt giảm quiz hằng tháng quen thuộc: Bản tóm tắt báo cáo có ghi nhận một đợt sụt giảm quiz hằng tháng; có thể đây chỉ là nó lặp lại.
- Thêm rằng trang quiz đã thay đổi vào thứ Ba, và kiểm tra điều đó trước khi gọi đợt sụt giảm là mang tính cấu trúc: Bạn biết trang quiz đã thay đổi vào thứ Ba; nói ra và kiểm tra điều đó là bối cảnh mà không mô hình nào trong báo cáo có.
Đã tối. Ghi chú có gửi đi tối nay không?
- Gửi tối nay, nêu rõ thay đổi quiz là điều bạn đang kiểm tra: Nhà sáng lập nghe chuyện này từ bạn trước, cùng với những gì bạn biết và chưa biết.
- Giữ lại cho đến khi có kết quả kiểm tra trang quiz: Vì sao làm nhà sáng lập lo lắng vì chuyện có thể chỉ là một lỗi trang mà bạn sửa được vào ngày mai? Hãy gửi khi bạn đã biết.
Thành tích về tỷ lệ nhấp là tín hiệu tối ưu hóa; mở đầu bằng nó là chôn vùi sự sụt giảm. Nhà sáng lập đọc một câu chuyện thành công về lượt nhấp. Sự sụt giảm của quiz, điều đe dọa số người đăng ký, nằm ở phía dưới; khi họ thấy nó, họ hỏi vì sao nó không được nói đến trước.
Báo tin xấu trước nghĩa là nhận trách nhiệm trước khi bạn biết nguyên nhân. Ghi chú mở đầu bằng chuyện gì đã xảy ra với tỷ lệ hoàn thành quiz trên di động, vì sao nó quan trọng và bạn sẽ làm gì tiếp theo.
Thiếu bối cảnh của bạn, nhà sáng lập hiểu sự sụt giảm là mang tính cấu trúc. Báo cáo được gửi đi mà không có thay đổi quiz hôm thứ Ba. Nhà sáng lập hiểu sự sụt giảm là mang tính cấu trúc và hỏi có nên điều chỉnh dự báo không.
Gọi tên nguyên nhân trước khi kiểm tra có thể làm chậm cách sửa thật sự. Bạn gọi đó là đợt sụt giảm hằng tháng mà không kiểm tra. Nếu thay đổi quiz hôm thứ Ba là nguyên nhân, cách sửa thật sự bị trì hoãn trong khi mọi người chờ đợt sụt giảm tự qua.
Bối cảnh của bạn cũng chỉ là một nhận định; bạn phải kiểm tra nó. Ghi chú nói rằng trang quiz đã thay đổi vào thứ Ba và bạn đang kiểm tra điều đó trước khi gọi sự sụt giảm là mang tính cấu trúc.
Các nhận định về tỷ lệ hoàn thành quiz đã đến tay khách hàng mà không qua kiểm duyệt (guardrail của bạn). Các guardrail của bạn để các nhận định của AI về tỷ lệ hoàn thành quiz đến tay khách hàng mà không qua kiểm duyệt, nên nhà sáng lập có thể đã đọc về sự sụt giảm này bằng lời của AI.
Phần đo lường của bạn không cho biết khoản chi có mang lại hiệu quả tăng thêm hay không. Khi nhà sáng lập hỏi liệu khoản chi ở Anh có hiệu quả hay không, phần đo lường của bạn không trả lời được.
Đánh giá thử nghiệm LinkedIn lúc này là sớm hai tuần, và nó đẩy sự sụt giảm xuống dưới. Ghi chú mở đầu bằng một thử nghiệm LinkedIn còn cần thêm hai tuần nữa mới có thể đánh giá, và sự sụt giảm của quiz nằm phía dưới.
Gửi trước khi kiểm tra xong nghĩa là ngày mai bạn có thể phải tự đính chính. Nhà sáng lập nghe chuyện này tối nay từ bạn, cùng với những gì bạn biết và những gì bạn còn đang kiểm tra.
Giữ ghi chú lại có nguy cơ nhà sáng lập biết về sự sụt giảm bằng một đường khác. Ghi chú chờ kết quả kiểm tra. Nếu nhà sáng lập thấy sự sụt giảm ở nơi khác trước, điều họ nhớ sẽ là sự im lặng.
Kế hoạch đã khởi chạy trước khi quiz được sửa (quyết định của bạn ở câu hỏi của CFO). Đợt khởi chạy giai đoạn cân nhắc của bạn đã đưa người dùng đến một quiz có trải nghiệm vẫn cần chỉnh; đó có thể là một phần nguyên nhân của sự sụt giảm này, và nhà sáng lập có thể hỏi đến.
Thử nghiệm tám tuần được đề xuất vẫn cần thiết kế và phương pháp phân tích đã được thẩm định. Lựa chọn trước đó của bạn đề xuất cách kiểm tra chi tiêu tại Anh. Thử nghiệm vẫn cần thẩm định; chưa chứng minh được mức tăng người đăng ký do quảng cáo.
Quan điểm của khóa học
- Điều gì mở đầu ghi chú gửi nhà sáng lập?: Sự sụt giảm của quiz trên di động: chuyện gì đã xảy ra, vì sao quan trọng, bước tiếp theo. Khóa học: mọi nhận định đều trả lời chuyện gì đã xảy ra, vì sao quan trọng và bước tiếp theo; tỷ lệ nhấp là tín hiệu tối ưu hóa, và thử nghiệm LinkedIn cần thêm hai tuần nữa trước khi bạn đánh giá.
- Trước khi duyệt, bạn bổ sung điều gì?: Thêm rằng trang quiz đã thay đổi vào thứ Ba, và kiểm tra điều đó trước khi gọi đợt sụt giảm là mang tính cấu trúc. Khóa học: trang quiz đã thay đổi vào thứ Ba, và không mô hình nào suy ra được điều đó. Bối cảnh của con người là thứ làm báo cáo trở nên hữu ích.
- Đã tối. Ghi chú có gửi đi tối nay không?: Gửi tối nay, nêu rõ thay đổi quiz là điều bạn đang kiểm tra. Khóa học thêm bối cảnh của con người trước khi duyệt một báo cáo; khóa học không đòi bạn chờ đến khi chắc chắn, vì nhà sáng lập cần biết xu hướng và rủi ro.
Bạn đã quyết định nhà sáng lập nghe điều gì, và khi nào. Khóa học cho rằng mọi nhận định đều phải trả lời chuyện gì đã xảy ra, vì sao nó quan trọng và bước tiếp theo; rằng con người bổ sung bối cảnh mà không mô hình nào suy ra được; và rằng nhà sáng lập cần biết xu hướng và rủi ro. Lập luận ngược lại là báo tin xấu trước, cùng với bối cảnh mà dữ liệu không cho thấy, đều đòi nhà sáng lập tin vào phán đoán của bạn.