เรียน แฟนชาว Forge,
เมื่อไม่นานมานี้, เราได้รับคำแนะนำเกี่ยวกับการทดสอบ A/B และวิธีการจัดการของเรา โดยเฉพาะอย่างยิ่ง, คำแนะนำเรื่องการทดสอบ A/B ของ Forge Plus และ การอัปเดทการท้าทายประจำวัน ด้วยเหตุนี้, เราคิดว่าควรให้ข้อมูลเพิ่มเติมกับคุณเกี่ยวกับแนวทางการทดสอบ A/B ของเรา และทำไมสิ่งเหล่านี้ถึงมีความสำคัญกับการพัฒนาของ Forge of Empires
มาเริ่มกันที่ความหมายของการทดสอบ A/B โดยการทดสอบ A/B นั้นเป็นการทดสอบมาตรฐานอุตสาหกรรมที่นิยมใช้กันในหมู่ผู้พัฒนาเพื่อตรวจสอบการตอบสนองของผู้เล่นที่มีต่อระบบ โดยการทดสอบนี้จะสุ่มเลือก 2 กลุ่ม หรือมากกว่า โดยประกอบด้วย กลุ่มทดสอบ (กลุ่ม 'A'), ซึ่งจะได้รับอนุญาตให้ใช้งานคุณสมบัติได้ และกลุ่มควบคุม (กลุ่ม 'B'), ซึ่งจะไม่เห็นคุณสมบัติ ด้วยการเปรียบเทียบนี้, ผู้พัฒนาสามารถตรวจสอบการเปลี่ยนแปลงพฤติกรรมของผู้เล่นได้โดยตรง และประเมินผลกระทบของคุณสมบัติที่ถูกทดสอบ เราทำสิ่งนี้ผ่านความคิดเห็นทั้งในเชิงปริมาณ และเชิงคุณภาพ และเราต้องพิจารณาทั้งสองอย่าง, แต่โปรดจำไว้ว่าความคิดเห็นในฟอรัมคือส่วนหนึ่งจากหลายๆ ที่ในการรับความคิดเห็นของเรา
ไปดูตัวอย่างเรื่องการอัปเดทการท้าทายประจำวันที่เกิดขึ้นเมื่อไม่นานมานี้ โดยคำนึงถึงทั้งสองกลุ่ม, เราสามารถเปรียบเทียบแง่มุมต่างๆ (ได้แก่ การมีส่วนร่วมในแต่ละวัน, การรักษาผู้เล่นด้วยคุณสมบัติ, อายุของผู้เล่นเข้าร่วม และอื่นๆ) ซึ่งช่วยให้เราตรวจสอบได้ว่าการเปลี่ยนแปลงนี้เป็นประโยชน์ และน่าสนใจสำหรับผู้เล่นของเราเป็นข้อเสนอใหม่หรือไม่ หากผลลัพธ์ไม่ได้แสดงแนวโน้มเชิงบวก เราสามารถเจาะลึก และตรวจสอบได้ว่ามันมีปัญหาหรือไม่ ในท้ายที่สุด, เราสามารถแทรกแซง หรือปรับแต่งคุณสมบัติ หรือลบมันทั้งหมดออก
นั่นคือสาเหตุว่าทำไมการทดสอบ A/B นั้นจึงมีความสำคัญกับเรา เพราะการทดสอบช่วยให้เราเข้าถึงข้อมูลที่สำคัญได้มากขึ้นตามสภาพแวดล้อมการทดสอบแบบเรียลไทม์ ด้วยข้อมูลนี้, เราสามารถทำให้คุณสมบัติของเราดีขึ้นได้ และรู้ถึงปัญหาที่อาจจะเกิดขึ้น
นอกจากนี้, การเปิดตัวคุณสมบัติใหม่ให้แก่กลุ่มผู้ใช้งานกลุ่มเล็กๆ นั้นช่วยให้เราสามารถตรวจสอบข้อเสนอแนะได้อย่างมีประสิทธิภาพยิ่งขึ้น และป้องกันความสับสนที่อาจเกิดขึ้น หากเราเปิดตัวคุณสมบัติให้แก่ผู้เล่นทุกคนในเกมในทันที
Forge of Empires เป็นเกมใหญ่ ที่ได้รับการสนับสนุนจากผู้เล่นหลายแสนคนทั่วโลก แต่นั่นก็หมายความว่ามีหลายอย่างที่อาจจะผิดพลาด การทดสอบ A/B จึงเป็นสิ่งที่จำเป็นอย่างยิ่ง หากคุณต้องการลดความเสี่ยงที่อาจเกิดขึ้นจากการเปิดตัวคุณสมบัติใหม่ให้แก่ผู้เล่นกลุ่มใหญ่ ผลที่ตามมาของการเปิดตัวคุณสมบัติที่ยังไม่ถูกทดสอบนั้นอาจทำให้เกิดการโต้ตอบเชิงลบกับเกม - ทั้งสำหรับเราและคุณ
มันยังเป็นสิ่งสำคัญที่จะต้องเน้นย้ำว่าการทดสอบ A/B นั้นไม่ได้เป็นการคัดเลือก ไม่มีผู้เล่นคนไหนที่จะมีความได้เปรียบในระยะยาว หรือได้รับการคัดเลือกล่วงหน้าเพื่อเป็นกลุ่มทดสอบ คุณจะสังเกตเห็นว่าจะมีบางคุณสมบัติที่เราไม่สามารถใช้การทดสอบ A/B ได้ เนื่องจากข้อได้เปรียบนั้นอาจมีมากเกินไป และเราต้องการที่จะรักษาความยุติธรรมในเกมเอาไว้ การคัดเลือกสำหรับการทดสอบต่างๆ นั้นมาจากการสุ่มล้วนๆ และความยุติธรรมไม่ได้เป็นเพียงเหตุผลเดียวของเรื่องนี้ มันยังเป็นเพราะว่าปัจจัยของการสุ่มเป็นส่วนสำคัญต่อคุณภาพของผลการทดสอบอีกด้วย
เราหวังว่าสิ่งนี้จะช่วยให้คุณเข้าใจมากขึ้นว่าทำไมการทดสอบ A/B จึงมีความสำคัญต่อกลยุทธ์การพัฒนาของเรา และจะถูกใช้งานต่อไปในการอัปเดทต่างๆ ในอนาคต
ขอแสดงความนับถือ,
ทีมงาน Forge of Empires
แก้ไขล่าสุด: