A/B/n স্প্লিট
আপনার কনভার্সন গোল-এর জন্য কোন মেসেজ সিকোয়েন্স সবচেয়ে ভালো কাজ করে তা পরীক্ষা করতে A/B/n স্প্লিট এলিমেন্ট ব্যবহার করুন। আপনার দর্শকদের জন্য সবচেয়ে কার্যকর পদ্ধতি খুঁজে যোগাযোগের উন্নতি করুন।
A/B/n স্প্লিট সেটিংস কনফিগার করুন
Anchor link toক্যানভাসে A/B/n স্প্লিট এলিমেন্ট রাখার পর, পরীক্ষার সেটিংস কনফিগার করতে এটিতে ডাবল-ক্লিক করুন।
শাখার সংখ্যা সেট করুন
Anchor link toআপনি কতগুলি সংস্করণ পরীক্ষা করতে চান তা বেছে নিতে Branches ড্রপডাউন ব্যবহার করুন (সর্বোচ্চ ৪টি)। ডিফল্টরূপে, শাখা A হল কন্ট্রোল গ্রুপ।
শাখা জুড়ে ব্যবহারকারী বিতরণ নির্ধারণ করুন
Anchor link toপ্রতিটি শাখায় পাঠানো ব্যবহারকারীদের শতাংশ সেট করুন, নিশ্চিত করুন যে মোট যোগফল ১০০% হয়। শাখাগুলির মধ্যে ব্যবহারকারীদের সমানভাবে ভাগ করতে, Reset Distribution-এ ক্লিক করুন।
বিজয়ী কীভাবে নির্বাচিত হবে তা বেছে নিন
Anchor link toআপনার কাছে দুটি বিকল্প আছে:
আপনি ম্যানুয়ালি বিজয়ী নির্বাচন করুন
Anchor link toআপনি ফলাফল পর্যালোচনা করবেন এবং পরে ম্যানুয়ালি বিজয়ী শাখা বেছে নেবেন। এর জন্য চলমান পর্যবেক্ষণ এবং ম্যানুয়াল নিষ্ক্রিয়করণের প্রয়োজন। আরও জানুন
বিজয়ী স্বয়ংক্রিয়ভাবে গোল দ্বারা নির্বাচিত হয়
Anchor link toসিস্টেম ক্যাম্পেইনের গোল পর্যবেক্ষণ করে এবং পরিসংখ্যানগত তাৎপর্য অর্জিত হলে দুর্বল শাখাগুলিকে নিষ্ক্রিয় করে দেয়। নতুন ব্যবহারকারীদের তখন বিজয়ী শাখায় পাঠানো হয়।
যখন স্বয়ংক্রিয় বিজয়ী নির্বাচন সক্রিয় করা হয়, তখন সিস্টেম কীভাবে বিজয়ীকে মূল্যায়ন করবে তা বেছে নিন:
-
তাৎপর্য অর্জনের জন্য প্রথম গোল। সিস্টেম সমস্ত নির্ধারিত গোল পর্যবেক্ষণ করে এবং পরিসংখ্যানগত তাৎপর্য অর্জনের জন্য প্রথমটি নির্বাচন করে।
-
একটি নির্দিষ্ট গোল নির্বাচন করুন (উদাহরণস্বরূপ,
CheckoutSuccess)। কোন শাখা সবচেয়ে ভালো কাজ করে তা মূল্যায়ন করতে এই গোলটি ব্যবহার করা হবে।
কনফিগার করা হয়ে গেলে, আপনার পরীক্ষার সেটিংস প্রয়োগ করতে Save-এ ক্লিক করুন।
কীভাবে A/B/n পরীক্ষা সেট আপ এবং চালাতে হয়
Anchor link toএকটি পরীক্ষা সেট আপ করুন
Anchor link toজার্নিটি পজ করুন
Anchor link toআপনি যদি একটি সক্রিয় জার্নিতে A/B/n পরীক্ষা সেট আপ করতে চান, তবে প্রথমে এটি পজ করুন। একটি সক্রিয় জার্নি সম্পাদনা সম্পর্কে আরও জানতে, এই নিবন্ধটি পড়ুন।
অন্তত একটি কনভার্সন গোল নির্ধারণ করুন
Anchor link toঅন্তত একটি কনভার্সন গোল সেট করুন যা পরীক্ষার ফলাফল গণনার জন্য ব্যবহৃত হবে। উদাহরণস্বরূপ, আপনি যদি দুটি পুশ নোটিফিকেশনের মধ্যে কোনটি সবচেয়ে কার্যকর তা পরীক্ষা করতে চান, তবে আপনি PW_InAppPurchase ইভেন্টটিকে কনভার্সন গোল হিসাবে সেট করতে পারেন।
আপনি যদি একাধিক কনভার্সন গোল নির্দিষ্ট করেন, তবে প্রতিটি গোলের জন্য ফলাফল আলাদাভাবে গণনা করা হয়।
A/B/n স্প্লিট এলিমেন্ট যোগ করুন
Anchor link toঅন্য যেকোনো এলিমেন্টের পরে ক্যানভাসে A/B/n স্প্লিট এলিমেন্টটি রাখুন এবং পরীক্ষাটি কনফিগার করতে এটিতে ডাবল-ক্লিক করুন।
শাখা এবং ব্যবহারকারী বিতরণ সেট করুন
Anchor link toশাখার সংখ্যা নির্বাচন করুন। আপনি আপনার পরীক্ষায় চারটি পর্যন্ত শাখা যোগ করতে পারেন। প্রথম শাখাটিকে সর্বদা একটি কন্ট্রোল গ্রুপ হিসাবে বিবেচনা করা হয় যার বিপরীতে অন্যান্য শাখার ফলাফল তুলনা করা হয়। আপনার প্রয়োজন অনুযায়ী এই শাখাটি কীভাবে সেট আপ করবেন তা জানতে এই নির্দেশিকা অনুসরণ করতে থাকুন।
এরপরে, প্রতিটি শাখায় যাওয়া ব্যবহারকারীদের শতাংশ সেট করুন। সমস্ত শাখার মোট যোগফল ১০০% হওয়া উচিত। আপনার সেট করা শতাংশ অনুযায়ী, জার্নিতে যে ব্যবহারকারীরা এই ধাপে পৌঁছাবেন তাদের এলোমেলোভাবে নির্দিষ্ট সংখ্যক শাখায় ভাগ করা হবে।
দয়া করে মনে রাখবেন যে শাখা A-তে নির্ধারিত ব্যবহারকারীদের একটি কন্ট্রোল গ্রুপ হিসাবে বিবেচনা করা হবে যার বিপরীতে অন্যান্য শাখার ফলাফল তুলনা করা হবে। পরবর্তী ধাপে বিভিন্ন ক্ষেত্রের জন্য শাখা A কীভাবে সেট আপ করতে হয় তা বর্ণনা করা হয়েছে।
বিজয়ী মূল্যায়ন মোড নির্বাচন করুন
Anchor link toবিজয়ী কীভাবে নির্ধারিত হয় তা বেছে নিন:
- গোল দ্বারা স্বয়ংক্রিয় নির্বাচন। সিস্টেম একটি নির্ধারিত গোল ট্র্যাক করে, পরিসংখ্যানগত তাৎপর্য ব্যবহার করে সেরা পারফর্মিং শাখা সনাক্ত করে, এবং নতুন ব্যবহারকারীদের স্বয়ংক্রিয়ভাবে বিজয়ীর কাছে পাঠায়।
- ম্যানুয়াল নির্বাচন। আপনি পরীক্ষার ফলাফল পর্যালোচনা করবেন এবং ম্যানুয়ালি সিদ্ধান্ত নেবেন কোন শাখাটি সেরা পারফর্ম করছে। এই বিকল্পটির জন্য আপনাকে পরীক্ষা পর্যবেক্ষণ করতে হবে এবং কম পারফর্ম করা শাখাগুলিকে ম্যানুয়ালি নিষ্ক্রিয় করতে হবে। আরও জানুন
প্রতিটি শাখার জন্য কনটেন্ট কনফিগার করুন
Anchor link toএখন আপনি প্রতিটি শাখার জন্য যোগাযোগ প্রবাহ সেট আপ করতে পারেন। যেহেতু শাখা A একটি কন্ট্রোল গ্রুপ, তাই আপনার কেসের উপর নির্ভর করে আপনাকে এটি একটি নির্দিষ্ট উপায়ে কনফিগার করতে হবে:
- নতুন সংস্করণের বিপরীতে বিদ্যমান যোগাযোগ প্রবাহ পরীক্ষা করুন। এক্ষেত্রে, বিদ্যমান সংস্করণটি শাখা A-তে থাকা উচিত। এছাড়াও, নিশ্চিত করুন যে কনভার্সন গোলটি শাখা A সহ যেকোনো শাখায় সম্পন্ন করা যেতে পারে।
- শুধুমাত্র নতুন সংস্করণগুলি একে অপরের বিরুদ্ধে পরীক্ষা করুন। যেহেতু কোনো পুরানো যোগাযোগ প্রবাহ নেই, তাই নতুন সংস্করণগুলির মধ্যে একটিকে কন্ট্রোল গ্রুপ হিসাবে চিহ্নিত করা হবে (যা শাখা A-তে উপস্থাপিত)। নিশ্চিত করুন যে কনভার্সন গোলটি সমস্ত শাখায় সম্পন্ন করা যেতে পারে।
- নতুন যোগাযোগ প্রবাহের বিপরীতে কোনো যোগাযোগ ছাড়াই একটি বিদ্যমান সংস্করণ পরীক্ষা করুন। উদাহরণস্বরূপ, আপনি একটি জার্নির শেষে আরও একটি পুশ যোগ করতে চান দেখতে যে এই পুশ ছাড়া মূল সংস্করণের তুলনায় ক্যাম্পেইনের পারফরম্যান্স বাড়ে কিনা। এক্ষেত্রে, ‘খালি’ সংস্করণটি শাখা A-তে উপস্থাপিত হওয়া উচিত। নির্ভরযোগ্য ফলাফল পেতে, প্রতিটি শাখায় একটি সমান টাইম ডিলে যোগ করুন:
জার্নি চালু করুন
Anchor link toযদি সবকিছু প্রস্তুত থাকে, তবে জার্নি চালু করুন।
ফলাফল বিশ্লেষণ করুন
Anchor link toপরীক্ষা চালু হওয়ার সাথে সাথেই আপনি এর রিয়েল-টাইম পরিসংখ্যান দেখতে পারবেন।
জার্নি ক্যানভাসে, প্রতিটি শাখার মধ্য দিয়ে যাওয়া ব্যবহারকারীর সংখ্যা দেখুন:
পরীক্ষার ফলাফল দেখতে, A/B/n স্প্লিট এলিমেন্টে ডাবল-ক্লিক করুন। আপনি প্রতিটি শাখার জন্য পরিসংখ্যান দেখতে পাবেন, যার মধ্যে নির্বাচিত গোলের কনভার্সন এবং পরিসংখ্যানগত তাৎপর্য গণনা করতে ব্যবহৃত মেট্রিকস অন্তর্ভুক্ত রয়েছে।
আপনি যদি একাধিক কনভার্সন গোল সেট করে থাকেন, তবে তালিকা থেকে প্রয়োজনীয় গোল নির্বাচন করে আপনি প্রতিটির জন্য ফলাফল দেখতে পারেন:
যদি আপনার পরীক্ষায় পরিসংখ্যানগতভাবে তাৎপর্যপূর্ণ বিজয়ী থাকে এবং আপনি ম্যানুয়াল বিজয়ী নির্বাচন ব্যবহার করেন, তবে আপনি Keep only winner-এ ক্লিক করে কম পারফর্ম করা শাখাগুলিকে অবিলম্বে বন্ধ করতে পারেন। জার্নিতে নতুন ব্যবহারকারীদের বিজয়ী শাখায় পাঠানো হবে। যে ব্যবহারকারীরা ইতিমধ্যে নিষ্ক্রিয় শাখায় চলে গেছেন তারা জার্নি শেষ না করা পর্যন্ত সেগুলির মধ্য দিয়ে যেতে থাকবে।
আপনি একটি নির্দিষ্ট সময়ের জন্য পরীক্ষার ফলাফল দেখতে পারেন। এটি করতে, বাম প্যানেলে পছন্দসই সময়কাল নির্বাচন করুন এবং A/B/n স্প্লিট এলিমেন্টে ডাবল-ক্লিক করুন। আপনি নির্দিষ্ট সময়ের জন্য পরিসংখ্যান দেখতে পাবেন।
পরীক্ষার ফলাফল নিম্নরূপ গণনা করা হয়:
- কনভার্সন শাখার ব্যবহারকারীর সংখ্যা এবং সম্পন্ন হওয়া কনভার্সন গোলের উপর ভিত্তি করে গণনা করা হয়। শাখা A বেসলাইন হিসাবে চিহ্নিত হবে, কারণ এটি কন্ট্রোল গ্রুপের প্রতিনিধিত্ব করে।
- পরিসংখ্যানগত তাৎপর্য গণনা করার সময়, Z-Score এবং P-Value বিবেচনা করা হয়। যদি ফলাফলটি বৈধ হয়, তবে এটি তাৎপর্যপূর্ণ হিসাবে চিহ্নিত হবে।
- একটি শাখাকে বিজয়ী হিসাবে বিবেচনা করা হয় যদি এটির সর্বোচ্চ কনভার্সন থাকে, এবং এই ফলাফলটি তাৎপর্যপূর্ণ হিসাবে চিহ্নিত হয়।
শাখা নিষ্ক্রিয় করুন
Anchor link toযদি Pushwoosh একটি পরিসংখ্যানগতভাবে তাৎপর্যপূর্ণ বিজয়ী চিহ্নিত করে, তবে আপনি পরীক্ষার পরিসংখ্যান উইন্ডোতে Keep only winner-এ ক্লিক করে কম পারফর্ম করা শাখাগুলিকে অবিলম্বে বন্ধ করতে পারেন। এক্ষেত্রে, আপনাকে জার্নি পজ করতে হবে না। যদি কোনো শাখা খারাপ পারফর্ম করে, তবে আপনি এটি নিষ্ক্রিয় করতে পারেন। নতুন ব্যবহারকারীরা আর নিষ্ক্রিয় শাখায় প্রবেশ করবে না।
একটি শাখা নিষ্ক্রিয় করতে, প্রথমে জার্নিটি পজ করুন:
এর পরে, A/B/n স্প্লিট এলিমেন্টে ডাবল-ক্লিক করুন। এই শাখার জন্য ০% সেট করুন এবং বাকি শাখাগুলিতে যাওয়া ব্যবহারকারীদের শতাংশ পুনরায় বিতরণ করুন:
