A/B/n স্প্লিট
আপনার কনভার্সন গোল এর জন্য কোন মেসেজ সিকোয়েন্সগুলি সবচেয়ে ভালো পারফর্ম করে তা পরীক্ষা করতে A/B/n স্প্লিট এলিমেন্টটি ব্যবহার করুন। আপনার দর্শকদের জন্য সবচেয়ে কার্যকর পদ্ধতি খুঁজে বের করে যোগাযোগ অপ্টিমাইজ করুন।
A/B/n স্প্লিট সেটিংস কনফিগার করুন
Anchor link toক্যানভাসে A/B/n স্প্লিট এলিমেন্টটি রাখার পর, টেস্ট সেটিংস কনফিগার করতে এটিতে ডাবল-ক্লিক করুন।
ব্রাঞ্চের সংখ্যা সেট করুন
Anchor link toব্রাঞ্চ ড্রপডাউন ব্যবহার করে আপনি কতগুলি ভেরিয়েশন পরীক্ষা করতে চান তা বেছে নিন (সর্বোচ্চ ৪টি)। ডিফল্টরূপে, ব্রাঞ্চ A হল কন্ট্রোল গ্রুপ।
ব্রাঞ্চ জুড়ে ব্যবহারকারী বিতরণ নির্ধারণ করুন
Anchor link toপ্রতিটি ব্রাঞ্চে পাঠানো ব্যবহারকারীদের শতাংশ সেট করুন, নিশ্চিত করুন যে মোট যোগফল ১০০% হয়। ব্রাঞ্চগুলির মধ্যে ব্যবহারকারীদের সমানভাবে ভাগ করতে, রিসেট ডিস্ট্রিবিউশন-এ ক্লিক করুন।
বিজয়ী কীভাবে নির্বাচিত হবে তা বেছে নিন
Anchor link toআপনার কাছে দুটি বিকল্প আছে:
আপনি ম্যানুয়ালি বিজয়ী নির্বাচন করুন
Anchor link toআপনি ফলাফল পর্যালোচনা করবেন এবং পরে ম্যানুয়ালি বিজয়ী ব্রাঞ্চ বেছে নেবেন। এর জন্য ক্রমাগত পর্যবেক্ষণ এবং ম্যানুয়াল ডিঅ্যাক্টিভেশন প্রয়োজন। আরও জানুন
গোলের মাধ্যমে বিজয়ী স্বয়ংক্রিয়ভাবে নির্বাচিত হয়
Anchor link toসিস্টেম ক্যাম্পেইন গোল পর্যবেক্ষণ করে এবং পরিসংখ্যানগত তাৎপর্য অর্জিত হলে দুর্বল ব্রাঞ্চগুলিকে ডিঅ্যাক্টিভেট করে দেয়। নতুন ব্যবহারকারীদের তখন বিজয়ী ব্রাঞ্চে পাঠানো হয়।
যখন স্বয়ংক্রিয় বিজয়ী নির্বাচন সক্রিয় থাকে, তখন সিস্টেম কীভাবে বিজয়ীকে মূল্যায়ন করবে তা বেছে নিন:
-
তাৎপর্য অর্জনের জন্য প্রথম গোল। সিস্টেম সমস্ত নির্ধারিত গোল পর্যবেক্ষণ করে এবং পরিসংখ্যানগত তাৎপর্যে পৌঁছানোর জন্য প্রথমটি নির্বাচন করে।
-
একটি নির্দিষ্ট গোল নির্বাচন করুন (উদাহরণস্বরূপ,
CheckoutSuccess)। কোন ব্রাঞ্চটি সবচেয়ে ভালো পারফর্ম করছে তা মূল্যায়ন করতে এই গোলটি ব্যবহার করা হবে।
কনফিগার করা হয়ে গেলে, আপনার টেস্ট সেটিংস প্রয়োগ করতে সেভ-এ ক্লিক করুন।
কীভাবে A/B/n টেস্ট সেট আপ এবং রান করবেন
Anchor link toএকটি টেস্ট সেট আপ করুন
Anchor link toজার্নিটি পজ করুন
Anchor link toআপনি যদি একটি সক্রিয় জার্নিতে A/B/n টেস্টিং সেট আপ করতে চান, তবে প্রথমে এটি পজ করুন। একটি সক্রিয় জার্নি সম্পাদনা সম্পর্কে আরও জানতে, এই নিবন্ধটি পড়ুন।
অন্তত একটি কনভার্সন গোল নির্ধারণ করুন
Anchor link toঅন্তত একটি কনভার্সন গোল সেট করুন যা পরীক্ষার ফলাফল গণনার জন্য ব্যবহৃত হবে। উদাহরণস্বরূপ, আপনি যদি দুটি পুশ নোটিফিকেশনের মধ্যে কোনটি সবচেয়ে কার্যকর তা পরীক্ষা করতে চান, তবে আপনি PW_InAppPurchase ইভেন্টটিকে কনভার্সন গোল হিসাবে সেট করতে পারেন।
আপনি যদি একাধিক কনভার্সন গোল নির্দিষ্ট করেন, তবে প্রতিটি গোলের জন্য ফলাফল আলাদাভাবে গণনা করা হয়।
A/B/n স্প্লিট এলিমেন্ট যোগ করুন
Anchor link toঅন্য যেকোনো এলিমেন্টের পরে ক্যানভাসে A/B/n স্প্লিট এলিমেন্টটি রাখুন এবং টেস্টটি কনফিগার করতে এটিতে ডাবল-ক্লিক করুন।
ব্রাঞ্চ এবং ব্যবহারকারী বিতরণ সেট করুন
Anchor link toব্রাঞ্চের সংখ্যা নির্বাচন করুন। আপনি আপনার টেস্টে চারটি পর্যন্ত ব্রাঞ্চ যোগ করতে পারেন। প্রথম ব্রাঞ্চটিকে সর্বদা একটি কন্ট্রোল গ্রুপ হিসাবে বিবেচনা করা হয় যার সাপেক্ষে অন্যান্য ব্রাঞ্চের ফলাফল তুলনা করা হয়। আপনার প্রয়োজন অনুযায়ী এই ব্রাঞ্চটি কীভাবে সেট আপ করবেন তা জানতে এই গাইডটি অনুসরণ করতে থাকুন।
এরপরে, প্রতিটি ব্রাঞ্চে যাওয়া ব্যবহারকারীদের শতাংশ সেট করুন। সমস্ত ব্রাঞ্চের মোট যোগফল ১০০% হওয়া উচিত। আপনার সেট করা শতাংশ অনুযায়ী, এই জার্নি ধাপে পৌঁছানো জার্নি ট্র্যাভেলাররা নির্দিষ্ট সংখ্যক ব্রাঞ্চে এলোমেলোভাবে বিভক্ত হয়ে যাবে।
দয়া করে মনে রাখবেন যে ব্রাঞ্চ A-তে নির্ধারিত ব্যবহারকারীদের একটি কন্ট্রোল গ্রুপ হিসাবে বিবেচনা করা হবে যার সাপেক্ষে অন্যান্য ব্রাঞ্চের ফলাফল তুলনা করা হবে। পরবর্তী ধাপে বিভিন্ন ক্ষেত্রের জন্য ব্রাঞ্চ A কীভাবে সেট আপ করতে হয় তা বর্ণনা করা হয়েছে।
বিজয়ী মূল্যায়ন মোড নির্বাচন করুন
Anchor link toবিজয়ী কীভাবে নির্ধারিত হবে তা বেছে নিন:
- গোল অনুযায়ী স্বয়ংক্রিয় নির্বাচন। সিস্টেম একটি নির্ধারিত গোল ট্র্যাক করে, পরিসংখ্যানগত তাৎপর্য ব্যবহার করে সেরা পারফর্মিং ব্রাঞ্চ শনাক্ত করে এবং নতুন ব্যবহারকারীদের স্বয়ংক্রিয়ভাবে বিজয়ীর কাছে পাঠায়।
- ম্যানুয়াল নির্বাচন। আপনি পরীক্ষার ফলাফল পর্যালোচনা করবেন এবং ম্যানুয়ালি সিদ্ধান্ত নেবেন কোন ব্রাঞ্চটি সেরা পারফর্ম করছে। এই বিকল্পটির জন্য আপনাকে পরীক্ষাটি পর্যবেক্ষণ করতে হবে এবং কম পারফর্মিং ব্রাঞ্চগুলিকে ম্যানুয়ালি ডিঅ্যাক্টিভেট করতে হবে। আরও জানুন
প্রতিটি ব্রাঞ্চের জন্য কন্টেন্ট কনফিগার করুন
Anchor link toএখন আপনি প্রতিটি ব্রাঞ্চের জন্য কমিউনিকেশন ফ্লো সেট আপ করতে পারেন। যেহেতু ব্রাঞ্চ A একটি কন্ট্রোল গ্রুপ, তাই আপনার কেসের উপর নির্ভর করে এটিকে একটি নির্দিষ্ট উপায়ে কনফিগার করতে হবে:
- নতুন সংস্করণের বিপরীতে বিদ্যমান কমিউনিকেশন ফ্লো পরীক্ষা করুন। এই ক্ষেত্রে, বিদ্যমান সংস্করণটি ব্রাঞ্চ A-তে থাকা উচিত। এছাড়াও, নিশ্চিত করুন যে কনভার্সন গোলটি ব্রাঞ্চ A সহ যেকোনো ব্রাঞ্চে সম্পন্ন করা যেতে পারে।
- শুধুমাত্র নতুন সংস্করণগুলি একে অপরের বিরুদ্ধে পরীক্ষা করুন। যেহেতু কোনো পুরানো কমিউনিকেশন ফ্লো নেই, তাই নতুন সংস্করণগুলির মধ্যে একটিকে কন্ট্রোল গ্রুপ হিসাবে চিহ্নিত করা হবে (ব্রাঞ্চ A-তে উপস্থাপিতটি)। নিশ্চিত করুন যে কনভার্সন গোলটি সমস্ত ব্রাঞ্চে সম্পন্ন করা যেতে পারে।
- নতুন কমিউনিকেশন ফ্লো-এর বিপরীতে কোনো কমিউনিকেশন ছাড়াই একটি বিদ্যমান সংস্করণ পরীক্ষা করুন। উদাহরণস্বরূপ, আপনি একটি জার্নির শেষে আরও একটি পুশ যোগ করতে চান দেখতে যে এই পুশ ছাড়া মূল সংস্করণের তুলনায় ক্যাম্পেইনের পারফরম্যান্স বাড়ে কিনা। এই ক্ষেত্রে, ‘খালি’ সংস্করণটি ব্রাঞ্চ A-তে উপস্থাপন করা উচিত। নির্ভরযোগ্য ফলাফল পেতে, প্রতিটি ব্রাঞ্চে একটি সমান টাইম ডিলে যোগ করুন:
জার্নিটি চালু করুন
Anchor link toযদি সবকিছু প্রস্তুত থাকে, তবে জার্নিটি চালু করুন।
ফলাফল বিশ্লেষণ করুন
Anchor link toটেস্টটি চালু হওয়ার সাথে সাথেই আপনি এর রিয়েল-টাইম পরিসংখ্যান দেখতে পারবেন।
জার্নি ক্যানভাসে, প্রতিটি ব্রাঞ্চের মধ্য দিয়ে যাওয়া ব্যবহারকারীর সংখ্যা দেখুন:
টেস্টের ফলাফল দেখতে, A/B/n স্প্লিট এলিমেন্টে ডাবল-ক্লিক করুন। আপনি প্রতিটি ব্রাঞ্চের জন্য পরিসংখ্যান দেখতে পাবেন, যার মধ্যে নির্বাচিত গোলের কনভার্সন এবং পরিসংখ্যানগত তাৎপর্য গণনা করতে ব্যবহৃত মেট্রিকগুলি অন্তর্ভুক্ত রয়েছে।
আপনি যদি একাধিক কনভার্সন গোল সেট করে থাকেন, তবে তালিকা থেকে প্রয়োজনীয় গোলটি নির্বাচন করে আপনি সেগুলির প্রতিটির ফলাফল দেখতে পারেন:
যদি আপনার টেস্টে পরিসংখ্যানগতভাবে তাৎপর্যপূর্ণ একজন বিজয়ী থাকে এবং আপনি ম্যানুয়াল বিজয়ী নির্বাচন ব্যবহার করেন, তবে আপনি শুধু বিজয়ীকে রাখুন-এ ক্লিক করে কম পারফর্মিং ব্রাঞ্চগুলিকে সঙ্গে সঙ্গে বন্ধ করে দিতে পারেন। নতুন জার্নি ট্র্যাভেলারদের বিজয়ী ব্রাঞ্চে পাঠানো হবে। যে ব্যবহারকারীরা ইতিমধ্যে ডিঅ্যাক্টিভেটেড ব্রাঞ্চে চলে গেছেন তারা জার্নি সম্পূর্ণ না করা পর্যন্ত সেগুলির মধ্য দিয়ে যেতে থাকবে।
আপনি একটি নির্দিষ্ট সময়ের জন্য পরীক্ষার ফলাফল দেখতে পারেন। এটি করতে, বাম প্যানেলে পছন্দসই সময়কাল নির্বাচন করুন এবং A/B/n স্প্লিট এলিমেন্টে ডাবল-ক্লিক করুন। আপনি নির্দিষ্ট সময়ের জন্য পরিসংখ্যান দেখতে পাবেন।
পরীক্ষার ফলাফল নিম্নরূপ গণনা করা হয়:
- কনভার্সন ব্রাঞ্চের ব্যবহারকারীর সংখ্যা এবং সম্পন্ন হওয়া কনভার্সন গোলের উপর ভিত্তি করে গণনা করা হয়। ব্রাঞ্চ A-কে বেসলাইন হিসাবে চিহ্নিত করা হবে, কারণ এটি কন্ট্রোল গ্রুপের প্রতিনিধিত্ব করে।
- পরিসংখ্যানগত তাৎপর্য গণনা করার সময়, Z-Score এবং P-Value বিবেচনা করা হয়। যদি ফলাফলটি বৈধ হয়, তবে এটিকে তাৎপর্যপূর্ণ হিসাবে চিহ্নিত করা হবে।
- একটি ব্রাঞ্চকে বিজয়ী হিসাবে বিবেচনা করা হয় যদি এটির সর্বোচ্চ কনভার্সন থাকে, এবং এই ফলাফলটি তাৎপর্যপূর্ণ হিসাবে চিহ্নিত হয়।
ব্রাঞ্চ ডিঅ্যাক্টিভেট করুন
Anchor link toযদি Pushwoosh একজন পরিসংখ্যানগতভাবে তাৎপর্যপূর্ণ বিজয়ী শনাক্ত করে, তবে আপনি টেস্ট পরিসংখ্যান উইন্ডোতে শুধু বিজয়ীকে রাখুন-এ ক্লিক করে কম পারফর্মিং ব্রাঞ্চগুলিকে সঙ্গে সঙ্গে বন্ধ করে দিতে পারেন। এই ক্ষেত্রে, আপনাকে জার্নিটি পজ করতে হবে না। যদি কোনো ব্রাঞ্চ খারাপ পারফর্ম করে, তবে আপনি এটি ডিঅ্যাক্টিভেট করতে পারেন। নতুন ব্যবহারকারীরা আর ডিঅ্যাক্টিভেটেড ব্রাঞ্চে প্রবেশ করবে না।
একটি ব্রাঞ্চ ডিঅ্যাক্টিভেট করতে, প্রথমে জার্নিটি পজ করুন:
এর পরে, A/B/n স্প্লিট এলিমেন্টে ডাবল-ক্লিক করুন। এই ব্রাঞ্চের জন্য ০% সেট করুন এবং বাকি ব্রাঞ্চগুলিতে যাওয়া ব্যবহারকারীদের শতাংশ পুনরায় বিতরণ করুন:
