xAI-এর ওপেন-সোর্স X রেকমেন্ডেশন অ্যালগরিদমের গভীর বিশ্লেষণ: Phoenix আর্কিটেকচার থেকে For You ফিড পর্যন্ত
xAI-এর ওপেন-সোর্স X রেকমেন্ডেশন অ্যালগরিদমের গভীর বিশ্লেষণ
২০২৬ সালের জানুয়ারিতে, xAI GitHub-এ xai-org/x-algorithm ওপেন-সোর্স করে — X (পূর্বে Twitter)-এর “For You” ফিড চালানোর মূল রেকমেন্ডেশন অ্যালগরিদম। রিপোজিটরিটি ২০,৮০০-এর বেশি স্টার এবং ৩,৬০০ ফর্ক অর্জন করেছে। ২০২৩ সালে Twitter-এর আংশিক ওপেন-সোর্স প্রচেষ্টা (“স্বচ্ছতা থিয়েটার” বলে সমালোচিত) থেকে ভিন্ন, এই রিলিজটি একটি সম্পূর্ণ আর্কিটেকচারাল পুনর্লিখন উপস্থাপন করে — ম্যানুয়াল নিয়মের উপর নির্ভরশীল সিস্টেম থেকে Grok Transformer মডেল-এর উপর ভিত্তি করে এন্ড-টু-এন্ড ML-চালিত আর্কিটেকচারে রূপান্তর।
সাত-স্তরের পাইপলাইন
| স্তর | নাম | কাজ | ভলিউম |
|---|---|---|---|
| 1 | Query Hydration | ব্যবহারকারীর প্রসঙ্গ | N/A |
| 2 | Candidate Sourcing | Thunder + Phoenix Two-Tower | ~১,৫০০ |
| 3 | Candidate Hydration | মেটাডেটা সমৃদ্ধ করা | ~১,৫০০ |
| 4 | Pre-Scoring Filters | ডুপ্লিকেট/পুরোনো অপসারণ | ~১,২০০ |
| 5 | ML Scoring | Grok Transformer (১৫ অ্যাকশন) | ~১,২০০ |
| 6 | Selection | Top K নির্বাচন | ~২০০ |
| 7 | Post-Selection Filters | স্প্যাম/সহিংসতা অপসারণ | ~১৮০ |
Two-Tower রিট্রিভাল
টু-টাওয়ার আর্কিটেকচার ব্যবহারকারী এবং পোস্টগুলিকে একটি শেয়ার্ড এম্বেডিং স্পেসে এনকোড করে।
Candidate Isolation
মূল উদ্ভাবন: একটি কাস্টম অ্যাটেনশন মাস্ক যা ক্যান্ডিডেটদের একে অপরের দিকে মনোযোগ দিতে বাধা দেয়।
১৫ অ্যাকশন পূর্বাভাস
Phoenix একসঙ্গে ১৫ ধরনের ইন্টারঅ্যাকশন-এর ভবিষ্যদ্বাণী করে। নেতিবাচক ইন্টারঅ্যাকশনের ওজন ~-৭৪x।
