Recallr نے LongMemEval، طویل مدتی یادداشت کے معیاری ٹیسٹ میں 86.7% اسکور کیا ہے۔
ہر سوال میں تقریباً 48 پچھلی بات چیتوں میں سے ایک تفصیل چھپی ہوتی ہے، جو تقریباً 490 پیغامات کے قریب ہوتی ہے، پھر اسے واپس مانگا جاتا ہے۔ یہ Recallr کو ان یادداشت کے نظاموں کی حد میں رکھتا ہے جن پر AI ڈویلپرز کام کرتے ہیں۔
- اس فہرست میں واحد صارف ایپ۔ باقی سب یادداشت کے نظام ہیں جو ڈویلپرز اپنی مصنوعات میں شامل کرتے ہیں۔
- تیز، کم لاگت والے روزمرہ ماڈل کے ساتھ جانچا گیا۔ یہاں کچھ نتائج بڑے ماڈلز سے لیے گئے ہیں۔
86.7%104 میں سے 120 سوالات
یادداشت کے نظام کی حد میں جن پر AI ڈویلپرز کام کرتے ہیں۔
شائع شدہ LongMemEval اسکورز، ہر ٹیم کے بہترین نتیجے پر، اس AI ماڈل کے ساتھ جس نے جواب دیا اور سورس لنک کے ساتھ۔
- 1ماسٹرا مشاہداتی یادداشتAI ایجنٹس کے لیے میموری (اوپن سورس)94.9%چھوٹا جنرل ماڈلماسٹرا تحقیق، فروری 2026 · 84.23% ایک پرانے جنرل ماڈل کے ساتھ
- 2ماضی کی بصیرتAI ایجنٹس کے لیے میموری (تحقیقی)91.4%ایک بڑا بیک بون ماڈللیٹمر وغیرہ، arXiv، دسمبر 2025 · 83.6% ایک اوپن سورس 20B ماڈل کے ساتھ
- 3Recallrصارف کی ایپ، جیسا کہ فراہم کی جاتی ہے86.7%تیز روزمرہ ماڈل
- 4EmergenceMemAI ایجنٹس کے لیے میموری86.0%ایک داخلی ماڈلEmergence AI بلاگ، جون 2025 · عوامی طور پر دوبارہ قابل استعمال نہیں؛ اس کے پبلک طریقے نے ایک پرانے جنرل ماڈل کے ساتھ 82.4% اسکور کیا
- 5سپر میموریAI ایپس کے لیے میموری API85.2%بڑا جنرل ماڈلسپر میموری تحقیق · 84.6% ایک اور بڑے جنرل ماڈل کے ساتھ
- 6ZepAI ایجنٹس کے لیے میموری71.2%پرانا جنرل ماڈل
- 7ایک AI ماڈل جو پوری ہسٹری پڑھ رہا ہےکوئی یادداشت کا نظام نہیں: ہر پرامپٹ میں مکمل تقریباً 115,000 ٹوکن کی تاریخ60.6%پرانا جنرل ماڈل
ہفتے یا مہینے بعد نئے چیٹ میں پوچھا گیا۔
Recallr کے چار درست جوابات، لفظ بہ لفظ۔ لوگ اور ان کی پچھلی چیٹس خود ٹیسٹ ہیں۔
پہلے ذکر کیا گیا about 8 months
میرے پاس اس وقت کتنی بائیکس ہیں؟
چار۔ آپ نے 2 اکتوبر کے پیغام میں کہا تھا کہ آپ نے ابھی ایک نیا ہائبرڈ بائیک خریدا ہے، تو اب آپ کے پاس روڈ بائیک، ماؤنٹین بائیک، کمیوٹر بائیک اور وہ ہائبرڈ ہے — جو فروری 15 کو بتائی گئی تین بائیکس سے زیادہ ہے۔
پہلے ذکر کیا گیا about 4 months
جب سے میری دوست ایما نے مجھے نیگرونی بنانے کا طریقہ بتایا ہے، میں نے گھر پر کتنی بار نیگرونی بنانے کی کوشش کی؟
دس بار - آپ نے یہ جمعرات، 15 اکتوبر 2026 کو بتایا تھا۔ (جون میں آپ نے کہا تھا کہ یہ پانچ ہے، تو آپ نے اسے دگنا کر دیا ہے۔)
پہلے ذکر کیا گیا 3 weeks
میرا موجودہ سب سے زیادہ اسکور Ticket to Ride میں کیا ہے؟
132 پوائنٹس — آپ نے یہ 4 اکتوبر 2026 کو حاصل کیا، جب آپ نے Scythe گیم نائٹ چیٹ میں اس کا ذکر کیا تھا۔ یہ آپ کے پہلے 124 پوائنٹس سے بہتر تھا جو 1 اکتوبر کو تھا۔
پہلے ذکر کیا گیا 4 weeks
میرے ہرب گارڈن کو پانی دینے کے دن سے لے کر پہلی تازہ جڑی بوٹی کی کٹائی تک کتنے دن گزرے؟
24 دن — آپ نے 23 ستمبر 2026 سے روزانہ پانی دینا شروع کیا، اور 17 اکتوبر 2026 کو اپنی پہلی فصل کاٹ لی۔
ٹیسٹ، اور ہم نے اسے کیسے چلایا۔
- ٹیسٹ
- LongMemEval (Wu et al., ICLR 2025) چیک کرتا ہے کہ آیا چیٹ اسسٹنٹ آپ کی باتیں کئی گفتگوؤں میں یاد رکھتا ہے: آپ نے جو حقائق بتائے، جو چیزیں بعد میں بدلی، تاریخیں، آپ کی ترجیحات، اور جو اس نے آپ کو بتایا۔ اس کا "S" سیٹ ہر سوال کو 48 پہلے کی بات چیت میں تلاش کرنے دیتا ہے۔ یہ مقالہ۔
- Recallr
- Recallr کا موجودہ ورژن، جیسا کہ فراہم کیا گیا ہے، October 2026 پر ٹیسٹ کیا گیا۔ ہر سوال کی پچھلی چیٹس ایک نئے اکاؤنٹ میں بطور ماضی کی چیٹس لوڈ کی گئیں؛ پھر سوال نئی چیٹ میں پوچھا گیا۔
- سوالات
- 120 میں سے 500، ہر چھ قسموں میں سے برابر 20، سیٹ کے صاف شدہ ورژن سے۔
- AI ماڈل
- ایک تیز اور کم قیمت روزمرہ ماڈل نے ہر سوال کا جواب دیا؛ یہ انہی AI ماڈلز میں سے ایک ہے جو Recallr استعمال کرتا ہے۔ ہر جواب کو بلائنڈ گریڈ کیا گیا، بینچ مارک کے اپنے چیک پرامپٹس اور گریڈر ماڈل کے ساتھ۔
- دیگر نظام
- اسی ٹیسٹ پر ان کے اپنے شائع شدہ نتائج، 6 ذرائع، 20 اکتوبر 2026 کو چیک کیے گئے۔ چارٹ کو دوڑ کے طور پر نہیں بلکہ حد کے طور پر پڑھیں: ہر نظام نے مختلف AI ماڈل کے ساتھ جواب دیا، اور انہوں نے تمام 500 سوالات چلائے۔
جاننا اچھا ہے۔
ابھی بھی تجسس ہے؟ کونے میں Recallr سے پوچھیں، یا support@recallr-ai.org پر لکھیں۔
01LongMemEval کیا ہے؟
چیٹ اسسٹنٹس میں طویل مدتی یادداشت کے لیے معیاری معیار، ICLR 2025 میں شائع ہوا۔ اس کے 500 سوالات میں سے ہر ایک میں درجنوں سابقہ گفتگو شامل ہیں اور ایک تفصیل کے بارے میں پوچھتا ہے، اس لیے اسسٹنٹ کو آپ کی بات تلاش کر کے استعمال کرنا ہوتا ہے، اندازہ نہیں لگانا۔
02کیا Recallr کی یادداشت ایپ میں بھی ایک جیسی ہے؟
جی ہاں۔ ٹیسٹ موجودہ Recallr ورژن پر چلایا گیا جیسا کہ یہ فراہم کیا جاتا ہے: وہی یادداشت، آپ کی پچھلی چیٹس میں وہی تلاش، وہی جواب کی جانچ۔
03کیوں 120 سوالات اور پورے 500 نہیں؟
ہر سوال کے لیے درجنوں پچھلی بات چیتوں کے ساتھ اپنا اکاؤنٹ چاہیے، اس لیے ہم نے ٹیسٹ کی چھ اقسام میں سے ہر ایک سے برابر 20 چلائے۔ جب Recallr کا نیا ورژن آتا ہے، ہم اسے دوبارہ چلاتے ہیں اور یہ صفحہ اپ ڈیٹ ہوتا ہے۔
ایک بار بتائیں۔
مہینوں بعد پوچھیں۔
آج جو اہم ہے اسے محفوظ کریں۔ جب ضرورت ہو پوچھیں۔
مفت شروع کریں۔ کارڈ کی ضرورت نہیں۔