الأوراق الثلاث الأخيرة التي نشرتها DeepSeek جميعها موقعة من ليانغ وينفينغ، ومحتوى الأوراق أيضا مثير للاهتمام للغاية. خاصة في المقال عن إنغرام، فإن ديب سيك يعادل إدخال "قاموس" للنموذج إلى غرفة الفحص، مما يحرر القدرة العقلية المتكررة على المسائل الصعبة. لكنهم وجدوا أنه إذا كان النموذج كله عن الذاكرة (إنغرام)، فهو مجرد مهووس بالطبع لا يستطيع التفكير على الإطلاق. لكن إذا كان كل شيء يعتمد على الاستدلال (MOE)، فإن الكثير من قوة الحوسبة تهدر لاستخلاص معرفة ثابتة مثل "أين عاصمة الصين". كم عدد الذكريات التي يجب أن تأخذها للامتحان؟ طورت DeepSeek نموذجا للنسبة الذهبية بين "الذاكرة" و"التفكير". أفضل نسبة تم قياسها في النهاية كانت: 75٪ للتفكير و25٪ للذاكرة. قد لا يكون هذا الاستنتاج مناسبا فقط للنموذج، بل يستحق التفكير فيه. عندما يتذكر الشخص كل التفاصيل، يعادل فقدان مساحة للتفكير. التفكير المنطقي، المجرد المناسب، هو مصدر التقدم البشري. عندما لا يكون لدى الشخص أي معرفة على الإطلاق، فإنه يضيع طاقته الدماغية فقط في التفكير في أبسط الأمور، ويصبح عقله بلا عمل. قاس DeepSeek أنه بعد إضافة قاموس لتقليل التفكير، أصبح للنموذج عمق تفكير إضافي يعادل عمق شبكة من 7 طبقات. بشكل غير متوقع، يزيد اتساع المعرفة من عمق التفكير بهذه الطريقة. ملهم جدا.