اعتدت أن أكون مرتبكا بشأن سبب انزعاج الكثير من الناس من LLMs مثل Cursor و ChatGPT أحيانا الهلوسة أو ارتكاب الأخطاء. إنهم محللون سحريون خارقون ... فماذا لو ارتكبوا بعض الأخطاء. أجد أن مراقبة الجودة الأساسية والتثليث والتجسير يمكن أن تساعدك في العثور على هذه الأخطاء. لقد عملت في عدد قليل من وظائف الأسهم الخاصة قبل ثيا حيث كانت مراقبة الجودة (أي التأكد من عدم ضبط نموذج الشريك) جزءا كبيرا من الدور. المحللون الجدد يرتكبون الكثير من الأخطاء. كان سطري المفضل (الساعة 2 صباحا) هو "عمل جيد ولكن كل رقم في هذه الصفحة خاطئ". لقد وجدت أن هذا ممل وممل ولكنه كان جزءا مهما للغاية من الوظيفة. لم أفكر في هذا أبدا على أنه مهارة من قبل ولكني أجد أستخدمها كل يوم مع LLMs. في الواقع لا أعتقد أن LLMs سيتوقفون عن ارتكاب الأخطاء معا ، لذا فهذه الآن مهارة أساسية بالنسبة لك. لقد وجدت بعضا من أفضل تقنيات مراقبة الجودة - 1. فقط قشط النموذج / الكود. تتعلم أن تجد الكثير من الأخطاء بهذه الطريقة. 2. التثليث الأساسي (على سبيل المثال ، 45٪ IRR خاطئ ، لا يمكن أن تكون مبيعات مبيعات البيتزا الأمريكية 50 مليار دولار لأن دومينوز 18 مليار دولار ولا توجد طريقة للقيام بذلك 40٪) 3. جسر الأرقام داخل النموذج مع بعضها البعض (على سبيل المثال ، إذا كان السوق ينمو بنسبة 50٪ ونحن ننمو حصتنا في السوق من 5 إلى 10٪ ، فلماذا لا ننمو بنسبة 100٪؟ اذهب للتحقق من هذه الأرقام) 4. جسر إلى التحليلات السابقة (على سبيل المثال ، بلغت إيراداتنا لعام 2028 120 مليون دولار في النموذج السابق وهي الآن 144 مليون دولار ... ماذا حدث على وجه التحديد؟ أوه ، رفعنا سعر الوحدة من 10 دولارات إلى 12 دولارا حسنا) بصراحة يتلخص الأمر نوعا ما في النظر إلى الرقم الموجود على الصفحة والتفكير فيه لمدة خمس دقائق قبل قبول النموذج. هذا نوع من الوضوح الشديد ولكن النشر في حال كان يساعد أي شخص.