डेवलपर्स ने देखा कि "एफर्ट" का पैमाना कम दिखा रहा है। एंथ्रोपिक कहता है वह सर्विंग कॉन्फ़िग परख रहा है, और इस हफ़्ते उस संख्या का मतलब अलग है।

22 अगस्त के सप्ताहांत में क्लॉड कोड के उपयोगकर्ताओं ने पोस्ट किया कि टूल का "एफर्ट" संकेतक अप्रत्याशित रूप से कम मान दिखा रहा है — एक स्क्रीनशॉट में 100 में से 10 — और यह कि एक ही तरह के काम ओपस 5 और पुराने ओपस 4.6 के बीच बहुत अलग व्यवहार कर रहे थे; एक मामले में उसी काम पर 43 मिनट बनाम 2 मिनट। यह धागा हैकर न्यूज़ के मुखपृष्ठ पर पहुंच गया। एंथ्रोपिक में क्लॉड कोड टीम का नेतृत्व करने वाले थारिक ने सार्वजनिक रूप से उत्तर दिया कि कंपनी इस समय एपीआई सर्विंग कॉन्फ़िगरेशन का परीक्षण कर रही है और उस परीक्षण के दौरान संख्यात्मक एफर्ट मान को सामान्य से "अलग तरह से मैप" किया जा रहा है। उन्होंने कहा कि उपयोगकर्ता जो एफर्ट चुनता है वही उसे मिलता है, और कंपनी के अपने मूल्यांकन प्रदर्शन में कोई गिरावट नहीं दिखाते। धागे का बाकी हिस्सा इतनी आसानी से नहीं सुलझता: उपयोगकर्ताओं की एक लंबी कतार ओपस 5 के उत्तरों को अपनी अपेक्षा से अधिक लंबा और अधिक अलंकृत बताती है, कुछ 4.6 पर या प्रतिद्वंद्वी औज़ारों पर लौट रहे हैं। ये धारणाएं हैं, माप नहीं, और मॉडल की गुणवत्ता के बारे में धारणाएं कुख्यात रूप से अविश्वसनीय होती हैं — पर एंथ्रोपिक ने जो पुष्ट किया वह ठोस है: इंटरफ़ेस पर दिख रही एक संख्या का इस हफ़्ते वह अर्थ नहीं था जो पिछले हफ़्ते था।

✓ सत्यापित · 2 स्रोत

संबंधित खबरें