# کلود میں کمی کا پتہ کیسے لگایا جائے (حقیقی ڈیٹا کے ساتھ)

Published: 2026-09-30

لوگ کہتے ہیں کہ کلود ہر لانچ کے چند ہفتوں بعد سست ہو جاتا ہے۔ ایک ڈویلپر نے کلود اوپس 5.5 کو لانچ کے ہفتے سے 30 دن کی گھڑی پر رکھا، جس میں منجمد سوالات، ایک پن کیا ہوا کلود کوڈ اور عوامی قواعد شامل تھے، اور یہ ظاہر کرتا ہے کہ پہلے کسی کو کیوں معلوم نہیں ہو سکتا تھا، اور آپ کے ٹوکن کی تعداد کیوں دیکھنے کی چیز ہے۔ فیصلہ: SHIP IT۔

Canonical: https://thedailydiff.dev/ur/video/2026-09-30-opus-nerf-meter/

## اس ویڈیو میں کیا شامل ہے

- کلود لانچ کے بعد سست ہو جاتا ہے: نظریہ صفر دن کی گھڑی پر پورا اترتا ہے
- لائیو نرف: لانچ کے ہفتے سے اوپس 5.5 پر 30 دن کی گھڑی
- کمی کو کیسے پکڑا جائے: 78 کبھی کبھی درست سوالات
- یہ کیا دیکھ سکتا ہے: 7.5 پوائنٹس، اور ٹوکن کی تعداد پہلے حرکت کرتی ہے
- اندھا دھند حصہ: اوپس 5 کا تبادلہ اور 8 غلط جواب کیز

## ابواب

- 0:00 کلود لانچ کے بعد سست ہو جاتا ہے: نظریہ صفر دن کی گھڑی پر پورا اترتا ہے
- 0:26 لائیو نرف: لانچ کے ہفتے سے اوپس 5.5 پر 30 دن کی گھڑی
- 1:24 کمی کو کیسے پکڑا جائے: 78 کبھی کبھی درست سوالات
- 2:19 یہ کیا دیکھ سکتا ہے: 7.5 پوائنٹس، اور ٹوکن کی تعداد پہلے حرکت کرتی ہے
- 2:53 اندھا دھند حصہ: اوپس 5 کا تبادلہ اور 8 غلط جواب کیز
- 3:08 اینتھروپک: ہم ماڈل کے معیار کو کبھی کم نہیں کرتے
- 3:45 ڈیٹا سینٹرز اپنے نمبر خفیہ رکھتے ہیں؛ بیک بليز شائع کرتا ہے
- 4:25 کریڈٹ لائن: کلود نے میٹر بنانے میں مدد کی
- 4:50 فیصلہ: SHIP IT، اور اسے 24 اکتوبر سے پہلے حوالہ نہ دیں

## ترجمہ شدہ ٹرانسکرپٹ

اصل انگریزی بیان سے ترجمہ کیا گیا۔ دستیاب آڈیو اور کیپشنز یوٹیوب کے زیر انتظام ہیں۔

### کلود لانچ کے بعد سست ہو جاتا ہے: نظریہ صفر دن کی گھڑی پر پورا اترتا ہے

0:00 ہر کوئی جانتا ہے کہ کلود لانچ کے چند ہفتوں بعد سست ہو جاتا ہے۔ تو ایک ڈویلپر نے اوپس 5.5 کو لانچ کے ہفتے سے گھڑی پر رکھا، اور گھڑی کہتی ہے کہ ابھی تک کوئی نہیں جان سکتا تھا۔ اس ویڈیو میں، تین سوالات۔ آپ کمی کو کیسے پکڑتے ہیں؟ یہ میٹر کیا دیکھ سکتا ہے؟ اور اینتھروپک کیا کہتا ہے؟ اور ریپو کے کریڈٹس میں ایک لائن نے مجھے زور سے ہنسا دیا۔

0:20 میں اسے آخر میں بتاؤں گا۔ آج بدھ، 30 ستمبر ہے، اور یہ The Daily Diff ہے۔ آج تین کہانیاں ہیں، اور بڑی والی ایک گٹ ہب ریپو ہے جسے لائیو نرف کہا جاتا ہے۔

### لائیو نرف: لانچ کے ہفتے سے اوپس 5.5 پر 30 دن کی گھڑی

0:30 مہینوں سے، لوگ کہتے رہے ہیں کہ اینتھروپک لانچ کے بعد اپنے ماڈلز کو چپکے سے کمزور کرتا ہے۔ عام نظریات ایک squeezed ماڈل، ایک ہی نام کے تحت ایک چھوٹا ماڈل یا محض کم سوچنا ہے۔ ریپو اب تک کے ہر دلیل کو وائبس بمقابلہ وائبس کہتا ہے۔ اوپس 5.5 22 ستمبر کو جاری ہوا، اور ایک ہفتہ پہلے میں نے آپ کو بتایا تھا کہ اس نے آزاد بورڈ پر سرفہرست مقام حاصل کیا جبکہ اوسط ماڈل سے تین گنا زیادہ الفاظ لکھے۔ ڈھائی دن بعد، ایک ڈویلپر جسے ننجا ہاک کہتے ہیں، نے گھڑی شروع کی،

0:59 روزانہ ایک بار تیس دن کے لیے، لاگز کے ساتھ جن میں کوئی تبدیلی نہیں کر سکتا۔ ہیکر نیوز کا تھریڈ تقریباً آٹھ سو پوائنٹس پر پہنچا اور ایک ٹیم چیٹ کی طرح تقسیم ہو گیا۔ ایک تبصرہ نگار کہتا ہے کہ ماڈلز کو کمزور کرنا اکثریت میں رپورٹ شدہ معاملات میں حقیقی نہیں ہے۔ دوسرا کہتا ہے کہ لوگ محض ذہانت کی نئی سطح کے عادی ہو رہے ہیں ۔ اور ایک کلود کوڈ پاور یوزر اب ہر بار ریٹ-دس-سیشن پاپ اپ کو رد کر دیتا ہے، کیونکہ کلود کو ریٹ کرنا اسے بدتر بناتا ہے۔ ہم عمروں کا جائزہ۔ تو، سوال ایک، آپ کمی کو کیسے پکڑتے ہیں؟

### کمی کو کیسے پکڑا جائے: 78 کبھی کبھی درست سوالات

1:27 آپ تقریباً 2300 مشکل امتحانی سوالات سے شروع کرتے ہیں، اور اوپس پہلی کوشش میں 93 فیصد درست ہوتا ہے، جو ایک ڈیٹیکٹر کے لیے بیکار ہے، کیونکہ ایک سوال جو اسے ہمیشہ درست ملتا ہے وہ گر نہیں سکتا۔ 97 فیصد ہمیشہ درست یا ہمیشہ غلط تھے، اور 78 جسے یہ صرف کبھی کبھی درست کرتا ہے وہ پینل بن گیا۔ وہی پرامپٹ، کوئی ٹولز نہیں، اور AI جج کے بغیر درست میچ کی درجہ بندی، کیونکہ جج بھی بہک جاتا۔ یہ ہیڈ لیس کلود کوڈ کے ذریعے میکس سبسکرپشن پر چلتا ہے،

1:55 کیونکہ API ورژن کی قیمت تقریباً 1600 ڈالر ماہانہ تھی۔ اور کلود کوڈ ورژن پن کیا ہوا ہے، کیونکہ، ریپو کے الفاظ میں، ایک بدلا ہوا ہارسنس بالکل ایک بدلے ہوئے ماڈل کی طرح لگتا ہے۔ اعداد و شمار ایون ملر، اینتھروپک کے ایک کاغذ سے آتے ہیں جسے ایوالز میں ایرر بارز شامل کرنا کہا جاتا ہے۔ تو اینتھروپک کا اپنا حساب کتاب اب اینتھروپک کا آڈٹ کر رہا ہے، جو تعلیمی ورژن ہے کسٹمر سپورٹ کو سروس کی شرائط کا حوالہ دینے کا۔

### یہ کیا دیکھ سکتا ہے: 7.5 پوائنٹس، اور ٹوکن کی تعداد پہلے حرکت کرتی ہے

2:19 سوال دو، یہ کیا دیکھ سکتا ہے؟ ہر دس دن کی کھڑکی کے مطابق، تقریباً ساڑھے سات پوائنٹس کی کمی۔ یہ ثابت کرنے کے لیے کہ رِگ کام کرتا ہے، مصنف نے جان بوجھ کر کلود کی کوشش کو کم کیا۔ میڈیم کوشش نے آؤٹ پٹ کو تقریباً ایک چوتھائی کم کر دیا، اور سکور کو صرف چار پوائنٹس۔ کم کوشش نے آؤٹ پٹ کو تقریباً دو تہائی کم کر دیا، آٹھ پوائنٹس کے لیے۔ یہ وہ حصہ ہے جسے چوری کرنا ہے۔ کم سوچنا ٹوکن کی تعداد میں جوابات سے پہلے ظاہر ہوتا ہے۔

2:43 لہذا اپنے ماڈل ورژن کو پن کریں، فی ٹاسک آؤٹ پٹ ٹوکنز کو لاگ کریں، اور اپنے کچھ منجمد سوالات رکھیں۔ اگر آپ کا ایجنٹ اچانک کم لکھتا ہے، تو ریڈٹ چیک کرنے سے پہلے اپنے لاگز چیک کریں۔ اور یہ ایماندارانہ حصہ ہے۔

### اندھا دھند حصہ: اوپس 5 کا تبادلہ اور 8 غلط جواب کیز

2:54 چپکے سے پرانے اوپس 5 کو تبدیل کرنا رِگ کے لیے بہت چھوٹی تبدیلی تھی ، اور README میں ایسا ہی لکھا ہے۔ آڈٹ نے آٹھ جواب کیز بھی پائے جو غلط لگتے ہیں، تو نرف ڈیٹیکٹر نے نرف پانے سے پہلے بینچ مارک میں کیڑے پائے۔

### اینتھروپک: ہم ماڈل کے معیار کو کبھی کم نہیں کرتے

3:08 سوال تین، اینتھروپک کیا کہتا ہے؟ پچھلے سال، شکایات کی ایک لہر کے بعد، اینتھروپک نے ایک پوسٹ مارٹم شائع کیا۔ اس میں لکھا ہے، "ہم کبھی بھی ماڈل کے معیار کو طلب، دن کے وقت یا سرور لوڈ کی وجہ سے کم نہیں کرتے۔" اسی پوسٹ میں تین کیڑوں کو تسلیم کیا گیا جنہوں نے کلود کو خراب کیا، اور تقریباً ایک تہائی کلود کوڈ صارفین کم از کم ایک بار غلط سرورز پر پہنچے۔ تو شکایات حقیقی تھیں اور وجہ کیڑے تھے، یہی وجہ ہے کہ ریپو خبردار کرتا ہے کہ لانچ کا ہفتہ بدترین ہفتہ ہو سکتا ہے۔

3:35 تیس میں سے چھ دن ہو چکے ہیں۔ پہلا ممکنہ کال تقریباً 24 اکتوبر کو ہوتا ہے، لہذا ایماندارانہ جواب یہ ہے کہ کوئی نہیں جانتا، بشمول ہر وہ شخص جو یقین رکھتا تھا۔ ایسے نمبروں کی بات کرتے ہوئے جو کوئی شائع نہیں کرتا۔

### ڈیٹا سینٹرز اپنے نمبر خفیہ رکھتے ہیں؛ بیک بليز شائع کرتا ہے

3:46 لائٹ ہاؤس رپورٹس اور ڈچ پیپر Trouw نے پایا کہ یورپی ڈیٹا سینٹرز کی اکثریت اپنی بجلی اور پانی کے استعمال کو خفیہ رکھتی ہے، حالانکہ یورپی یونین کا ایک قانون تین سال سے رپورٹنگ کا تقاضا کر رہا ہے۔ نیدرلینڈز میں، ایک چوتھائی سے بھی کم شائع کرتے ہیں۔ ایک مائیکروسافٹ ڈیٹا سینٹر اکیلا ڈچ بجلی کا تقریباً ایک فیصد استعمال کرتا ہے۔ دریں اثنا، بیک بليز نے دوبارہ بورنگ کام کیا۔ اس کے سہ ماہی ڈرائیو کے اعداد و شمار تقریباً ساڑھے تین لاکھ ہارڈ ڈرائیوز کا احاطہ کرتے ہیں، اور ناکامی کی شرح 1.73 فیصد تک بڑھ گئی،

4:16 کافی عرصے میں سب سے زیادہ۔ سی گیٹ کے تین ماڈلز میں صفر ناکامیاں تھیں۔ یہ ایک عوامی بیس لائن کیسا لگتا ہے، سہ ماہی کے بعد سہ ماہی، تیرہ سال تک۔

### کریڈٹ لائن: کلود نے میٹر بنانے میں مدد کی

4:25 اب، وہ کریڈٹس لائن۔ README تسلیم کرتا ہے کہ ریپو کا ایک بڑا حصہ کلود کی مدد سے لکھا گیا تھا، جو ماڈل ماپا جا رہا ہے۔ تو کلود نے میٹر بنانے میں مدد کی جو یہ چیک کرتا ہے کہ آیا کلود سست ہو گیا ہے۔ یہی وجہ ہے کہ گریڈرز سادہ فنکشنز ہیں۔ مصنف کے الفاظ میں، آپ کو مصنف پر بھروسہ نہیں کرنا چاہیے، چاہے وہ انسان ہو یا کوئی اور۔ اگر آپ اسے سننے کے بجائے پڑھنا چاہتے ہیں، تو ڈیف آپ کے ان باکس میں

4:46 ہر صبح آتا ہے، the daily diff dot dev پر مفت، لنک نیچے ہے۔ تو، لائیو نرف پر آج کا فیصلہ۔

### فیصلہ: SHIP IT، اور اسے 24 اکتوبر سے پہلے حوالہ نہ دیں

4:51 SHIP IT۔ میں اسے SHIP IT کروں گا کیونکہ یہ پہلی نرف دلیل ہے جسے میں نے ٹائم سٹیمپ، ایک عوامی رول بک اور ایک بیان شدہ بلائنڈ سپاٹ کے ساتھ دیکھا ہے۔ بس اسے 24 اکتوبر سے پہلے حوالہ نہ دیں۔ اور یہ آج کا ڈیف ہے۔ میں Axrisi سے نیکو ہوں۔ ذمہ داری سے ضم کریں۔

## ذرائع

- [livenerf](https://github.com/ninjahawk/livenerf) — github.com
- [Validation](https://github.com/ninjahawk/livenerf/blob/main/docs/VALIDATION.md) — github.com
- [Hacker News](https://news.ycombinator.com/item?id=49901736) — news.ycombinator.com
- [Anthropic postmortem (Sep 2025)](https://www.anthropic.com/engineering/a-postmortem-of-three-recent-issues) — www.anthropic.com
- [Adding Error Bars to Evals (Evan Miller)](https://arxiv.org/abs/2411.00640) — arxiv.org
- [Inspect (UK AI Security Institute)](https://inspect.aisi.org.uk/) — inspect.aisi.org.uk
- [NL Times](https://nltimes.nl/2026/09/30/data-centers-refusing-say-much-water-electricity-use) — nltimes.nl
- [Hacker News](https://news.ycombinator.com/item?id=49907057) — news.ycombinator.com
- [Backblaze Drive Stats Q2 2026](https://www.backblaze.com/blog/backblaze-drive-stats-for-q2-2026/) — www.backblaze.com
- [Hacker News](https://news.ycombinator.com/item?id=49893002) — news.ycombinator.com