Dev Radar
Support
LiveUpdated 2026-09-22 08:21 UTC

قصة من GitHub عن ليه الـ benchmark النضيف بيخدعك قبل الـ production:

قصة من GitHub عن ليه الـ benchmark النضيف بيخدعك قبل الـ production: الفريق كان بيقيّم LLM عشان يقلل الـ false…

This is a dev post classified by Jev as Security (a tutorial), kept by the Dev Radar because it carries real work, not commentary.

قصة من GitHub عن ليه الـ benchmark النضيف بيخدعك قبل الـ production: الفريق كان بيقيّم LLM عشان يقلل الـ false positives في secret scanning. على الداتا النظيفة؟ النتيجة واعدة. على توزيع الـ production؟ قصة تانية. الدروس العملية (Mariko Wakabayashi و Zixiao Chen — GitHub Blog، أغسطس ٢٠٢٦): ١) ابدأ من قرار المنتج مش من الموديل السؤال كان: نقدر نقلل الضوضاء ونحافظ على recall كافي للأمان؟ Precision هدف أساسي. Recall حاجز أمان — مش رقمين متساويين. ٢) الـ offline eval زي integration test كل تغيير كبير (prompt / model / pipeline) → إعادة تشغيل + baseline قابل للمقارنة. غيّر متغير واحد في المرة.

Posted by Hazem Omier (383 followers) 1 days ago · 0 likes · 17 views · view the original post on X. Kept by the Dev Radar as Security.

More dev work like this

Every post is read and classified by Jev (TypeSafe): what it is, which market it belongs to, and whether the link is a real tool. 20.7k posts from 4.9k X accounts over the last 21 days, 2.4k tools, 12 markets. Collected every 5 minutes, fully re-ranked every hour — last update 2026-09-22 08:21 UTC. Full method.