The latest articles on DEV Community by MohammadReza Shabani (@arsinshaabani). https://dev.to/arsinshaabani https://media2.dev.to/dynamic/image/width=90,height=90,fit=cover,gravity=auto,format=auto/https:%2F%2Fdev-to-uploads.s3.us-east-2.amazonaws.com%2Fuploads%2Fuser%2Fprofile_image%2F4148434%2F360f8268-7d66-4f79-b234-b008bc465ce8.jpg https://dev.to/arsinshaabani en MohammadReza Shabani Tue, 29 Sep 2026 05:19:23 +0000 https://dev.to/arsinshaabani/bry-prmpthm-khmrbnd-ymny-skhtm-promptseal-tst-rgrsywn-bry-phy-llm-4mk0 https://dev.to/arsinshaabani/bry-prmpthm-khmrbnd-ymny-skhtm-promptseal-tst-rgrsywn-bry-phy-llm-4mk0 <ol> <li>مشکل: drift بی‌سروصدا — قصه‌ی خراب‌شدن لحن پشتیبانی با یک کلمه</li> <li>چرا unit test برای خروجی‌های غیرقطعی جواب نمی‌ده</li> <li>حلقه‌ی اصلی: تعریف → seal → تغییر → diff</li> <li>شروع سریع ۵ دقیقه‌ای با provider ماک (بدون API key)</li> <li>ضبط ترافیک واقعی با پراکسی لوکال + حذف خودکار PII</li> <li>ماتریس مدل‌ها: gpt-4o در برابر llama3.1 روی همون سوییت، با محاسبه‌ی هزینه</li> <li>گیت CI با اکشن رسمی گیت‌هاب</li> <li>نقشه‌راه: پلاگین pytest، assertion روی ردپای عامل‌ها، رجیستری سوییت‌ها</li> <li>لینک‌ها: ریپو، اکشن، آموزش فارسی و انگلیسی</li> </ol> automation githubactions llm testing MohammadReza Shabani Tue, 29 Sep 2026 05:18:07 +0000 https://dev.to/arsinshaabani/i-built-a-safety-net-for-prompt-changes-promptseal-regression-testing-for-llm-apps-2mhk https://dev.to/arsinshaabani/i-built-a-safety-net-for-prompt-changes-promptseal-regression-testing-for-llm-apps-2mhk <ol> <li>The problem: silent behavioral drift (story: one-word system prompt change broke refund tone)</li> <li>Why unit tests don't work for non-deterministic outputs</li> <li>The core loop: describe → seal → change → diff (GIF)</li> <li>5-minute quickstart with the mock provider (no API key)</li> <li>Recording real traffic with the local proxy + PII redaction</li> <li>Model matrix: comparing gpt-4o vs llama3.1 on the same suite, cost included</li> <li>CI gate with the official GitHub Action (code sample + PR screenshot)</li> <li>What's next: pytest plugin, agent-trace assertions, suite registry</li> <li>Links: repo, action repo, tutorial (EN + فارسی)</li> </ol> <p>Call to action: star the repo, try the 30-second quickstart, tell us which<br> assertion you'd add.</p> githubactions llm showdev testing