صلاحیت حرفه‌ای پرستاران یکی از عوامل کلیدی در تضمین کیفیت مراقبت‌های بهداشتی و ایمنی بیماران است. آزمون‌های قضاوت موقعیتی (SJT) ابزاری معتبر برای ارزیابی ویژگی‌های غیرآکادمیک و رفتارهای حرفه‌ای محسوب می‌شوند، اما طراحی سنتی آن‌ها زمان‌بر و پرهزینه است. ظهور مدل‌های زبانی بزرگ مانند GPT-4 امکان تولید سریع سناریوهای واقع‌گرایانه را فراهم می‌کند. این پژوهش با هدف طراحی و اعتباریابی آزمون قضاوت موقعیتی صلاحیت‌های حرفه‌ای پرستاران با استفاده ازGPT-4 انجام شد. پژوهش حاضر با رویکرد کیفی اجرا شد. 13 خبره پرستاری با روش نمونه‌گیری هدفمند انتخاب و از طریق مصاحبه نیمه‌ساختاریافته، 11 موقعیت حساس شناسایی گردید. این موقعیت‌ها به GPT-4 ارائه شد و سناریوها و گزینه‌های پاسخ تولید گردید. سناریوها از نظر روایی صوری و محتوایی توسط 13 خبره مستقل بررسی و شاخص‌های CVR و CVI محاسبه شد. در نسخه اولیه 13 سناریو و 52 گزینه پاسخ طراحی شد که پس از بازبینی، 2 سناریو و 8 آیتم حذف گردید. نسخه نهایی شامل 11 سناریو و 44 گزینه پاسخ بود. شاخص‌های CVR≥0.54 وCVI≥0.78 تأیید شدند. GPT-4 توانست سناریوها و گزینه‌های پاسخ واقع‌گرایانه و معتبر برای طراحی آزمون قضاوت موقعیتی تولید کند. آزمون نهایی از ویژگی‌های روان‌سنجی مناسب برخوردار است و می‌تواند به‌عنوان ابزاری نوین در ارزیابی صلاحیت حرفه‌ای پرستاران به کار گرفته شود. این رویکرد نوآورانه مسیر تازه‌ای برای بهره‌گیری از هوش مصنوعی در توسعه ابزارهای روان‌سنجی در حوزه سلامت و منابع انسانی فراهم می‌آورد.