پس‌زمینه و هدف: فرآیندهای سنتی استخدام با چالش‌هایی نظیر سوگیری‌های انسانی و عدم دقت مواجه‌اند. این پژوهش با هدف افزایش دقت و عدالت در گزینش، یک سامانه هوشمند چندوجهی را معرفی می‌کند که شخصیت متقاضیان را با تحلیل همزمان سیگنال‌های کلامی و غیرکلامی بر اساس مدل روان‌شناختی شش‌عاملی ارزیابی می‌کند.
روش‌شناسی: این سامانه با معماری چندمرحله‌ای، ابتدا با استفاده از مدل‌های پیشرفتۀ تبدیل گفتار به متن، محتوای کلامی را تحلیل می‌کند. همزمان، با بهره‌گیری از کتابخانه‌های تحلیل چهره و سیستم کدگذاری کنش‌های چهره، حالات و حرکات صورت را استخراج می‌نماید. در نهایت، یک مدل یادگیری عمیق با سازوکار توجه متقابل، این دو وجه اطلاعات را برای پیش‌بینی صفات شخصیتی ترکیب می‌کند.
یافته‌ها: ارزیابی‌ها نشان داد که مدل چندوجهی به طور قابل توجهی دقیق‌تر از مدل‌های تک‌وجهی عمل می‌کند. اعتبار سیستم از طریق مقایسه نتایج با ارزیابی روان‌شناسان متخصص تأیید شد. همچنین یک داشبورد تحلیلی قابل تفسیر برای ارائه شواهد (نقل‌قول‌ها و کلیپ‌ها) به مدیران منابع انسانی طراحی گردید.
نتیجه‌گیری: این پژوهش یک چارچوب نوآورانه، دقیق و مبتنی بر شواهد برای تحلیل روان‌شناختی در فرآیند استخدام ارائه می‌دهد. این سیستم با تکیه بر مدل روان‌شناختی شش‌عاملی و معماری چندوجهی، پتانسیل تحول در فرآیندهای سنتی گزینش به سمت رویه‌هایی عادلانه‌تر، عینی‌تر و کارآمدتر را دارد.