یک مطالعه: ابزارهای کدنویسی هوش مصنوعی سرعت هر توسعه‌دهنده‌ای را بالا نمی‌برند

گزارش تازه‌ای از مؤسسه‌ی غیرانتفاعی METR تردیدهایی درباره‌ی تأثیر واقعی ابزارهای هوش مصنوعی بر بهره‌وری برنامه‌نویسان حرفه‌ای مطرح می‌کند.

گزارش METR نتیجه‌ی یک مطالعه‌ی تصادفی کنترل‌شده است که در آن ۱۶ توسعه‌دهنده‌ی باتجربه‌ی متن‌باز، ۲۴۶ وظیفه‌ی واقعی را روی مخازن کد بزرگ انجام دادند؛ نیمی از این وظایف با اجازه‌ی استفاده از ابزارهایی مانند Cursor Pro انجام شد و نیمی دیگر بدون کمک هوش مصنوعی.

پیش از انجام وظایف، شرکت‌کنندگان پیش‌بینی کرده بودند که استفاده از AI زمان انجام کارها را ۲۴ درصد کاهش می‌دهد؛ اما نتایج برعکس بود: استفاده از ابزارهای هوش مصنوعی باعث افزایش ۱۹ درصدی در زمان انجام وظایف شد.

تنها ۵۶ درصد از برنامه‌نویسان تجربه‌ی قبلی با Cursor داشتند؛ هرچند تقریباً همه‌ی آن‌ها از هوش مصنوعی استفاده کرده بودند. محققان می‌گویند علت کندی ممکن است صرف وقت برای نوشتن پرامپت و انتظار برای پاسخ یا عملکرد ضعیف مدل‌ها در پروژه‌های پیچیده و بزرگ باشد.

نویسندگان مطالعه تأکید می‌کنند که این یافته‌ها بدین معنا نیست که ابزارهای هوش مصنوعی در کل مفید نیستند. آن‌ها یادآور می‌شوند که عملکرد این مدل‌ها در ماه‌های اخیر پیشرفت قابل‌توجهی داشته و ممکن است حتی سه ماه بعد نتایج متفاوتی به دست بیاید.