انجمن توسعه علوم آمریکا (AAAS) تصمیم گرفته است تا بررسی کند که آیا Tatgpt می تواند یادداشت های علمی کوتاه را به سبک Scipak بنویسد یا چنین بریج ویژه ای برای روزنامه نگاران ، که اغلب توسط مجله علوم و خدمات Eurekalent تهیه شده است.
این آزمایش یک سال به طول انجامید: از دسامبر 2023 تا دسامبر 2024 ، روزنامه نگاران هر هفته یک مدل یا دو مطالعه علمی دشوار را راه اندازی کرده اند.
این مأموریت بسیار ساده است که آنها را آزاد می کند تا آن را برای همکاران راحت کند: حداقل شرایط ، ساختار واضح و زمینه روشن. بنابراین ، Chatgpt 64 اثر را اداره کرده است.
نتیجه؟ به طور کلی ، این مدل یاد گرفته است که چگونه می توان اشکال تمبرهای Scipak را کپی کرد ، اما به محتوا نرسید. به گفته نویسنده این مطالعه ، روزنامه نگار AAAS ABIGAIL AIZENSTADT ، اسناد Tatgpt بسیار ساده و اغلب نادرست است. مجبور شدم همه چیز را دو بار بررسی کنم ، بنابراین نوشتن یادداشت از ابتدا زمان بیشتری طول کشید.
اعداد همچنین به خودشان می گویند. هنگامی که از ویراستاران خواسته می شود ، چنین تقویمی ممکن است در میان برآمدگی های واقعی Scipak از بین برود ، میانگین رتبه فقط 2.26 امتیاز در شماره 5 است. و تنها یک کار در کل سال بالاترین امتیاز را از روزنامه نگاران دریافت می کند.
به طور معمول ، روابط و روابط علّی Chatgpt ، فراموش کردن محدودیت های مهم برای تحقیق (به عنوان مثال ، دستگاه های انتقال نرم بسیار آهسته عمل می کنند) و گاهی اوقات برای ستایش از پیشرفت های اسلام و تازگی ، بیش از حد پراکنده می شوند.
نویسندگان این آزمایش خلاصه کرده اند: تاکنون ، چتپپ از استانداردهای SCIPAK پیروی نکرده است. اما آنها کاملاً صلیب را در این ایده قرار ندادند. AAAS توجه داشته باشید که اگر مدل به طور جدی به روز شود ، می توانید به تست ها برگردید. و در ماه آگوست ، ما یادآوری کردیم ، فقط GPT-5 که متأسفانه سوراخ پیدا کرد.