آیا هوش مصنوعی می‌تونه جون آدم‌ها رو به دلیل اطلاعات غلط پزشکی خطر بندازه؟

آیلین سرهنگی
11 تیر 1404
105
0

توی دورانی که همه چیز داره به‌سمت هوش مصنوعی می‌ره، یه تحقیق جدید از استرالیا نشون داده که چت‌بات‌های معروف AI خیلی راحت می‌تونن اطلاعات اشتباه پزشکی بدن — اونم نه یه اشتباه کوچیک، بلکه با لحن کاملاً قانع‌کننده و حتی ارجاع جعلی به مقالات علمی معتبر!

یعنی ممکنه از یه چت‌بات بپرسی «درمان فلان بیماری چیه؟» و اون با کلی اعتمادبه‌نفس یه جواب اشتباه بده و بگه این اطلاعات از یه ژورنال معروف مثل The Lancet یا NEJM اومده — در حالی که اصلاً چنین مقاله‌ای وجود نداره!

طبق گفته‌ی محققای منتشرکننده این تحقیق توی ژورنال Annals of Internal Medicine، این وضعیت یه خطر جدی برای سلامت عمومیه. چون:

  1. مردم معمولی ممکنه فکر کنن جواب چت‌بات‌ها دقیق و قابل اعتماده
  2. پزشک‌ها و پرستارها هم شاید به‌اشتباه از این مدل‌ها برای مشورت استفاده کنن
  3. افراد سودجو می‌تونن از این ابزارها برای پخش عمدی اطلاعات غلط استفاده کنن (مثلاً برای فروش داروهای جعلی یا تبلیغ درمان‌های بی‌پایه)

یکی از نویسنده‌های این مقاله می‌گه:

«وقتی یه تکنولوژی در برابر سوءاستفاده آسیب‌پذیره، افراد سودجو دیر یا زود ازش استفاده می‌کنن — چه برای سود مالی، چه برای آسیب رسوندن به مردم.»
چرا چت‌بات‌ها این کارو می‌کنن؟

دلیلش ساده‌ست: چت‌بات‌ها مثل انسان نمی‌فهمن واقعیت چیه. اونا فقط بر اساس الگوهای زبانی آموزش دیدن. وقتی ازشون سؤال می‌پرسی، سعی می‌کنن یه جواب به‌ظاهر درست بسازن — حتی اگه اطلاعاتش ساختگی باشه. این اتفاق بهش می‌گن hallucination یا توهم.

حالا اگه موضوع سوال حساس باشه، مثل سلامت و پزشکی، همین «توهم» می‌تونه خیلی خطرناک بشه.

این مطالعه پیشنهاد می‌ده که باید محدودیت‌ها و فیلترهای داخلی قوی‌تری برای چت‌بات‌های هوش مصنوعی گذاشته بشه، مخصوصاً زمانی که قراره به سوالات مرتبط با سلامت پاسخ بدن.

همچنین لازمه که کاربرا بدونن AI جایگزین پزشک نیست و هرگز نباید بدون مشورت حرفه‌ای، به اطلاعات سلامتی داده‌شده توسط AI اعتماد کرد.



#هوش_مصنوعی #چت_بات #اطلاعات_پزشکی #اطلاعات_غلط #سلامت_دیجیتال #آینده_پزشکی #اخبار_علمی


#AI #Chatbot #HealthMisinformation #MedicalAI #FakeCitations #AIhallucination #DigitalHealth #AIethics

آیلین سرهنگی

آیلین سرهنگی

متخصص حوزه فناوری با تمرکز بر هوش مصنوعی، یادگیری ماشین و زیرساخت‌های نرم‌افزاری، در تیم فنی یک شرکت فعال در زمینه فناوری‌های نوین فعالیت می‌کنم و تلاش دارم تا با تولید محتوای دقیق، کاربردی و به‌روز، مفاهیم پیچیده‌ی تکنولوژی را به زبان ساده برای همه ارائه کنم.
پیشنهاد میشود بخوانید
هزینه اجرای مدل‌های هوش مصنوعی چرا ناگهان انفجاری شد؟ نقش پنهان DRAM و بازی جدید حافظه در AI
29 بهمن 1404
0
0
هزینه اجرای مدل‌های هوش مصنوعی چرا ناگهان انفجاری شد؟ نقش پنهان DRAM و بازی جدید حافظه در AI
آیلین سرهنگی
وقتی صحبت از هزینه‌های زیرساخت هوش مصنوعی می‌شود، همه ذهن‌ها سریع می‌رود سمت GPU و نام‌هایی مثل انویدیا. اما واقعیت این ...

هوش مصنوعی

مهندسان سابق SpaceX با جذب ۵۰ میلیون دلار، بازار دیتاسنترهای AI را هدف گرفتند؛ Mesh Optical چه برنامه‌ای دارد؟
29 بهمن 1404
0
0
مهندسان سابق SpaceX با جذب ۵۰ میلیون دلار، بازار دیتاسنترهای AI را هدف گرفتند؛ Mesh Optical چه برنامه‌ای دارد؟
آیلین سرهنگی
سه مهندس سابق SpaceX که روی لینک‌های ارتباط نوری ماهواره‌های Starlink کار می‌کردند، حالا با یک استارتاپ جدید وارد میدان ...

هوش مصنوعی

خرید Koyeb توسط Mistral AI؛ شروع جاه‌طلبی بزرگ برای ساخت ابر هوش مصنوعی اروپایی؟
29 بهمن 1404
1
0
خرید Koyeb توسط Mistral AI؛ شروع جاه‌طلبی بزرگ برای ساخت ابر هوش مصنوعی اروپایی؟
آیلین سرهنگی
در حالی که رقابت جهانی در حوزه زیرساخت هوش مصنوعی داغ‌تر از همیشه شده، شرکت فرانسوی Mistral AI اولین خرید رسمی خود را ان...

هوش مصنوعی

سه گجت پوشیدنی هوش مصنوعی اپل در راه است؛ عینک AI، ایرپاد هوشمند و پین مرموز چه زمانی عرضه می‌شوند؟
29 بهمن 1404
0
0
سه گجت پوشیدنی هوش مصنوعی اپل در راه است؛ عینک AI، ایرپاد هوشمند و پین مرموز چه زمانی عرضه می‌شوند؟
آیلین سرهنگی
به نظر می‌رسد Apple نمی‌خواهد از موج گجت‌های پوشیدنی مبتنی بر هوش مصنوعی عقب بماند. طبق گزارش‌های جدید، این شرکت در حال ...

هوش مصنوعی

یک پیام بگذارید
نام و نام خانوادگی
آدرس ایمیل
متن نظر

به کمک نیاز دارید؟ با ما تماس بگیرید

کرج عظیمیه طالقانی شمالی کوچه شهید مسعود شجاعی (رز) برج قائم 2 واحد 1

02632558409

09124287589

afrino.co@gmail.com

ما را دنبال کنید
logo-samandehi

تمامی حقوق این سایت محفوظ و متعلق به شرکت "توسعه دانش رایا آفرینش" است.

An error has occurred. This application may no longer respond until reloaded. Reload 🗙