دیجی رودیجی رو
  • اخبار تکنولوژی
    • اخبار داخلی
    • اخبار تلفن همراه
    • اخبار سخت افزار
    • اخبار اپلیکیشن‌ها
  • آموزش
  • بررسی محصولات
  • راهنمای خرید
  • سرگرمی
    • اخبار بازی
    • معرفی بازی
      • بازی موبایل
      • بازی دسکتاپ
      • بازی کنسول
    • معرفی اپلیکیشن
    • سینما و تلویزیون
  • دیجی فکت
  • دیجی لایف
  • دیجی10
  • مقالات گوناگون
خواندن: هک هوش مصنوعی با یک دعوت‌نامه ساده! اولین حمله با پیامدهای فیزیکی واقعی
به اشتراک بگذارید
ورود
اعلان نمایش بیشتر
تغییر اندازه فونتآآ
دیجی رودیجی رو
تغییر اندازه فونتآآ
جستجو
حساب کاربری دارید؟ ورود
دنبال کردن
تمامی حقوق برای رسانه دیجی‌رو محفوظ است. 1403 ©
دیجی رو > اخبار > اخبار هوش مصنوعی > هک هوش مصنوعی با یک دعوت‌نامه ساده! اولین حمله با پیامدهای فیزیکی واقعی
اخبار هوش مصنوعی

هک هوش مصنوعی با یک دعوت‌نامه ساده! اولین حمله با پیامدهای فیزیکی واقعی

حسین محمودزاده 16 مرداد 1404 ساعت 21:26
زمان مطالعه: 6 دقیقه
هک هوش مصنوعی
اشتراک گذاری
بلیط هواپیما سفرمارکت

اوایل سال جاری، گروهی از محققان امنیتی با استفاده از یک روش خلاقانه، موفق به هک هوش مصنوعی «جمینای» (Gemini) شدند و برای اولین بار، پیامدهای این حمله سایبری را به دنیای فیزیکی کشاندند. این محققان که نتایج کار خود را با گوگل به اشتراک گذاشته بودند، از یک دعوت‌نامه آلوده در تقویم گوگل (Google Calendar) استفاده کردند تا دستورالعمل‌هایی پنهانی را به هوش مصنوعی منتقل کنند. هدف نهایی، کنترل محصولات خانه هوشمند در یک آپارتمان بود. این پژوهش نه تنها زنگ خطری جدی برای آینده تعامل ما با هوش مصنوعی بود، بلکه اهمیت حیاتی امنیت هوش مصنوعی را بیش از پیش نمایان ساخت.

این محققان به جای استفاده از دستورات مستقیم، از یک روش هوشمندانه بهره بردند. آن‌ها دستورالعمل‌های مخرب را به گونه‌ای طراحی کردند که در آینده و در زمان مشخصی فعال شوند. زمانی که محققان قصد فعال‌سازی این دستورات را داشتند، از جمینای خواستند تا رویدادهای تقویم هفته آینده را برایشان خلاصه کند. در این لحظه بود که کدهای پنهان در دعوت‌نامه‌ها، فعال شدند و دستورالعمل‌ها را به سیستم هوش مصنوعی منتقل کردند. این دستورات به جمینای اجازه دادند تا کنترل محصولات خانه هوشمند را در دست بگیرد و به این ترتیب، یک حمله نرم‌افزاری به پیامدهای فیزیکی واقعی منجر شد. محققان معتقدند که این حمله، احتمالاً اولین باری است که یک سیستم هوش مصنوعی مولد (Generative AI) هک شده، نتایجی ملموس و فیزیکی در دنیای واقعی به دنبال داشته است.

تزریق پرامپت غیرمستقیم، خطری پنهان در کمین هوش مصنوعی

این حمله بخشی از یک پروژه تحقیقاتی بزرگ‌تر و جامع‌تر با 14 بخش بود که به منظور آزمایش حملات «تزریق پرامپت غیرمستقیم» (Indirect Prompt Injection) علیه جمینای طراحی شده بود. تزریق پرامپت به معنی فریب دادن یک مدل زبان بزرگ (LLM) برای انجام کارهایی است که برای آن طراحی نشده است. در حالت عادی، این حملات با وارد کردن دستورات مخرب به صورت مستقیم در چت‌باکس انجام می‌شوند. اما در این مورد، محققان با تزریق دستورات از طریق یک منبع خارجی (دعوت‌نامه تقویم) و نه از طریق ورودی مستقیم کاربر، موفق به انجام این حمله شدند. عنوان این پروژه «دعوت‌نامه تنها چیزی است که نیاز دارید» (Invitation Is All You Need) بود که به خوبی ماهیت این نوع حمله را نشان می‌دهد. نتایج کامل این پژوهش به صورت آنلاین و رایگان در دسترس عموم قرار گرفته است.

هک هوش مصنوعی

مفهوم تزریق غیرمستقیم پرامپت به این معناست که مهاجم می‌تواند از طریق داده‌های خارجی که هوش مصنوعی آن‌ها را پردازش می‌کند، دستورات مخفیانه خود را به مدل تزریق کند. به عنوان مثال، یک هوش مصنوعی ممکن است برای خلاصه‌نویسی یک وب‌سایت یا ایمیل طراحی شده باشد. اگر آن وب‌سایت یا ایمیل حاوی دستورالعمل‌های پنهان باشد، هوش مصنوعی ممکن است ناخواسته آن‌ها را به عنوان بخشی از وظیفه خود اجرا کند. این آسیب‌پذیری به این دلیل خطرناک است که برخلاف حملات مستقیم، کاربر از وجود دستورالعمل‌های مخرب در داده‌های خارجی بی‌خبر است و هوش مصنوعی نیز بدون آگاهی از ماهیت مخرب آن‌ها، به اجرایشان می‌پردازد. این موضوع اهمیت بررسی و تأمین امنیت هوش مصنوعی را در برابر منابع داده خارجی دوچندان می‌کند.

همکاری محققان و گوگل؛ گامی به سوی امنیت بیشتر

نماینده‌ای از گوگل در گفتگو با نشریه Wired اعلام کرد که این پروژه تحقیقاتی و یافته‌های محققان به گوگل کمک کرده تا تلاش‌های خود برای مقابله با حملات تزریق پرامپت را تسریع بخشد. این همکاری مستقیم، منجر به بهبود و تسریع در ارائه سیستم‌های دفاعی گوگل در برابر این نوع حملات شده است. این موضوع از این نظر اهمیت دارد که خطرات هوش مصنوعی را به صورت واضح نشان می‌دهد، به ویژه با توجه به اینکه استفاده از این فناوری روز به روز گسترده‌تر می‌شود. همان‌طور که ابزارهای هوش مصنوعی بیشتری به بازار عرضه می‌شوند، تزریق غیرمستقیم پرامپت به یک مسئله شایع‌تر تبدیل خواهد شد. بنابراین، شناسایی و برجسته کردن هر چه سریع‌تر مشکلات پیرامون این حملات، برای توسعه تدابیر امنیتی مؤثر در جهت محافظت از سیستم‌های هوش مصنوعی، کاملاً ضروری است.

در طول سال‌های اخیر، ما شاهد روش‌های جالب و متفاوتی بوده‌ایم که محققان برای به چالش کشیدن و آسیب‌پذیر کردن هوش مصنوعی به کار گرفته‌اند. از تلاش برای القای احساس درد به یک هوش مصنوعی گرفته تا استفاده از یک هوش مصنوعی برای هک کردن هوش مصنوعی دیگر! محققان اقدامات بسیار گسترده‌ای را انجام داده‌اند تا دقیقاً متوجه شوند که هوش مصنوعی تا چه حد می‌تواند آسیب‌پذیر باشد. با توجه به اینکه افراد سرشناس بسیاری به طور فزاینده‌ای درباره خطراتی که هوش مصنوعی برای بشریت ایجاد می‌کند ابراز نگرانی می‌کنند، داشتن تصویری واضح‌تر از اینکه چه اقداماتی برای سوء استفاده از این سیستم‌ها می‌توان انجام داد، کلیدی است برای توسعه اقدامات امنیتی کارآمد. این پژوهش نشان داد که در حالی که هوش مصنوعی می‌تواند ابزار قدرتمندی باشد، آسیب‌پذیری‌های آن نیز می‌توانند نتایج قابل توجهی در دنیای واقعی داشته باشند و اهمیت امنیت هوش مصنوعی در عصر کنونی غیرقابل انکار است.

اخبار تکنولوژی
بلیط اتوبوس
تاکسی بین شهری
برچسب ها: هوش مصنوعی
منابع: bgr
این مقاله را به اشتراک بگذارید
توییتر Whatsapp Whatsapp تلگرام ایمیل کپی کرده لینک پرینت
چه حسی به این مطلب داری؟
Sad0
Sleepy0
Love0
Happy0
Angry0
Cry0
Surprise0
مقاله قبلی بازی کنسولی فقط روی کامپیوتر این 10 بازی کنسولی را فقط روی کامپیوتر تجربه کنید تا لذت واقعی را ببرید!
نظر بدهید نظر بدهید

نظر بدهید لغو پاسخ

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

لطفا یک امتیاز انتخاب کنید!

تبلیغات

موبوگیفت
  • خرید ممبر ایتا
  • خرید فالوور ایرانی
  • خرید فالوور ارزان
  • خرید ممبر تلگرام
  • پنجره دوجداره
  • خرید ساعت گارمین
  • دستگاه جوجه کشی دماوند
  • شناسایی صرافی های جعلی
  • رمزارز وان اینچ چیست
  • اخبار بازار ارز دیجیتال
  • ربات های معاملاتی ارز دیجیتال
  • تون کوین در برابر نات کوین
  • دوربین کوچک سیم کارت خور
  • خرید بیت کوین
  • لوستر مدرن
  • تور روسیه
  • چاپ لیبل
  • خرید لایک
  • خرید سرور hp ماهان شبکه اچ پی
  • از اینجا فالوور ایرانی بخر

آخرین خبرها

بازی کنسولی فقط روی کامپیوتر

این 10 بازی کنسولی را فقط روی کامپیوتر تجربه کنید تا لذت واقعی را ببرید!

بهترین دوربین گوشی شیائومی کدام مدل است؟

کدام گوشی شیائومی برای عکاسی حرفه‌ای مناسب‌تر است؟

پورت USB قرمز

پورت USB قرمز چیست و چه تفاوتی با سایر رنگ‌ها دارد؟

مطالب مرتبط

آینده ویندوز
اخبار سیستم عاملاخبار هوش مصنوعیمایکروسافت

چشم‌انداز مایکروسافت برای آینده ویندوز: هوش مصنوعی و خداحافظی با ماوس و کیبورد!

15 مرداد 1404 ساعت 09:55
هوش مصنوعی گوگل
اخبار اینترنت و شبکهاخبار هوش مصنوعیگوگل

قدرت هوش مصنوعی گوگل بیشتر شد؛ پشتیبانی از پرسش درباره فایل‌ها و تصاویر

8 مرداد 1404 ساعت 20:11
هوش مصنوعی موبایل سامسونگ
اخبار تلفن همراهاخبار هوش مصنوعیسامسونگ

تحول در هوش مصنوعی موبایل؛ سامسونگ به دنبال گزینه‌ای فراتر از جمینای گوگل!

5 مرداد 1404 ساعت 18:40
جمینای ورک‌اسپیس
اخبار هوش مصنوعی

جمینای ورک‌اسپیس؛ چگونه هوش مصنوعی گوگل بهره‌وری شما را متحول می‌کند؟

1 مرداد 1404 ساعت 13:15

درباره دیجی‌رو

رسانه دیجی‌رو با شعار دنیای تکنولوژی در اوایل سال 94 تاسیس شد. ماموریت ما اطلاع رسانی صحیح و ارائه آخرین اخبار تکنولوژی، بررسی محصولات دیجیتال، راهنمای خرید کالاهای دیجیتال و همچنین تهیه به‌روزترین مطالب آموزشی و مقالات در حوزه تکنولوژی، علم و سبک زندگی است. گروه دیجی‌رو همه‌ی تلاش خود را به کار خواهد گرفت که روزبه‌روز بر کیفیت و خدمات این رسانه بیفزاید تا دیجی رو به عنوان رسانه‌ای معتبر بدرخشد.

logo-samandehi
دنبال کردن
تمامی حقوق برای رسانه دیجی‌رو محفوظ است. 1403 ©
خوش آمدید

ورود به حساب کاربری

فراموش رمز عبور