علم و فناوری
در بازاری که هر شرکت سازنده مدل، نتایج دلخواه خود را اعلام می‌کند، تنها راه مقایسه صادقانه میان مدل‌های هوش مصنوعی تکیه بر مجموعه‌ای استاندارد از آزمون‌ها، داده‌ها و معیارهای مشترک است که به آن بنچمارک گفته می‌شود. یک بنچمارک واحد هرگز تصویر کاملی از توانایی یک مدل ارائه نمی‌دهد؛ چراکه هوش مصنوعی مجموعه‌ای از مهارت‌های تخصصی است و مدلی که در یک حوزه می‌درخشد؛ ممکن است در حوزه‌ای دیگر ضعیف عمل کند. پس در دنیای هوش مصنوعی برای اینکه بتوانیم درست عمل کنیم باید از یک متخصص کمک بگیریم تا درک بهتری نسبت به هوش مصنوعی و توانایی‌های آن داشته باشیم؛ به همین منظور و برای بررسی دقیق‌تر این موضوع و پاسخ به این سوال به سراغ حامد قادری، طراح سیستم‌های هوشمند و مهندس هوش مصنوعی رفته‌ایم تا با ایشان به گفتگو بنشینیم. در ادامه با صبح ساحل همراه باشید.
آیا نمره بالا در بنچمارک لزوماً به معنای عملکرد خوب در کاربردهای واقعی است؟ شکاف بین عملکرد آزمایشگاهی و میدانی (مثل مسائل امنیتی، سوگیری، یا داده های دیده نشده) را چگونه ارزیابی میکنید؟
همانطور که خدمت شما عرض کردم، نمره بالا در بنچمارک لزوما به معنای عملکرد خوب در دنیای واقعی نیست. در سناریوهای واقعی، مخصوصا در حوزه ترید و اقتصاد، با شرایطی مواجه می‌شویم که در آزمایشگاهوجود ندارد. مانند داده‌های نویزی و ناقص، تغییرات ناگهانی بازار، اخبار جعلی، سوگیری‌ها در کاربری، و مسائل امنیتی در دسترسی و مشابه این موارد. این شکاف بین تجربه آزمایشگاه و دنیای واقعی را می‌توان از چند روش ارزیابی و اصلاح کرد. به عنوان مثال، می‌توانیم آزمایش‌های واقعی و شبیه‌سازی شده در شرایط واقعی بازار طراحی و اجرا کنیم و نتایج را مورد بررسی قرار دهیم. مثلا پروژه nof1.ai سال گذشته دقیقا با همین هدف اجرا شد و به هر کدام از بهترین مدل‌های موجود، ۱۰ هزار دلار سرمایه داده شد تا با آن در بازار واقعی ترید کنند. نتیجه خیره کننده بود؛ تنها یک مدل توانست حدود ۳ هزار دلار سود ایجاد کند، ۴ مدل توانستند سرمایه اصلی را بدون سود قابل توجه حفظ کنند و ما بقی مدل‌ها ضررهای سنگینی به بار آوردند. در حوزه اقتصاد و ترید، این موضوع حساسیت بیشتری دارد. مثلا مدلی که در بنچمارک نمره بالاتری دارد، ممکن است در مواجهه با نواسانات شدید یا اخبار ناگهانی و غیرمنتظره، دچار خطای جبران ناپذیر شود. به همین دلیل همواره تاکید می‌کنیم که هوش مصنوعی تنها باید به عنوان یک دستیار به کار گرفته شود، جایگزین کامل برای قدرت تحلیل و قضاوت انسانی. بهترین نتایج زمانی حاصل می‌شود که مدل‌های قوی در کنار تخصص و نظارت انسان قرار گیرند.
روزنامه صبح ساحل
به این مطلب امتیاز دهید:
نظرسنجی
جدیدترین اخبار
نشت گازوئیل در «ایسین»؛ از هجوم مردم تا اقدام تلافی‌جویانه برای جلوگیری از فاجعه
تقدیر مدیرعامل سازمان بنادر و دریانوردی از مدیرعامل شرکت توسعه خدمات دریایی و بندری سینا در همایش ارگان‌های دریایی
فعالیت ۷۰ آزمایشگاه همکار استاندارد در هرمزگان/ بررسی نزدیک به ۸ هزار پرونده کالای وارداتی
تسهیل خدمات راهور در هرمزگان
انتخاب امین ابراهیمی به عنوان جوان برتر فرهنگی هرمزگان
شهادت یکی از کارکنان نیروی انتظامی در لخشک
حمایت مردمی از پویش مهرسان برای کمک به دانش‌آموزان رودانی
نشست تخصصی هیئت جودو محور طرح ملی تکاپو
آینده هرمزگان با انگیزه و توان جوانان تغییر می‌کند
بازدید معاون حقوق بشر از مرکز شوق زندگی بندرعباس
صدای انفجار در این شهرستان ناشی از امحای مهمات عمل‌نکرده است
نخستین پرواز شرکت هواپیمایی خارجی به کشور بازگشت
انهدام مهمات عمل نکرده دشمن در بندرعباس
مهندسان جوان استان سوگند حرفه‌ای یاد کردند
امروز؛ آخرین مهلت انتخاب رشته کنکور ۱۴۰۵
سلام، من دستیار هوشمند گروه رسانه ای صبح ساحل هستم
از خبر، عکس، ویدئو، PDF روزنامه، هواشناسی، اوقات شرعی، تقویم و ساعت سایت بپرسید. گفتگو روی همین دستگاه ذخیره می‌شود.
