جستجو برای:
  • خانه
  • دوره ها
  • مجله آنلاین
  • پژوهش های کنفرانسی
  • مدرسان
  • همکاری با ما
    • فرصت های شغلی
    • تدریس در مدرسه
    • منتور مدرسه شوید
  • درباره ما
  • تماس با ما
    • شبکه های اجتماعی
  • مشاوره خصوصی
 
  • ارتباط فقط از طریق واتساپ با شماره 09122565243
  • t.me/bigdataschool
پلتفرم آموزش آنلاین هوش مصنوعی
دسته بندی‌ دوره‌ها
  • خانه
  • دوره ها
  • مجله آنلاین
  • پژوهش های کنفرانسی
  • مدرسان
  • همکاری با ما
    • فرصت های شغلی
    • تدریس در مدرسه
    • منتور مدرسه شوید
  • درباره ما
  • تماس با ما
    • شبکه های اجتماعی
  • مشاوره خصوصی
0

ورود و ثبت نام

  • خانه
  • دوره ها
  • مجله آنلاین
  • پژوهش های کنفرانسی
  • مدرسان
  • همکاری با ما
    • فرصت های شغلی
    • تدریس در مدرسه
    • منتور مدرسه شوید
  • درباره ما
  • تماس با ما
    • شبکه های اجتماعی
  • مشاوره خصوصی

کارگاه پروژه محور پردازش زبان طبیعی با استفاده از Transformer ها

خانهکارگاه های آموزشی آنلاینپردازش زبان طبیعیکارگاه پروژه محور پردازش زبان طبیعی با استفاده از Transformer ها
حالت مطالعه

توجه: فقط بخشی عملیاتی و کدنویسی کارگاه ضبط شده است و فیلمی از بخش تئوری در دسترس نیست.

کارگاه پروژه محور رویکرد جدید Transformer ها در پردازش زبان طبیعی

  • ترنسفورمرها: BERT, GPT (در فارسی و انگلیسی)

بخش عملی و کد نویسی:

  • آشنایی با Hugging Face
  • آشنایی با چارچوب یادگیری عمیق PyTorch، کار با مدل ها و فرآیند آموزش آنها
  • آموزش و بهینه سازی یک ترنسفورمرمُدل

 

آشنایی با ماهیت دوره

آشنایی با BERT

BERT معادل واژه «نمایش رمزگذاری دوطرفه از ترانسفورمرها» است. BERT معماری شبکه عمیق است، BERT یک مدل پردازش زبان طبیعی بدون نظارت است که از قبل آموزش داده شده است. این الگوریتم می تواند 11 مورد از موارد متداول NLP را پس از تنظیم صحیح به طور دقیق پیاده سازی کند و به یک تقویت کننده برای پردازش و درک طبیعی زبان تبدیل شود. BERT عمیقاً و دقیقاً دو جهته است، این به آن معنی است که کلمات قبل و بعد از کلمات به درستی بررسی شده و با اطلاعات مندرج در ویکی پدیا تطبیق داده می شود، تا الگوریتم بتواند درک صحیحی از مفهوم آنچه کاربر در پی آن است بدست آورد.

Bert نوعی هوش مصنوعی است. گوگل برای گسترش و بهبود عملکرد الگوریتم این هوش از متون ویکی پدیا و هزینه های قابل توجه برای افزایش قدرت محاسباتی استفاده کرده است. آنها در این راه از یک شبکه عصبی تحت نظارت استفاده کردند تا هوش مصنوعی با استفاده از تمام متون ویکی پدیا آموزش ببیند و زبان و متن را بهتر درک کند. یکی از بزرگترین مزیت های برت آن است که می تواند جملاتی با طول های مختلف و حتی جملات بسیار طولانی را درک کند و پس از آن، برای همیشه به خاطر بسپارد. الگوریتم Bert برای باهوش تر و کامل تر شدن از تکنیکی به نام masking استفاده می کند.

آشنایی با Transformer

حالا تمامی اطلاعات و دانش مورد نیاز برای توصیف و درک ترانسفورماتوها را در اختیار داریم. ترانسفورمر جز سازنده BERT است. ترانسفورمر یک توپولوژی شبکه است که با استفاده از شبکه‌های کاملاً متصل مبتنی بر توجه رمزگذار و رمزگشا را پیاده‌سازی و اجرا می‌کند. ورودی‌ها تعبیه کلمات به همراه  رمزگذاری مکانی است. ترانسفورمر با بهره‌گیری از خودتوجه تمامی کلمات را با در نظر گرفتن سایر کلمات حاضر در دنباله رمزگذاری می‌کند. در مرحله بعد، ترانسفورمر از طریق نرمال‌سازی لایه ورودی‌ها در سرتاسر ویژگی‌ها نرمال‌سازی می‌کند ( توجه داشته باشید که کلمات به فضای برداری چندبعدی  نگاشت شده‌اند). در رمزگشا ورودی را با استفاده از یک کلمه تغییر می‌دهیم، در نتیجه می‌توانیم ترانسفورمر را آموزش دهیم که چگونه می‌تواند کلمه بعدی در جمله را پیش‌بینی کند. برای پیش‌بینی کلمه، ورودی رمزگشا باید پنهان شود ( در نتیجه کلماتی که باید پیش‌بینی‌ کند را نمی‌بیند)، پس رمزگشا از یک خودتوجه پوشیده برای ورودی‌های خود استفاده می‌کند.

توجه رمزگذار و رمزگشا پیش از فرایند پیش‌بینی، اطلاعات بافت را ترکیب می‌کند. در آخر، رمزگشا یک لایه نرمال‌سازی دیگر خواهد داشت و خروجی‌ها نرمال‌سازی می‌شوند و در نتیجه نرمال‌سازی خروجی‌ها چندین ترانسفورمر می‌توانند با یکدیگر پشته شوند. اگر درک این مبحث برای‌‎تان دشوار بود، جای نگرانی نیست. تنها چیزی که لازم است بدانید این است که ترانسفورمرها جز سازنده شبکه‌های مدرن NLU هستند چرا که تمامی مزایا و نکات مثبت سه توپولوژی شبکه را با یکدیگر در خود جمع کرده‌اند. ترانسفورمرهای مبتنی بر شبکه توانمند اما هزینه‌بر هستند؛ این شبکه‌ها معمولاً فضای زیادی از حافظه را اشغال می‌کنند و توان محاسباتی زیادی برای آموزش و هم‌چنین استنتاج استفاده می‌کنند.

آشنایی با PyTorch

پای تورچ کتابخانه می باشد که ماشین یادگیری پایتون می باشد که برای torch کاربرد دارد. پای تورچ محاسبه عملی در حساس پایتون که پردازش پردازنده های گرافیکی بهره مند می شود این کتابخانه دارای ماه های مختلف و جامع برای یادگیری عمیق به کار می رود که سرعت بالا داشته و انعطاف پذیر می باشد. این کتابخانه دارای دو قابلیت منحصر به فرد دارند که شامل ساخته یک سری شبکه‌های عصبی عمیق که در سیستم اتو گرید می باشد قابلیت بعدی محاسبات تانسور برای استفاده از توان شتاب پردازنده های گرافیکی می باشد. کتابخانه های زیادی وجود دارد که کار با یادگیری و هوش مصنوعی را یاد می دهد با آن ها کار میکنه یکی از کتابخانه هایی که توانسته است به سرعت پیشرفت کرده مدل های شبکه عصبی را تولید نماید به همچنین ساختار اصلی تانسور را فراهم کرده است که کتابخانه پای تورچ همچنان در حال پیشرفت و سبقت از دیگر رقبای خود می باشد.

مدرس کارگاه

دانشمند داده و مهندس NLP در دیجی کالا

کارشناسی مهندسی کامپیوتر، دانشگاه صنعتی شریف تهران

کارشناسی ارشد مهندسی کامپیوتر، دانشگاه شهید بهشتی تهران

سطح این کارگاه در چه حدی می باشد؟

سطح این کارگاه پیشرفته می باشد و مناسب برای افرادی است که دوره پردازش زبان طبیعی مبتنی بر یادگیری عمیق در مدرسه بیگ دیتا را گذرانده باشند.

با شرکت در این کارگاه چه مسائلی را میتوانیم حل کنیم؟

با شرکت در این کارگاه می توانید مسائل متنوع پردازش زبان طبیعی بر بستر الگوریتم های یادگیری عمیق را با استفاده از راهکارهایی نظیر BERT, GPT, Transformers را با استفاده از چارچوب قدرتمند PyTorch حل کنید.

آیا کارگاه مدنظر فقط به صورت تئوری است؟

خیر. کارگاه ضبط شده می باشد و کاملا به صورت عملیاتی و پیاده سازی پروژه می باشد.

پروژه کارگاه شامل چه مواردی است؟

در این کارگاه، پروژه تحلیل احساسات بر مبنای چارچوب PyTorch آموزش داده می شود.

من با مبحث ترنسفورمرها آشنایی ندارم. آیا این کارگاه را به من توصیه می کنید؟

خیر. همانطور که ذکر شد کارگاه در سطح پیشرفته می باشد و مناسب افرادی است که آشنایی مقدماتی با مبحث ترنسفورمرها داشته باشند.

فیلم کارگاه

کارگاه پروژه محور پردازش زبان طبیعی با استفاده از Transformer ها ویدئو

1:58:00

خصوصی
این بخش خصوصی می باشد. برای دسترسی کامل به دروس این دوره باید این دوره را خریداری نمایید.

فایل پیاده سازی پروژه دوره تمرین

ژوپیتر

خصوصی
این بخش خصوصی می باشد. برای دسترسی کامل به دروس این دوره باید این دوره را خریداری نمایید.
اسلاید آموزشی مبحث Deep NLP, Transformers و BERT

دانلود اسلاید

با پسوند PDF

خصوصی
این بخش خصوصی می باشد. برای دسترسی کامل به دروس این دوره باید این دوره را خریداری نمایید.
برچسب: BERT چیست آموزش BERT آموزش GPT آموزش Hugging Face آموزش PyTorch آموزش پای تورچ آموزش پروژه محور Higging Face آموزش پروژه محور برت بوت کمپ نوروزی 1400 کارگاه پروژه محور پردازش زبان طبیعی با استفاده از Transformer ها

دوره های مرتبط

دوره کوئری نویسی پیشرفته در SQL Server

 

کارگاه پروژه محور تحلیل داده های سری زمانی مالی با پایتون

 

کارگاه پروژه محور برنامه نویسی با R و R Studio با رویکرد علم داده و یادگیری ماشین

 

کارگاه تئوری و عملی آمار و احتمالات برای دیتاساینس

 

کارگاه پروژه محور طراحی داشبوردهای تجاری با Power BI

 

کارگاه آموزشی آنلاین پلتفرم بعنوان سرویس با داکر

آشنایی با Docker  Docker یک ابزار برای ایجاد کانتینر است که به توسعه‌ی استاندارد نرم افزار کمک می‌کند. با استفاده…

کارگاه آموزشی آنلاین اسپارک برای تحلیل داده ها

کارگاه آموزشی آنلاین اسپارک برای تحلیل داده ها، به امید خدا، پنج شنبه، پنج شنبه، ده دی ماه راس ساعت…

rate_reviewامتیاز دانشجویان دوره

5
5.00 2 رای
99,000 تومان 79,000 تومان
2 رأی
5 ستاره
2
4 ستاره
0
3 ستاره
0
2 ستاره
0
1 ستاره
0

chat_bubble_outlineنظرات

  • محمد مهدی امجدی( دانشجوی دوره )
    03/14/2022
    امتیاز 5 از 5
    برای پاسخ دادن وارد شوید

    این دست از آموزش ها در وب پارسی با این هزینه مقرون بصرفه نادر است. با سپاس از زحمات شما

  • حسنیه ذوالفقاری( دانشجوی دوره )
    07/02/2021
    امتیاز 5 از 5
    برای پاسخ دادن وارد شوید

    لازم است که دانش لازم در مورد ترانسفرمرها را داشته باشید. در اینجا کد ترانسفرمر برای آنالیز احساس با پایتورچ نیز توضیح داده می شود.

تنها اشخاصی که این محصول را خریداری کرده اند و وارد سایت شده اند می توانند در مورد این محصول بازبینی ارسال کنند.

قیمت :

99,000 تومان 79,000 تومان

 
امتیاز
5.00 از 2 رأی
5.00 2 رای
99,000 تومان 79,000 تومان
نوع دوره: آنلاین
سطح دوره: پیشرفته
پیش نیاز: آشنایی با پردازش زبان طبیعی
زبان: فارسی
118 دقیقه
درصد پیشرفت دوره: %100
2.95k بازدید 2 دیدگاه
احسان طاهر
احسان طاهر
دانشمند داده در دیجی کالا

دانشمند داده در دیجی کالا و فارغ التحصیل مهندسی کامپیوتر از دانشگاه صنعتی شریف هستم

دسته: بوت کمپ نوروزی 1400، پردازش زبان طبیعی، کارگاه های آموزشی آنلاین
منوهای کاربردی
  • صفحه اصلی
  • پنل درسنامه های متن محور
  • مجله آنلاین
  • دوره ها
  • حساب کاربری
  • سبد خرید
  • پرداخت
  • تدریس در مدرسه
  • منتور شوید
  • همکاری با ما
  • درباره ما
  • تماس با ما
جدیدترین دوره های آموزشی
  • دوره آموزشی پروژه محور تحلیل داده ها در پایتون
  • دوره آموزشی تحلیل داده ها در پایتون با پانداس
  • دوره آموزشی جامع زبان برنامه نویسی پایتون و یادگیری ماشین با رویکرد حل مساله
  • دوره آموزشی طراحی و پیاده سازی سیستم های توصیه گر با پایتون
  • آزمون‌های آماری کلیدی برای یک مهندس یادگیری ماشین
اعتماد شما، سرمایه معنوی ماست :-)

logo-samandehi

© 2022 پلتفرم آموزش آنلاین هوش مصنوعی. تمامی حقوق محفوظ است

ورود

رمز عبور را فراموش کرده اید؟

هنوز عضو نشده اید؟ عضویت در سایت