ه انواع محصولات آزمایشگاه را می توان بصورت زیر دسته بندی نمود. برخی از این محصولات بصورت منبع آزاد، برخی بصورت وب سرویس، برخی در قالب آزمایشگاه تایید نمونه و برخی با مجوزهای خاص قابل دسترسی و بهره برداری هستند:
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
۱- ابزارهای تولید و برچسب گذاری دادگان مانند
- فرهنگ‌یار : ابزار تولید فرهنگ جامع فارسی در فرهنگستان زبان و ادب فارسی
- سمپ : ابزار مدیریت و برچسبزنی پیکره با برچسب های معنایی
- واژه‌یار : ابزار جمعسپاری واژهگزینی و ارائه واژه های معادل فارسی کلمات و عبارات انگلیسی
۲- منابع زبانی شامل واژگان، هستان شناسی، پیکره های آموزش و آزمایش و دادگان محک ازجمله
- فارس‌نت : وردنت فارسی
- واژگان فارسواژه
- هستانشناسی پردازش زبان طبیعی
- پیکره بزرگ فارسی
- پیکره بلاگ ها
- مدلهای زبانی فارسی (مدل بزرگ چندتای کلمات، مدلهای جاسازی کلمات ...)
- پیکره محک رفع ابهام معنایی فارسی
- پیکره محک قطعه بندی فارسی
- پیکره محک تحلیل ساختواژی و بن‌واژه‌یابی فارسی
- پیکره محک تشخیص استلزام و تناقض فارسی
- پیکره محک شباهت سنجی با آنالوژی
- پیکره محک مدلهای جاسازی
۳- پردازشهای پایه ( سطح ۱ ) ( ابزار استپ وان ) شامل :
- تشخیص زبان فارسی
- قطعه بند ( توکنایزر ) جهت تقسیم متن به جملات و سپس به کلمات (توکن ها)
- تحلیلگر ساختواژی، بن‌واژه یاب (ریشه یاب) و لم‌یاب جهت تشخیص ساختار ساختواژی کلمات و یافتن ریشه یا بن واژه کلمه
- برچسب زن اجزاء کلام (POS tagger) جهت تعیین مقوله لغوی کلمات
۴- سرویس‌های پردازش های میانی زبان ( سطح ۲ ) مانند :
- دسته بندی متون
- تبدیل محاوره به رسمی
- تشخیص طنز و توهین و .. (نوع گفتگو)
- شباهت سنجی کلمات و جملات
- شناسایی گر موجودیت های نامدار (NER) جهت شناسایی و تعیین نوع موجودیت های نامدار متن
۵- برنامه های کاربردی (سطح ۳) ازجمله :
- نگار : ویرایش و اصلاح متون به جهت نگارش فارسی معیار مطابق دستورخط و معادلهای مصوب فرهنگستان
- مهتاب : سامانه مشابهت سنجی و کشف تقلب متون فارسی
- کیوسک : سامانه پرسش و پاسخ در حوزه آموزش و میز اطالاعات دانشکده مهندسی کامپیوتر
- خبره یابی و منبع‌یابی : یافتن افراد خبره، سازمانهای حقوقی و انتشارات مرتبط با یک موضوع در حوزه پردازش زبان به منظور کمک به مجلات و کنفرانس ها در یافتن داور و دانشجویان و محققان در یافتن مرجع یا همکار در حوزه کاری مشترک
- دستیار هوشمند موبایل جهت دریافت و اجرای دستورات کاربر موبایل
- تحلیل احساسات و نظرات
- ترجمه ماشینی
- خلاصهسازی متون فارسی
- تبدیل متن به تصویر
۶- طرح کلان و برنامه های جامع (سطح ۴) :
پروژه جامع فعلی آزمایشگاه، "سامانه هوشمند ارتباط با مشتریان (سها)" است که هم‌اکنون به‌عنوان بخشی از طرح دانشکده هوشمند به‌صورت آزمایشی در دانشکده در حال توسعه، نصب و اجراست و .شامل ۵ زیرسامانه اصلی زیر می باشد.
- تشخیص نوع گفتگو
- گپ هوشمند (چت‌بات)
- پرسش و پاسخ
- تحلیل احساسات و نظرات کاربران
- دستورپذیری و اجرا
کتاب "Natural Language processing with python" یکی از انتخاب های مناسبی است که کمک می کند با مفاهیم پایه nlp مثل tokenization، text normalization ، و pos آشنا شویم. در مرحله بعدی نحوه پیاده سازی این مفاهیم در پایتون به تفصیل بررسی می شود. همچنین تمرکز کتاب استفاده از کتابخانه nltk است. در این کتاب خبری از مفاهیم یادگیری عمیق نبوده و تمرکز بیشتر، بر روش های کلاسیک nlp است. اگر ابتدای راه باشیم و بخواهیم مباحث مقدماتی در زمینه nlp فرا گیریم این کتاب، شروع خوبی خواهد بود.
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
کتاب Natural Language Processing in Action تمرکز جدی تر روی مسائل واقعی و مثال های کاربردی مثل chat botدارد. این کتاب همچنین برای پیاده سازی پروژه ها به سراغ تکنولوژی های جدیدتر مثل deep learning و word embeddingمی رود و سعی کرده بروز باشد. در این کتاب با word2vec ، cnnو rnnآشنا شده و از آنها در پیاده سازی پروژه ها استفاده می شود. به طور کلی برای کسانی که می خواهند در سطح پیشرفته پردازش زبان طبیعی فعالیت کنند این کتاب، گزینه مناسبی است.
کتاب بعدی Speech and Language Processing است. اگر به دنبال مباحث تئوری مربوط به nlp باشیم این کتاب گزینه خوبی است زیرا هر مبحث خیلی ریز بررسی شده است. در نگارش این کتاب سعی شده از مقالات زیادی بهره گیری شود و با خواندن این کتاب چکیده ای از مقالات (قدیمی) در زمینه پردازش زبان طبیعی را مطالعه خواهیم کرد. در این کتاب خبری از کد و پیاده سازی پروژه نیست. این کتاب بیشتر برای دانشجویانی که قصد نوشتن مقاله یا پایان نامه دارند توصیه می شود. البته لازم یه یادآوری است که این کتاب بیشتر جنبه مرجع دارد و انتظار مطالب به روز نداشته باشید.
کتاب یادگیری عمیق(Deep Learning book) یکی از بهترین کتاب هایی است که سعی کرده به زبان ساده مفاهیم یادگیری عمیق را بیان کند. اگر آشنایی چندانی با مباحث یادگیری عمیق ندارید این کتاب پیشنهاد می شود. این کتاب بیشتر برای کسانی پیشنهاد می شود که می خواهند به صورت پیشرفته روی متون کار کنند ولی دانش خوبی نسبت به شبکه های عصبی ندارند.
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
دوره ها
دوره From Zero to Hero: Natural Language Processing Using NLTK
یک دوره مناسب برای شروع یادگیری nlp است. این دوره مفاهیم مقدماتی nlp را به زبانی ساده بیان می کند. در این دوره تمرکز اصلی روی زبان پایتون و کتابخانه nltk است و تعداد زیادی مثال پیاده سازی می شود. پس از آشنایی با مفاهیم اولیه، پروژه های ساده ای پیاده سازی می شوند.
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
دوره Sequence Models
یک دوره خوب که مباحث پایه ای مربوط به sequence را مطرح می کند. در این دوره یاد می گیریم چگونه به کمک یادگیری عمیق پروژه های nlpرا انجام دهیم. هدف اولیه دوره معرفی sequenceهاست. در ادامه جملات را به عنوان sequenceدر نظر گرفته و سپس ساخت و پیاده سازی شبکه های عصبی بازگشتی آموزش داده می شود. در این دوره معماری lstm و gru معرفی و نحوه استفاده از آن ها در پروژه ها بررسی می شوند. این دوره توسط اندرو انگ ارائه می شود. برای متخصص nlp شدن، دیدن این دوره ضروری است.
دوره Natural Language Processing
یکی از دوره های جامع و کامل ولی سخت است. این دوره مناسب کسانی است که می خواهند پس زمینه علمی روش ها و الگوریتم ها را بدانند. زمان زیادی از دوره صرف توضیح مباحث تئوری شده ولی تکالیف بیشتر جنبه پروژه ای و عملیاتی دارند. در این دوره طیف وسیعی از مباحث پردازش زبان طبیعی مثل sentiment analysis و summarization بررسی می شوند. پروژه نهایی این دوره پیاده سازی یک chat bot برای داده های stackoverflow است.
دوره Natural Language Processing
این دوره برای افراد با سطح مقدماتی یا متوسط مناسب است. مباحث مطرح شده مقدماتی بوده و می تواند یک شروع خوب برای افرادی باشد که تازه وارد این حوزه شده اند.
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
دوره رایگان یادگیری ماشین(Machine Learning)
این دوره یکی از بهترین دوره های موجود در پرداختن به موضوعات مقدماتی یادگیری ماشین است. کلیه محتوا زیر نظر مستقیم اندرو انگ Andrew Ng)) تهیه شده است. با مشاهده ویدیوها و انجام تکالیف به صورت هفتگی، سطح مهارت فرد رشد کرده و دید خوبی نسبت به مباحث یادگیری ماشین پیدا می کند. مباحثی که بعدا برای کار با متون به شدت مفید هستند.
پس از مشاهده و اتمام این دوره، پیشنهاد می شود حتما دوره Deep Learning از اندرو انگ نیز مشاهده شود.
دلیل اصلی این پیشنهاد، رشد مهارت ها برای انجام پروژه پیشرفته است زیرا برای انجام پروژه هایی مثل ماشین ترجمه، چت بات حتما باید به سراغ یادگیری عمیق برویم.
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
دوره natural language processing with deep learning دانشگاه استنفورد
یکی از دوره های مطرح که مناسب افرادی است که دانش اولیه نسبت به یادگیری ماشین و یادگیری عمیق دارند. این دوره از آنجایی که در دانشگاه استنفورد برگزار شده، مباحث تئوری زیادی دارد و برای کسانی مناسب است که می خواهند جزئیات علمی و تئوری هر مبحثی را بدانند. در ضمن تکالیف این دوره به زبان پایتون است. تمرکز اصلی این دوره روی مباحث یادگیری عمیق و شبکه های عصبی است
دست پروژه های دنیای واقعی در زمینه های مختلف پردازش زبان طبیعی
مدل های پردازش زبان طبیعی را در قالب احساسات مشتری توسعه دهید
مدل های پردازش زبان طبیعی را برای پیش بینی اخبار سهام توسعه دهید
مدل های پردازش زبان طبیعی را برای پیش بینی قدرت رمز عبور ایجاد کنید
آیا شما به دنبال یک شغل پردرآمد در Data Science ، AI پردازش زبان طبیعی هستید؟
یا شما یک تمرین کننده هوش مصنوعی هستید که می خواهید حرفه خود را به سطح بالاتری برسانید؟
یا شما دانشمند مشتاق داده ای هستید که می خواهد دست به دست داده های علمی و هوش مصنوعی شود؟
اگر جواب هر یک از این س yesال ها مثبت است ، پس این دوره برای شما مناسب است!
Data Science یکی از داغترین زمینه های فناوری است که در حال حاضر در آن حضور دارد! این رشته با فرصت ها و چشم اندازهای شغلی در حال انفجار است. امروزه Data Science به طور گسترده ای در بسیاری از بخش ها مانند بانکداری ، بهداشت و درمان ، هواپیمایی ، لجستیک و فناوری پذیرفته شده است.
در تجارت ، Data Science برای بهینه سازی فرایندهای تجاری ، به حداکثر رساندن درآمد و کاهش هزینه اعمال می شود. هدف از این دوره این است که دانش شما را از جنبه های اصلی برنامه های علوم داده در تجارت به روشی عملی ، آسان و سرگرم کننده فراهم کند. این دوره با استفاده از مجموعه داده های دنیای واقعی ، تجربه عملی عملی را برای دانشجویان فراهم می کند.
1. وظیفه شماره 1 @ پیش بینی احساسات مشتری: یک مدل AI برای پیش بینی احساسات مشتری از آمازون ایجاد کنید.
3. وظیفه شماره 2 @ پیش بینی قیمت سهام آینده: مدل های NLP را برای پیش بینی قیمت سهام آینده توسعه دهید.
2. وظیفه شماره 3 @ پیش بینی قدرت گذرواژه: رده کلیدی گذرواژه را قوی ، خوب یا ضعیف پیش بینی کنید.
چرا باید این دوره را بگذرانید؟
پروژه های مربوط به داده های واقعی و مشکلات دنیای واقعی را توضیح می دهد. داده های اسباب بازی وجود ندارد! این ساده ترین روش برای دستیابی به Data Scientist/AI Engineer/ML Engineer/NLP Engineer است
این داده های کامل در دنیای واقعی را نشان می دهد و توضیح می دهد. شروع با وارد کردن داده های کثیف ، پاک کردن داده ها ، ادغام و تلفیق داده ها ، گروه بندی و تجمیع داده ها ، تجزیه و تحلیل داده های اکتشافی از طریق تهیه و پردازش داده ها برای آمار ، یادگیری ماشین ، سری زمانی NLP و ارائه داده.
در پروژه های دنیای واقعی ، کدگذاری و جنبه تجاری همه موارد به یک اندازه مهم است. این احتمالاً تنها درسی است که هر دو را تدریس می کند: برنامه نویسی عمیق پایتون و تفکر در تصویر بزرگ مانند اینکه چگونه می توانید به نتیجه برسید
رضایت تضمینی: در غیر این صورت ، پول خود را با ضمانت 30 روزه پس گرفتن پول پس بگیرید.
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
09367292276
09367292276
azsoftir@gmail.com
azsoftir.com
این دوره برای چه کسانی است:
کسی که در مورد انجام حامل انتقال داده به علوم داده ، هوش مصنوعی ، پردازش زبان طبیعی ،
کنجکاو است
سرفصل ها و درس ها
مقدمه ای بر این دوره
Introduction to this course
مقدمه
Intro To course
نحوه پیگیری این دوره - باید تماشا کنید
How to follow this course-Must Watch
پروژه 1 ->> احساسات مشتری آمازون را پیش بینی کنید
Project 1-->>Predict the sentiments of Amazon Customer
مقدمه ای بر مشکل و مجموعه داده های تجاری
Introduction to Business Problem & Dataset
مجموعه داده ها و منابع
Datasets & Resources
پیش پردازش داده ها را در داده های آمازون انجام دهید
Perform Data Pre-processing on Amazon Data
تجزیه و تحلیل داده های اکتشافی را روی داده ها اعمال کنید
Apply Exploratory Data Analysis on Data
شهود پشت کیسه کلمات
Intuition behind Bag of Words
شهود پشت سر رگرسیون لجستیک - قسمت 1
Intuition behind Logistic Regression --part 1
شهود پشت سر رگرسیون لجستیک - قسمت 2
Intuition behind Logistic Regression --part 2
کیسه کلمات را روی داده اعمال کنید
Apply Bag of Words on data
مدل NLP و مدل یادگیری ماشین خودکار کنید
Automate your NLP model & Machine Learning Model
شهود پشت TF-IDF - قسمت 1
Intuition behind TF-IDF --part 1
شهود پشت TF-IDF - قسمت 2
Intuition behind TF-IDF --part 2
استفاده از الگوریتم های NLP و یادگیری ماشین
Applying algorithms of NLP & Machine Learning
آماده سازی داده ها برای هدف مدل سازی
Data Preparation for Modelling Purpose
داده عدم تعادل چیست و چگونه می توان آن را کنترل کرد؟
What is Imbalance Data & how to handle it??
Part1-- اعتبار سنجی چیست و چه زمانی باید از آن استفاده کرد ؟؟
Part1-- What is Cross-validation & when to use it??
Part2-- اعتبار سنجی چیست و چه زمانی باید از آن استفاده کرد ؟؟
Part2-- What is Cross-validation & when to use it??
استفاده از تکنیک های مدیریت داده های عدم تعادل و اعتبار سنجی متقابل
Applying Techniques of Handling Imbalance Data & Cross Validation
Project2 ---->>> عناوین اخبار سهام را پیش بینی کنید
Project2---->>> Predict the Stock News Headlines
مقدمه ای بر مشکل و مجموعه داده های تجاری
Introduction to Business Problem & Dataset
مجموعه داده ها و منابع
Datasets & Resources
پیش پردازش داده ها روی داده ها.
Data Pre-processing on Data.
درگیری و ادغام داده ها را انجام دهید
Perfrom Data Wrangling & Merging
شهود پشت جنگل تصادفی قسمت 1
Intuition Behind Random Forest Part-1
شهود پشت جنگل تصادفی - قسمت 2
Intuition behind Random Forest --part 2
کیسه های کلمات و جنگل تصادفی را روی Data اعمال کنید
Apply Bag of words and Random forest on Data
ارزیابی مدل ..
Model Evaluation..
شهود پشت Naive Bayes - قسمت 1
Intuition Behind Naive Bayes-Part 1
شهود پشت Naive Bayes - قسمت 2
Intuition Behind Naive Bayes- Part 2
Naive Bayes را روی Data اعمال کنید ..
Apply Naive Bayes on Data..
پروژه 3 ->>> پیش بینی قدرت رمز عبور
Project 3-->>> Predicting the strength of Password
مقدمه ای بر مشکل و مجموعه داده های تجاری
Introduction to Business Problem & Dataset
مجموعه داده ها و منابع
Datasets & Resourcesazsoftir.com
09367292276کاوش داده ها
Exploring Data
TF-IDF را روی داده اعمال کنید
Apply TF-IDF on data
رگرسیون لجستیک را روی داده اعمال کنید
Apply Logistic Regression on Data
بررسی دقت مدل
Checking Accuracy of Model