مدل Qwen2 منتشر شد، قبلا راجب مدل اولش گفتم و واقعاً عملکرد خوبی داشت

اما چندتا نکته قابل توجه داره این مدل:
1- عملکرد بهتر از Llama3
2- سایز بزرگتر برای Context-length
3- انتشار مدل در ۵ سایز از 0.5B تا 72B پارامتر
4- و البته از همه مهمتر پشتیبانی از 29 زبان

اما چیزی که بسیار توجه جلب می‌کنه؛ امتیازش روی تست
MMLU-Pro
هست که :
ChatGpt4o : 72.2
Claude 3 Opus : 68.4
Qwen2 : 64.4
Llama3 : 56.2


Blog Post

مدل ۷۲ میلیارد پارامتری دمو هم داره در حال حاضر.


اضافه کنم :
فراموش نکنید Phi3 فقط زبان انگلیسی رو پشتیبانی می‌کنه.
برای همین توی این لیست راجبش چیزی نگفتم.

راهنمای تصمیم درباره Tune کردن یا Tune نکردن داده ها

https://cloud.google.com/blog/products/ai-machine-learning/to-tune-or-not-to-tune-a-guide-to-leveraging-your-data-with-llms

#LLM
#Google

⚠️⚠️ توجه: مطمئنا این پست همون چیزیه که خیلی از عزیزان دنبالش‌اند ⚠️⚠️

هوش مصنوعی خیلی سریع داره رشد می‌کنه جوری که:
خیلی‌ها نمی‌دونن از کجا شروع کنن و در کدوم مسیر ادامه بدن!
نمی‌دونن کدوم کورس/کتاب قدیمیه و دیگه به درد نمی‌خوره و کدوم رو باید ببینن!
نمی‌دونن کدوم مقاله مهمه که بخونن و کدوم مقاله دیگه به‌روز نیست!

حالا Ilya Sutskever که یکی از به‌ترین و پرکارترین پژوهش‌گرهای هوش مصنوعی‌ست، یک لیست ۲۷تایی از کورس‌ها، کتاب‌ها، پست‌ها و مقاله‌های مهم آماده کرده که به اعتقاد ایشان (که از ستون‌های AI اند) مسلط‌شدن به این ۲۷ مورد، باعث می‌شه شما به ۹۰ درصد چیزهایی که در AI امروز مهم‌اند، مسلط شوید.

این یک مسیر شفاف و عالی به‌خصوص برای دانشجویانی‌ست که تازه وارد این مسیر شده‌اند.

https://arc.net/folder/D0472A20-9C20-4D3F-B145-D2865C0A9FEE

یک نفر در Stackoverflow سوال کرده بود "چطور میشه گپ بین دقت داده train و test رو در مدل‌های Machine Learning حل کرد"؟ سوال برای یک مسئله سری زمانی بود. اول با خودم گفتم آقا خسته نباشی ملت صبح و شب در تلاش برای همین کار هستن تا هوش مصنوعی بهتر یاد بگیره. اما خوب تصمیم گرفتم به سوالش جواب بدم و حتی vote منفی سوالش رو که بقیه داده بودن خنثی کردم. روند توسعه مدل Machine Learning خیلی اوقات خوب انجام نمیشه و موارد پایه‌ای دیتاساینس و ماشین لرن رعایت نمیشه. مواردی مثل مانیتور کردن bias variance، شروع با مدل ساده و ارتقا با توجه به بایاس واریانس، experiment tracking و بعضی روش‌های Advanced رو در 8 مورد نوشتم.
Link
پ.ن: تمامی LLM ها و چت جی پی تی از منابعی مثل Stackoverflow کار و ریزه کاری کدزنی رو یاد گرفتن و باهوش شدن. پس مشارکت در Stackoverflow فراموش نشه.

@deeptimeai

اگر شما هم مثل ما توی پروداکشن مشکل context دارید (با مدل‌های بزرگ که امکان ترین و ... نیست)
حتما به این مقاله نگاه کنید

Arxiv Link

16K —> 256K

ادعای بزرگ و جذابی هست

دیتاست مربوط به instructهای فارسی مناسب برای فاین تیون کردن مدل های زبانی

📱 GitHub Repo

تیونینگ هایپرپارامتر ها در شبکه های عصبی (حتی مناسب برای مبتدی ها)

https://www.kdnuggets.com/tuning-hyperparameters-in-neural-networks

اگر به حوزه پردازش زبان طبیعی (NLP) و مدل‌های زبانی هوش مصنوعی علاقه‌مندید، این مجموعه داده برای شماست! این پروژه با هدف ارزیابی عملکرد ChatGPT برای زبان فارسی ایجاد شده است. شامل مجموعه‌ای متنوع از سوالات و پاسخ‌ها به زبان فارسی می‌باشد که می‌تواند در پروژه‌های مرتبط با توسعه مدل‌های AI و NLP بسیار کاربردی باشد. می‌توانید از این دیتاست برای ارزیابی و بهبود مدل‌های زبان فارسی در اپلیکیشن‌های چت‌بوت، ترجمه ماشینی و سایر کاربردهای مشابه استفاده کنید.

📱 GitHub Repo

راهنمای خیلی خوبیه برای پیش پردازش داده های متنی با کتابخانه #توکنایزر خود HuggingFace

https://www.kdnuggets.com/how-to-use-the-hugging-face-tokenizers-library-to-preprocess-text-data

https://focker.ir/

راهنمای برای دور زدن تحریم داکر

این تصویر به دسته‌بندی و توضیح حوزه‌های مختلف هوش مصنوعی (AI) می‌پردازد:

🤖 هوش مصنوعی (AI): ساخت ماشین‌هایی با رفتار هوشمند (Intelligent Behavior).

یادگیری ماشین (ML):

🏷 نظارت‌شده (Supervised Learning): آموزش با داده‌های برچسب‌دار.

🔍 بدون نظارت (Unsupervised Learning): شناسایی الگوها در داده‌های بدون برچسب.

🏆 تقویتی (Reinforcement Learning): یادگیری از طریق پاداش و مجازات.

🌐 یادگیری عمیق (Deep Learning): استفاده از شبکه‌های چندلایه (Multi-layered Networks) برای مدل‌سازی الگوهای پیچیده.

🧠 شبکه‌های عصبی عمیق (DNNs): شبکه‌های چندلایه‌ای ضروری برای یادگیری عمیق

🔬 شبکه‌های عصبی (Neural Networks): مدل‌های الهام گرفته از مغز برای تشخیص الگوها.

📷 شبکه‌های عصبی پیچشی (CNNs): شبکه‌هایی برای شناسایی تصاویر.

🖼 هوش مصنوعی تولیدی (Generative AI): ایجاد داده‌های جدید مشابه با داده‌های آموزشی، با استفاده از GANs و VAEs.

📝 مدل‌های زبان مبتنی بر ترنسفورمر: معماری‌های تخصصی برای پردازش زبان طبیعی مثل ChatGPT.

➖➖➖➖➖➖➖➖➖➖➖➖
برای آموزش علم داده به جمع ما بپیوندید: 👇

📊👨‍🏫 @DataPlusScience | @Data➕Science

◾️ List of SQL Data Science Interview Questions


1️⃣ Amazon company SQL interview question

📎 Link: Amazon SQL Interview

2️⃣ Airbnb SQL interview question

📎 Link: Airbnb SQL Interview Question

3️⃣ Adobe SQL Interview Question

📎 Link: Adobe SQL Interview Question

4️⃣ Spotify SQL Interview Question

📎 Link: Spotify SQL Interview Question

5️⃣ L&T Company SQL Interview Question

📎 Link: L&T SQL Interview Question

6️⃣ Ameriprise LLC SQL query

📎 Link: Ameriprise LLC SQL Interview

7️⃣ SQL query from Tiger Analytics

📎 Link: Tiger Analytics SQL Interview

8️⃣ PWC SQL Interview Question

📎 Link: PWC SQL Interview Question

9️⃣ Honeywell SQL Interview Question

📎 Link: Honeywell SQL Interview

1️⃣ Angel One Company SQL Interview Question

📎 Link: Angel One SQL Interview

1️⃣ SQL interview questions of FAANG companies

📎 Link: FAANG SQL Interview Question

1️⃣ Accenture SQL Interview Question

📎 Link: Accenture SQL Interview

#مصاحبه #منابع

🔸 مطالب بیشتر 👇👇

✅ @AI_DeepMind
🔸 @AI_Person

✅ ۱۰۹ سوال آمار برای علم داده

این فایل شامل ۱۰۹ سوال مهم آماری برای مصاحبه‌های شغلی در زمینه علم داده (Data Science) است. با مطالعه این سوالات می‌توانید آمادگی لازم برای سوالات رایج در مصاحبه‌های شغلی را به دست آورید.

📑 سرفصل‌های مطالب:

📊 مفاهیم آماری مهم:
اندازه‌گیری گرایش مرکزی (Measure of Central Tendency)
اندازه‌گیری پراکندگی (Measure of Dispersion)
کوواریانس و همبستگی (Covariance and Correlation)
تابع توزیع احتمالی (Probability Distribution Function)
قضیه حد مرکزی (Central Limit Theorem)
آزمون فرضیه (Hypothesis Testing)

🔍 تحلیل اکتشافی داده (EDA):
تحلیل بصری و آماری داده‌ها
شناسایی الگوها

📈 انواع داده‌ها:
داده‌های کمی (Quantitative Data)
داده‌های کیفی (Qualitative Data)

🧮 تحلیل داده‌ها:
تک‌متغیره، دومتغیره و چندمتغیره

⚠️ پرکردن داده‌های گمشده:
روش‌های ساده و پیچیده

🧑‍🏫 آمار توصیفی و استنباطی:
خلاصه‌سازی ویژگی‌های داده‌ها



➖➖➖➖➖➖➖➖➖➖➖➖
برای آموزش علم داده به جمع ما بپیوندید: 👇

📊👨‍🏫 @DataPlusScience | @Data➕Science

🌟آموزش بصری یادگیری عمیق

📘 این کتاب به شما کمک می‌کند تا به صورت بصری و بدون استفاده از فرمول‌های پیچیده ریاضی و کدنویسی، مفاهیم یادگیری عمیق را درک کنید.

🔍 مباحث شامل: شبکه‌های عصبی، رگرسیون خطی و غیرخطی، طبقه‌بندی دودویی و چندکلاسه، و...

👨‍💻 نویسنده: معر عامر، دانش‌آموخته‌ی امپریال کالج لندن و متخصص یادگیری عمیق.


#یادگیری_عمیق #کتاب_الکترونیک #یادگیری_ماشین #هوش_مصنوعی #آموزش

➖➖➖➖➖➖➖➖➖➖➖➖
برای آموزش علم داده به جمع ما بپیوندید: 👇

📊👨‍🏫 @DataPlusScience | @Data➕Science

🌟 سوالات و پاسخ‌های مصاحبه علم داده

📘 این جزوه شامل ۱۲۰ سوال واقعی یا الهام گرفته از مصاحبه‌های علم داده است که به شما کمک می‌کند تا برای نقش دانشمند داده آماده شوید.

🔍 سرفصل‌ها:

📊 مدل‌سازی پیش‌بینی (Predictive Modeling)
💻 برنامه‌نویسی و پایگاه‌داده‌ها (Programming and Databases)
📈 احتمال و آمار (Probability and Statistics)
🔬 آزمایش و استنتاج (Experimentation and Inference)
📉 تحلیل داده و متریک‌های محصول (Data Analysis and Product Metrics)
⚙️ مهندسی داده (Data Engineering)
🤖 یادگیری ماشین (Machine Learning)
🔄 طراحی سیستم‌ها (System Design)
📚 مطالعات موردی (Case Studies)
🧠 مهارت‌های نرم (Soft Skills)

#علم_داده #مصاحبه #آموزش #کتاب_الکترونیک #تحلیل_داده

➖➖➖➖➖➖➖➖➖➖➖➖
برای آموزش علم داده به جمع ما بپیوندید: 👇

📊👨‍🏫 @DataPlusScience | @Data➕Science #دیتا‌پلاس‌ساینس

🔥 "چالش‌های پیشرفته برای مصاحبه پایتون"

📄 این داکیومنت شامل "۱۲۰ سوال پیشرفته مصاحبه پایتون" است و برای آماده‌سازی شما در مصاحبه‌های فنی پایتون طراحی شده است. مفاهیم و تکنیک‌های پیشرفته پایتون را در بر می‌گیرد و شامل بخش‌های زیر است:

🔧 مفاهیم پایه‌ای و ترفندهای کارآمد: مانند استفاده از "pass" و کاهش زمان اجرای حلقه‌ها (Loop Unrolling).
🌐 توسعه وب با Flask: مزایای استفاده از Flask در پروژه‌های میکروسرویس (Microservices Architecture).
🔍 مهارت‌های برنامه‌نویسی پیشرفته: شامل دکوریتورها (Decorators) و مدیریت حافظه (Memory Management).
🧠 چالش‌های الگوریتمی: مثل مرتب‌سازی داده‌ها (Sorting Algorithms) و جستجوی دودویی (Binary Search).

#پایتون #مصاحبه_فنی #برنامه_نویسی #توسعه_وب #الگوریتم #میکروسرویس

➖➖➖➖➖➖➖➖➖➖➖➖
برای آموزش علم داده به جمع ما بپیوندید: 👇

📊👨‍🏫 @DataPlusScience | @Data➕Science #دیتا‌پلاس‌ساینس

در لینک زیر می‌توانید مدل‌های اوپن‌-سورس جدید و محبوب مثل Llama 3.1-405b و stable-video-diffusion رو که توسط NVIDIA NIM سرو می‌شه، امتحان کنید.

https://build.nvidia.com/explore/discover‌