دانلودر دوره‌های فرادرس
سامانه قدرتمند استخراج و دانلود دسته‌ای دوره‌های آموزشی پلتفرم فرادرس با قابلیت فهرست‌بندی بیش از ۱,۲۰۰ دوره و ۴,۸۰۰ ساعت ویدیو، انتخاب کیفیت‌های 1080p و 720p، استخراج ساختار درختی دروس و خروجی متادیتا به اکسل و JSON.
چه مانع یا چالشی نیاز به حل داشت؟
۱. ساختار چندشاخه و درختی درس‌ها: هر دوره فرادرس شامل ده‌ها ویدیوی کوتاه درون فصل‌های مختلف است که دانلود تک‌تک آن‌ها برای دانشجویان روندی به‌شدت زمان‌بر و خسته‌کننده به همراه دارد. ۲. قطعی‌های مکرر اینترنت و هدررفت حجم: دانلود مستقیم ویدیوهای باکیفیت بدون مکانیزم چانکینگ و قابلیت ازسرگیری هوشمند (Resume)، در صورت افت سیگنال منجر به دانلود مجدد کل فایل می‌شد. ۳. نیاز به دسترسی به سرفصل‌ها و نقشه راه مهارتی: تیم‌های آموزش سازمان‌ها نیازمند استخراج متمرکز متادیتای دوره‌ها، زمان آموزش‌ها و سرفصل‌ها در قالب اکسل برای ترسیم مسیرهای یادگیری پرسنل بودند.
معماری سیستم و نحوه پیاده‌سازی
• موتور دانلود چندنخی با قابلیت Chunking و Resume: ساخت دانلودر موازی با aiohttp در پایتون با قابلیت تقسیم ویدیو به قطعات موازی و دانلود با سرعت بالغ بر ۳۱.۸ مگابایت بر ثانیه با پایداری کامل در زمان افت ارتباط. • پارسر سلسله‌مراتبی سرفصل‌ها و دروس: کراولر بازگشتی برای استخراج ساختار فصول، عنوان دقیق درس‌ها، مدت زمان هر بخش، نام مدرس و فایل‌های تمرینی دوره. • رابط کاربری تمیز با فیلتر دسته‌بندی‌ها: پیاده‌سازی داشبورد با Next.js برای فیلتر مباحث (پایتون، یادگیری ماشین، اکسل، ریاضیات)، صف دانلود فعال با زمان باقی‌مانده تخمینی (ETA) و دکمه خروجی فوری اکسل و CSV.
ارزش ایجاد شده
• فهرست‌بندی و مدیریت بیش از ۱,۲۴۸ دوره کامل آموزشی و ۴,۸۵۰ ساعت ویدیوی باکیفیت. • سرعت دانلود پایدار ۳۱.۸ مگابایت بر ثانیه و تایید سلامت فایل‌ها با راستی‌آزمایی هش MD5. • خروجی متادیتای جامع در اکسل جهت ارزیابی منابع و تدوین کوریکولوم آموزشی برای دانشجویان.
نیاز به پیاده‌سازی سیستمی مشابه دارید؟
برای مشاوره فنی، امکان‌سنجی یا توسعه پروژه‌های استخراج داده و هوش مصنوعی در ارتباط باشید.