×
۱۳۵,۰۰۰ تومان

آموزش مقدماتی آپاچی اسپارک برای پردازش کلان داده

آموزش مقدماتی آپاچی اسپارک برای پردازش کلان داده

هزینه آموزش
۱۳۵,۰۰۰ تومان

تعداد دانشجو
۱۷۶ نفر
مدت زمان
۴ ساعت و ۲۳ دقیقه
محتوای این آموزش
تضمین کیفیت
۱ بازخورد (مشاهده نظرات)

آپاچی اسپارک با ارائه پلتفرمی که پردازش را در داخل حافظه اصلی تجزیه و تحلیل می‌کند و با پشتیبانی از قابلیت‌های MapReduce، مهم‌ترین موتور پردازش توزیع شده در حال حاضر است که سرعت ۱۰۰ برابری نسبت به هدوپ دارد. در این آموزش با آموزش آپاچی اسپارک تلاش می‌شود که افراد را برای تبدیل شدن به یک مهندس کلان داده آماده نماید. در این آموزش، ابتدا ضرورت تجزیه و تحلیل کلان‌داده مورد توجه قرار گرفته و سپس آپاچی اسپارک به عنوان محبوب‌ترین پلتفرم تجزیه و تحلیل کلان‌داده معرفی شده است. نصب آپاچی اسپارک‌، کار کردن با RDD‌ها و برنامه‌نویسی RDD‌های جفت و ذخیره و بازیابی داده‌ها تدریس شده است. در پایان این آموزش توانایی برنامه‌نویسی توزیع شده با آپاچی اسپارک را خواهید داشت.

آموزش مقدماتی آپاچی اسپارک برای پردازش کلان داده

تعداد دانشجو
۱۷۶ نفر
مدت زمان
۴ ساعت و ۲۳ دقیقه
هزینه آموزش
۱۳۵,۰۰۰ تومان
محتوای این آموزش
۱ بازخورد (مشاهده نظرات)

ایمان بادروح

کارشناس ارشد مهندسی کامپیوتر- نرم‌افزار

حوزه تخصصی پژوهشی ایشان داده‌کاوی، تحلیل داده‌های حجیم و پایان‌نامه دکتری ایشان در حوزه تحلیل شبکه‌های اجتماعی است. از سال 86 در دانشگاه‌های مختلف تدریس داشته‌اند و به زبان‌های برنامه‌نویسی پاسکال، C#, C++, C، جاوا و پایتون و R تسلط دارند.

توضیحات تکمیلی

با پیشرفت تکنولوژی و رشد روزافزون داده‌ها، تجزیه و تحلیل داده‌ها و استخراج دانش از آن‌ها بسیار حائز اهمیت شده است. با توجه به حجم داده‌ها، ابزارهایی برای تجزیه و تحلیل داده‌های کلان بسیار مهم است و ابزارهایی برای تحلیل داده‌ها در سطح کلان ارائه شده است. در راستای پردازش توزیع شده داده‌ها، پلتفرم‌هایی مانند MapReduce معرفی شد. هر چند MapReduce و هدوپ (Apache Hadoop) توانایی بسیار زیادی در تجزیه و تحلیل داده‌های کلان داشته‌اند اما مشکل اساسی آن‌ها ذخیره نتایج میانی در هارد دیسک است که به شدت سرعت پردازش را کاهش می‌دهد.

آپاچی اسپارک (Apache Spark) با ارائه پلتفرمی که پردازش را در داخل حافظه اصلی تجزیه و تحلیل می‌کند و با پشتیبانی از قابلیت‌های MapReduce، مهم‌ترین موتور پردازش توزیع شده در حال حاضر است که سرعت ۱۰۰ برابری نسبت به هدوپ دارد. در این آموزش با آموزش آپاچی اسپارک تلاش می‌شود که افراد را برای تبدیل شدن به یک مهندس کلان‌داده آماده نماید.

در این آموزش، ابتدا ضرورت تجزیه و تحلیل کلان‌داده مورد توجه قرار گرفته و سپس آپاچی اسپارک به عنوان محبوب‌ترین پلتفرم تجزیه و تحلیل کلان‌داده معرفی شده است. نصب آپاچی اسپارک‌، کار کردن با RDD‌ها و برنامه‌نویسی RDD‌های جفت و ذخیره و بازیابی داده‌ها تدریس شده است. در پایان این آموزش توانایی برنامه‌نویسی توزیع شده با آپاچی اسپارک را خواهید داشت.

فهرست سرفصل‌ها و رئوس مطالب مطرح شده در اين مجموعه آموزشی، در ادامه آمده است:
  • فصل یکم: مقدمه‌ای بر آپاچی اسپارک
    • درس یکم: مفهوم اسپارک
    • درس دوم: پشته اسپارک
    • درس سوم: تاریخچه مختصری از اسپارک
  • فصل دوم: دانلود و نصب آپاچی اسپارک
    • درس چهارم: دانلود و نصب آپاچی اسپارک
    • درس پنجم: آشنایی با پوسته‌های آپاچی اسپارک
    • درس ششم: توابع در آپاچی اسپارک
  • فصل سوم: برنامه‌نویسی با RDD
    • درس هفتم: اصول RDDها
    • درس هشتم: عملیات‌های RDD
    • درس نهم: تفاوت تبدیل‌ها و عملیات‌های RDD - بخش یکم
    • درس دهم: تفاوت تبدیل‌ها و عملیات‌های RDD - بخش دوم
    • درس یازدهم: ساخت RDD
    • درس دوازدهم: مثالی از تبدیل‌ها
    • درس سیزدهم: مثالی از عملیات‌های RDD
    • درس چهاردهم: عملیات و تبدیلات پرکاربرد
    • درس پانزدهم: عملیات‌های شبه‌ مجموعه
    • درس شانزدهم: عملیات ضرب دکارتی
    • درس هفدهم: عملیات Reduce
  • فصل چهارم: برنامه‌نویسی RDDهای جفت کلید - مقدار
    • درس هجدهم: ساخت RDDهای جفت
    • درس نوزدهم: تبدیل‌ها روی RDDهای جفت
    • درس بیستم: مثال شمارش کلمات
    • درس بیست‌ویکم: عملیات موجود روی RDDهای جفت
  • فصل پنجم: ذخیره و بازیابی اطلاعات
    • درس بیست‌و‌دوم: ذخیره و بازیابی اطلاعات - بخش یکم
    • درس بیست‌و‌سوم: ذخیره و بازیابی اطلاعات - بخش دوم

 

مفید برای
  • مهندسی کامپیوتر - نرم‌افزار
  • مهندسی فناوری اطلاعات (IT)

پیش نیاز

آشنایی با برنامه‌نویسی توزیع شده

آنچه در این آموزش خواهید دید:

آموزش ویدئویی مورد تائید فرادرس
فایل برنامه ها و پروژه های اجرا شده
فایل PDF یادداشت‌ های ارائه مدرس

نرم افزارهای مرتبط با آموزش

Python 3.7.9, Java SE Runtie Environment 8.0.301

پیش نمایش‌ها

۱. مفهوم اسپارک
۲. پشته اسپارک
۳. تاریخچه مختصری از اسپارک
۴. دانلود و نصب آپاچی اسپارک
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
۵. آشنایی با پوسته‌های آپاچی اسپارک
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
۶. توابع در آپاچی اسپارک
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
۷. اصول RDDها
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
۸. عملیات‌های RDD
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
۹. تفاوت تبدیل‌ها و عملیات‌های RDD - بخش یکم
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
۱۰. تفاوت تبدیل‌ها و عملیات‌های RDD - بخش دوم
مشاهده این پیش‌نمایش، نیازمند عضویت و ورود به سایت (+) است.
این آموزش شامل ۲۴ جلسه ویدئویی با مجموع ۴ ساعت و ۲۳ دقیقه است.
با تهیه این آموزش، می‌توانید به همه بخش‌ها و جلسات آن، دسترسی داشته باشید.

راهنمای سفارش آموزش‌ها

آیا می دانید که تهیه یک آموزش از فرادرس و شروع یادگیری چقدر ساده است؟

(راهنمایی بیشتر +)

در مورد این آموزش یا نحوه تهیه آن سوالی دارید؟
  • با شماره تلفن واحد مخاطبین ۵۷۹۱۶۰۰۰ (پیش شماره ۰۲۱) تماس بگیرید. - تمام ساعات اداری
  • با ما مکاتبه ایمیلی داشته باشید (این لینک). - میانگین زمان پاسخ دهی: ۳۰ دقیقه


اطلاعات تکمیلی

نام آموزش آموزش مقدماتی آپاچی اسپارک برای پردازش کلان داده
ناشر فرادرس
شناسه اثر ۸–۱۲۴۵۲–۰۸۰۰۷۵ (ثبت شده در مرکز رسانه‌های دیجیتال وزارت ارشاد)
کد آموزش FVSPRK001
مدت زمان ۴ ساعت و ۲۳ دقیقه
زبان فارسی
نوع آموزش آموزش ویدئویی (نمایش آنلاین + دانلود)
حجم دانلود ۳۴۸ مگابایت (کیفیت ویدئو HD با فشرده سازی انحصاری فرادرس)


تضمین کیفیت و گارانتی بازگشت هزینه
توجه: کیفیت این آموزش توسط فرادرس تضمین شده است. در صورت عدم رضایت از آموزش، به انتخاب شما:
  • ۱۰۰ درصد مبلغ پرداختی در حساب کاربری شما شارژ می‌شود.
  • و یا ۷۰ درصد مبلغ پرداختی به حساب بانکی شما بازگشت داده می‌شود.
آموزش‌های مرتبط با آموزش مقدماتی آپاچی اسپارک برای پردازش کلان داده


آموزش‌های پیشنهادی برای شما


نظرات

تا کنون ۱۷۶ نفر از این آموزش استفاده کرده اند و ۱ نظر ثبت شده است.
majid
majid
۱۴۰۱/۰۱/۱۲

مدرس نه تنها مسلط به موضوع هستن بلکه قدرت کلام خیلی خوبی دارند. واقعا از خریدم راضی بودم

برچسب‌ها:
Apache Spark | RDD های جفت کلید - مقدار | آپاچی اسپارک | آموزش آپاچی اسپارک | استخراج دانش از داده ها | اصول RDD ها | برنامه نویسی با RDD | برنامه ‌نویسی با آپاچی اسپارک | پردازش توزیع شده داده ‌ها | پردازش کلان ‌داده | پردازش کلان ‌داده با آپاچی اسپارک | پشته اسپارک | پوسته‌ های آپاچی اسپارک | تاریخچه اسپارک | تبدیل ‌ها روی RDD های جفت | تبدیل‌ های RDD | تجزیه و تحلیل داده ها | تجزیه و تحلیل داده ‌های کلان | تجزیه و تحلیل کلان‌ داده | تحلیل داده ‌ها در سطح کلان | توابع در آپاچی اسپارک | دانلود آپاچی اسپارک | ساخت RDD | ساخت RDD های جفت | عملیات Reduce | عملیات روی RDD های جفت | عملیات ضرب دکارتی | عملیات های RDD | عملیات های RDD | عملیات‌ های شبه‌ مجموعه | مفهوم اسپارک | مقدمه‌ ای بر آپاچی اسپارک | نصب آپاچی اسپارک‌ | نصب آپاچی اسپارک‌
مشاهده بیشتر مشاهده کمتر
×
فهرست جلسات ۲۴ جلسه ویدئویی
×