ویدئو : آموزش اصول پایه اسپارک – لیندا | مهندسی داده

ویدئو : آموزش اصول پایه اسپارک – لیندا

۱۳۹۶/۰۱/۲۴
آموزش های ویدئویی

نظر بدهید
572 مشاهده

اگر از دنبال کنندگان مباحث علم داده در دنیا باشید، می دانید که نسل دوم سامانه های پردازشی کلان داده با ابداع و رواج اسپارک ، رقم خورد به گونه ای که امروزه کار با اسپارک ، به عنوان یک ضرورت برای دانشمندان داده تبدیل شده است.

اسپارک با تمرکز بر پردازش های درون حافظه ای و ابداع مکانیزمی برای بازیابی محاسبات و تبدیلات انجام شده بر روی مجموعه داده ها در صورت رخداد خطا، محبوبیت زیادی در بین جامعه فعلی دانشمندان و تحلیلگران داده دارد.

این مجموعه آموزشی که به صورت روان و توسط سایت معتبر لیندا در سال ۲۰۱۷ تهیه شده است، با تکیه بر زبان پایتون و محیط تحت وب سایت DataBricks مفاهیم اصلی این چارچوب پردازشی را در یک آموزش یک ساعت و نیمی  به شما ارائه خواهد کرد.

 

توصیه می کنیم ابتدا، دو مقاله زیر را در سایت مهندسی داده مرور کرده ، اکانت لازم را برای خود در سایت Databricks ایجاد کرده، با مفاهیم اصلی این چارچوب آشنا شده و  سپس با مشاهده این آموزش ساده و روان و البته مختصر، گام های اولیه را در حوزه پردازش کلان داده بردارید.

  1. آشنایی با اسپارک – راه اندازی محیط کار
  2. آموزش اسپارک – مفاهیم پایه
.uac5701046a5966432402f5b8a34dcea4 { padding:0px; margin: 0; padding-top:1em!important; padding-bottom:1em!important; width:100%; display: block; font-weight:bold; background-color:#ECF0F1; border:0!important; border-left:4px solid #2980B9!important; box-shadow: 0 1px 2px rgba(0, 0, 0, 0.17); -moz-box-shadow: 0 1px 2px rgba(0, 0, 0, 0.17); -o-box-shadow: 0 1px 2px rgba(0, 0, 0, 0.17); -webkit-box-shadow: 0 1px 2px rgba(0, 0, 0, 0.17); text-decoration:none; } .uac5701046a5966432402f5b8a34dcea4:active, .uac5701046a5966432402f5b8a34dcea4:hover { opacity: 1; transition: opacity 250ms; webkit-transition: opacity 250ms; text-decoration:none; } .uac5701046a5966432402f5b8a34dcea4 { transition: background-color 250ms; webkit-transition: background-color 250ms; opacity: 1; transition: opacity 250ms; webkit-transition: opacity 250ms; } .uac5701046a5966432402f5b8a34dcea4 .ctaText { font-weight:bold; color:inherit; text-decoration:none; font-size: 16px; } .uac5701046a5966432402f5b8a34dcea4 .postTitle { color:#D35400; text-decoration: underline!important; font-size: 16px; } .uac5701046a5966432402f5b8a34dcea4:hover .postTitle { text-decoration: underline!important; }

برای مطالعه :   آموزش اسپارک: مفاهیم پایه

سرفصلهای دوره :

  • آشنایی با اسپارک
  • مروری بر مولفه های اصلی اسپارک
  • بررسی نقاط قوت اسپارک
  • ارتباط با داده ها
  • کار با فایلهای متنی
  • بارگزاری فایلهای CSV در DataFrame‌ ها
  • استفاده از Spark SQL برای تحلیل داده ها
  • اجرای الگوریتم های یادگیری ماشین با کتابخانه MLib
  • کار با داده های جریانی و پیوسته
  • نحوه اتصال ابزارهای هوش تجاری با اسپارک

 

مشخصات دوره :

  • ناشر : لیندا
  • زبان :  انگلیسی – روان و ساده
  • سطح : متوسط
  • طول دوره : ۸۷ دقیقه
  • مدرس : Ben Sullins
  • تاریخ انتشار : ۴/۳/۲۰۱۷
  • پیش نیاز : آشنایی اولیه با پایتون، SQL‌، هدوپ و هایو (Hive)

 

 


۱۳۹۶-۰۱-۲۴

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *