مقدمه ای بر Spark SQL و DataFrames

مدرس Dan Sullivan

انتشار 2019/05/30

به‌روز‌رسانی 2024/04/01

مدت زمان 1h 54m

سطح متوسط

فایل تمرینی دارد

آموزش Introduction to Spark SQL and DataFrames

DataFrames، یک ساختار داده پرکاربرد در Apache Spark را کاوش کنید. DataFrames به توسعه دهندگان Spark اجازه می دهد تا عملیات داده های رایج مانند فیلتر کردن و تجمیع و همچنین تجزیه و تحلیل داده های پیشرفته را روی مجموعه های بزرگ داده های توزیع شده انجام دهند. با اضافه شدن Spark SQL، توسعه دهندگان به زبان جستجوی محبوب تر و قدرتمندتر از DataFrames API داخلی دسترسی دارند. در این دوره، مدرس دن سالیوان نحوه انجام عملیات اساسی - بارگیری، فیلتر کردن، و جمع آوری داده ها در DataFrames - با API و SQL و همچنین تکنیک های پیشرفته تری را که به راحتی در SQL انجام می شود را نشان می دهد. در این بخش از دوره، Dan نحوه اتصال داده ها، حذف موارد تکراری و مقابله با مقادیر null یا NA را توضیح می دهد. دروس با سه مثال عمیق از استفاده از DataFrames برای علم داده به پایان می رسد: تجزیه و تحلیل داده های اکتشافی، تجزیه و تحلیل سری های زمانی، و یادگیری ماشین.

Apache Spark Data Management SQL

Introduction

Apache Spark SQL and data analysis ()

What you should know ()

1. Introduction to Spark DataFrames

Introduction to DataFrames ()

SQL for DataFrames ()

2. Installing Spark

Install Spark ()

Install PySpark ()

Using Jupyter notebooks with PySpark ()

3. Getting Started with Spark DataFrames

Set up a Jupyter notebook ()

Load data into DataFrames: CSV Files ()

Load data into DataFrames: JSON Files ()

Basic DataFrame operations ()

Filter data with DataFrame API ()

Aggregate data with DataFrame API ()

Sample data from DataFrames ()

Save data from DataFrames ()

4. SQL for DataFrames

Querying DataFrames with SQL ()

Filtering DataFrames with SQL ()

Aggregating Data with SQL ()

Joining DataFrames with SQL ()

Eliminating duplicates in DataFrames ()

Working with NA values in DataFrames ()

5. Data Analysis with Spark

Exploratory data analysis with DataFrames ()

Exploratory data analysis with Spark SQL ()

Timeseries analysis with DataFrames ()

Basic machine learning with DataFrames, part 1 ()

Basic machine learning with DataFrames, part 2 ()

Conclusion

Next steps ()

Ex_Files_Spark_SQL_DataFrames.zip (67 KB)

دانلود فایل فشرده

با توجه به امکانات آموزش و همچنین امکانات بسته انتخاب شده لینک دانلود فایل فشرده آماده خواهد شد. با در نظر داشتن این شرایط لطفا بسته مورد نظر خود را انتخاب کرده و روی دکمه درخواست لینک دانلود کلیک کنید

در حال به روزرسانی اطلاعات

درخواست لینک دانلود

در حال به روزرسانی اطلاعات

لطفا قبل از فعالسازی لینک دانلود به موارد زیر توجه کنید:

پسورد فایل‌های فشرده است.
لینک‌های آماده شده تا 8 روز پس از فعالسازی منقضی خواهند شد.
حجم فایل‌ها تخمینی هستند.
در صورتی که لینک دانلود تا 15دقیقه پس از درخواست آماده نشد، از بخش پشتیبانی پیگیری نمایید.

مسیرهای یادگیری آموزش مقدمه ای بر Spark SQL و DataFrames

یکی از مهمترین مشکلات افرادی که از آموزش های آنلاین استفاده می‌ کنند این است به دلیل تعداد زیاد این آموزش ها، کاربر دچار سردرگمی شده و نمی داند از کدام آموزش بهتر است شروع کند و یا با کدام آموزش ها مهارت های خود را ارتقا دهد. داشتن یک برنامه آموزشی گام به گام میتواند کاربران را از این مشکلات رها کند. در واقع مسیرهای یادگیری مجموعه ای از آموزش ها هستند که به ترتیب اولویت در کنار هم قرار گرفته اند تا کاربران را از این سردرگمی ها نجات دهند. این مسیرها در موضوعات مختلفی دسته بندی شده‌اند که در زیر، لیستی از همه دسته بندی مسیرهایی که توسط سایت لیندا ارائه شده اند را می توانید مشاهده کنید.

آموزش Introduction to Spark SQL and DataFrames در 1 مسیر آموزشی قرار دارد. تخصص مورد نظر خود را انتخاب کنید، با مسیر یادگیری آن همراه شوید و حرفه ای شوید.

Apache Spark به دلیل پخش جریانی، سرعت و مقیاس پذیری یکی از سریع ترین ابزارهای در حال رشد در علم داده است. داده های لینکدین اسپارک را به عنوان یکی از پرطرفدارترین مهارت ها در مهندسی داده و توسعه داده ها نشان می دهد. این مسیر یادگیری یک منبع ایده آل برای تقویت مهارت ها و رزومه شما است.

آموزش مقدمه ای بر Spark SQL و DataFrames ، ایستگاه شماره 2 در مسیر یادگیری مهارت های داده خود را در آپاچی اسپارک ارتقا دهید ، است.