مطالب دارای تگ: یکپارچهسازی داده
6 مورد برای عبارت مورد نظر پیدا شد.
6 مورد برای عبارت مورد نظر پیدا شد.
این دوره آموزشی تخصصی با تمرکز بر پیادهسازی عملی، فراگیران را برای تسلط کامل بر بسترهای مدرن تحلیل داده و فناوری مایکروسافت فابریک آماده میسازد. در طول این دوره، شرکتکنندگان با مراحل طراحی و اجرای لایههای برنز، نقرهای و طلایی بر اساس معماری مدالیون آشنا شده و توانایی خود را در ساخت خطوط لوله خودکار، مدیریت لِیکهاوس، استفاده از دفترچههای اسپارک، جداول دلتا و انبار داده ارتقا میدهند. علاوه بر این، ابعاد حیاتی پروژههای صنعتی مانند اعتبار سنجی طرحوارهها، ثبت وقایع و حسابرسی، مدیریت خطاها و پایش هوشمند خطوط انتقال داده بهطور کامل آموزش داده میشود تا برنامههای ساخته شده کاملاً آماده ورود به محیط عملیاتی باشند.
هدف اصلی دوره، انتقال تجربه واقعی در زمینه گردش کارهای مهندسی داده در سطح سازمانی است. فراگیران در مسیر آموزش با استانداردهای کدنویسی قابل اتکا، طراحی خطوط لوله بازاستفادهپذیر، تکنیکهای ارکستراسیون و روشهای سنجش کیفیت داده آشنا میشوند. تمرکز تمامی فصلها بر پیادهسازی گامبهگام و سناریوهای واقعی است تا دانشپژوهان بتوانند پروژههایی مقیاسپذیر، قابل نگهداری و استاندارد خلق کنند. در پایان دوره، شرکتکنندگان یک پروژه کامل مایکروسافت فابریک همراه با سورسکد جامع در اختیار خواهند داشت که میتوانند با اطمینان کامل آن را در مصاحبههای شغلی، رزومه حرفهای و نمونهکارهای خود ارائه دهند و مهارتی ارزشمند در حوزه تحلیل دادههای مدرن به دست آورند.
در دوره آموزشی Microsoft Fabric Medallion Architecture Project | End-to-End با مهندسی داده در مایکروسافت فابریک آشنا خواهید شد.
پلتفرم دیتابریکس به یکی از ابزارهای محور و اساسی در دنیای مهندسی داده تبدیل شده است و فراگیری آن برای متخصصان داده اهمیت بسیار زیادی دارد. در این دوره آموزشی جامع، شرکتکنندگان با مسیر کامل و گامبهگام فرایند ساخت جریانهای کاری داده مدرن در بستر دیتابریکس آشنا میشوند. فرایند آموزش از نخستین مرحله، یعنی استخراج و وارد کردن دادههای خام به محیط سیستم آغاز میشود و تا مرحله انتقال، بازسازی، تبدیل و تنظیم نهایی دادهها ادامه مییابد. در نهایت، فراگیران یاد میگیرند که چگونه دادههایی کاملاً پاکسازیشده، مرتب و آماده برای تحلیلهای پیشرفته تجاری و آماری ارائه دهند.
صرفنظر از اینکه فراگیران در ابتدای مسیر یادگیری دیتابریکس باشند یا قصد داشته باشند مهارتهای مهندسی داده خود را به سطوح بالاتر و حرفهایتری ارتقا دهند، این دوره تمامی مفاهیم پیچیده را به روشی کاملاً ساده، کاربردی و مناسب برای افراد مبتدی تشریح میکند. آموزشها تنها به مباحث نظری محدود نمیشوند، بلکه با ارائه پیشنمایشهای عملی، تمرینهای دستبهنقد و نمونههای واقعی در دنیای تجارت همراه است تا شرکتکنندگان تجربه ملموسی از کار با پروژه کسب کنند. لازم به ذکر است که این دوره آموزشی ارزشمند توسط الکس فربیرگ و مجموعه آنالیست بیल्डर تهیه و تولید شده است و محتوای آن برای بهرهمندی علاقهمندان در اختیار کاربران قرار گرفته است تا بتوانند دانش فنی خود را در حوزه داده گسترش دهند.
در دوره Modern Data Workflows with Databricks با مهندسی و مدیریت دادهها در دیتابریکس آشنا خواهید شد.
Azure Data Factory (ADF) یک سرویس مبتنی بر فضای ابری برای ETL (استخراج، تبدیل، بارگذاری) و یکپارچهسازی دادهها است که توسط مایکروسافت ارائه شده است. این سرویس به سازمانها امکان میدهد تا دادهها را از منابع متعدد، از جمله منابع محلی، در فضای ابری یا در پلتفرمهای مختلف، انتقال، تبدیل و هماهنگسازی کنند. این سرویس به عنوان خط لوله داده در محیط Azure عمل میکند و امکان اتصال، پاکسازی و تحویل دادهها به سیستمهایی مانند دریاچههای داده، انبارهای داده، پلتفرمهای هوش تجاری و خطوط لوله یادگیری ماشین را فراهم میآورد. عملکرد Azure Data Factory بر اساس یک رویکرد گردش کاری است که شامل چهار مرحله اصلی است: ADF از طریق سرویسهای پیوندی به بیش از ۱۰۰ منبع داده مانند SQL Server، Azure Blob Storage، Amazon S3، Google Cloud Storage، Salesforce و SAP متصل میشود. دادهها به صورت دستهای یا در زمان واقعی دریافت میشوند. ADF از Data Flows (یک رابط بصری و بدون نیاز به کد برای تبدیل داده) یا فعالیتهای سفارشی مانند اسکریپتهای SQL، وظایف Spark، نوتبوکهای Databricks و رویههای ذخیرهشده استفاده میکند. تبدیلها ممکن است شامل ادغام، فیلتر کردن، تجمیع، تبدیل فرمت (مانند تبدیل CSV به JSON و Parquet) و پاکسازی دادهها باشد.
در دوره آموزشی Azure Data Factory (ADF): Build Scalable Data Pipelines با مبانی Azure Data Factory و ساخت خطوط لوله داده آشنا خواهید شد.
در دنیای امروزی که بر پایه داده بنا شده است، سازمانها حجم بسیار زیادی از دادهها را جمعآوری و ذخیره میکنند. Data Lake ها به عنوان یک جزء حیاتی در این اکوسیستم داده ظهور کردهاند. دوره Data Lake Fundamentals برای این طراحی شده است که شما را با دانش و مهارتهای ضروری برای حرکت در دنیای Data Lake ها مجهز کند. چه یک متخصص داده با تجربه باشید، چه یک دانشمند داده مشتاق، یا یک رهبر کسبوکار که میخواهد از داده برای تصمیمگیریهای استراتژیک استفاده کند، این دوره برای پاسخگویی به نیازهای شما تنظیم شده است. در این دوره، شرکتکنندگان با مفاهیم بنیادی Data Lake ها آشنا میشوند و تفاوت آنها را با راهکارهای سنتی ذخیرهسازی داده درک خواهند کرد. آنها یاد خواهند گرفت که چگونه دادهها را با استفاده از روشهای مختلف، از جمله پردازش دستهای (batch processing) و جریان داده بیدرنگ (real-time streaming)، به یک Data Lake وارد کنند (ingest). همچنین، دنیای فرمتهای داده و راهکارهای ذخیرهسازی، از جمله فرمتهای فایل محبوب و سیستمهای ذخیرهسازی مورد بررسی قرار خواهد گرفت. بخش مهم دیگری از دوره به آمادهسازی، پاکسازی و تبدیل دادهها (data transformation) در یک Data Lake برای انجام تحلیلهای معنادار اختصاص دارد. شرکتکنندگان هنر پرس و جو (querying) و تحلیل دادههای ذخیره شده در Data Lake ها را با استفاده از SQL، Apache Hive و سایر ابزارها فرا خواهند گرفت. در نهایت، جنبههای حیاتی حکمرانی داده (data governance)، امنیت (security) و انطباق (compliance) در محیطهای Data Lake مورد بحث و بررسی قرار خواهد گرفت تا شرکتکنندگان بتوانند Data Lake های ایمن و قابل اعتمادی را مدیریت کنند.
در دوره آموزشی Data Lake Fundamentals با مفاهیم کلیدی و نحوه کار با Data Lake ها آشنا خواهید شد.
این دوره آموزشی برای تبدیل شدن به یک مهندس داده حرفهای در Databricks طراحی شده است. شرکتکنندگان در این دوره، با راهنماییهای مربی، Deepak Goyal، نحوه دیباگ کردن، پردازش و تحلیل حجم عظیمی از دادهها و ساختن راهحلهای مقیاسپذیر را به صورت عمیق فرا خواهند گرفت. این دوره به بررسی دقیق نحوه عملکرد پلتفرم Databricks میپردازد. شرکتکنندگان با PySpark transformation و Spark SQL در Databricks، همچنین نحوه خواندن و نوشتن DataFrame در Databricks آشنا خواهند شد. علاوه بر این، موضوعاتی مانند Delta Lake، join optimizations، notebook scheduling، cluster management، workflows و موارد دیگر نیز در این دوره پوشش داده میشوند.
در دوره آموزشی Complete Guide to Databricks for Data Engineering با مهندسی داده با پلتفرم Databricks آشنا خواهید شد.
این دوره آموزشی برای آموزش مهندسی داده در محیط Azure cloud طراحی شده است. این دوره شامل مباحثی از جمله SQL، data warehousing، Azure Data factory، Python programming، big data، Databricks، PySpark، Delta lake، Spark structured streaming و Azure devops می باشد. این دوره برای افرادی که می خواهند در زمینه مهندسی داده در Azure cloud فعالیت کنند، مناسب است.
در دوره آموزشی Azure Data Engineering End-to-end Course (English) با ابزار ها و تکنولوژی های مهندسی داده در محیط Azure cloud آشنا خواهید شد.