پی سی دانلود - مهندسی-داده

یکی از سرویس‌های مهم گوگل در دسته‌بندی و ترکیب داده‌ها، به‌نام Cloud Data Fusion معرفی شد که سرویسی بامدیریت کامل برای هماهنگ کردن داده‌ها از منابع متفاوت و اتصال آن‌ها با منابع دیگر است. سرویس جدید، به سازمان‌ها امکان می‌دهد تا داده‌های انبارشده را دریافت کرده و برای تحلیل در BigQuery آماده کنند. سرویس BigQuery هم در برنامه‌های جدید توسعه‌ای به‌نام BigQuery Data Transfer دریافت کرد که امکان ارسال داده‌های بیشتر را به کاربران می‌دهد. به‌علاوه، با استفاده از این سرویس توسعه‌یافته می‌توان جابه‌جایی داده‌ها از اپلیکیشن‌های SaaS به BigQuery را به‌صورت اتوماتیک و طبق زمان‌بندی مشخص انجام داد. این سرویس علاوه‌بر اپلیکیشن‌های خود گوگل، از بیش از ۱۰۰ اپلیکیشن مشهور SaaS پشتیبانی می‌کند که از میان آن‌ها می‌توان به Salesforce، Marketo، Workday و Stripe اشاره کرد.
در دوره آموزشی Applied Machine Learning with BigQuery on Google Cloud Platform با آموزش یادگیری ماشین با بیگ کوئری روی پلتفرم ابری گوگل اشنا خواهید شد.

Apache Kafka یک پروژه متن باز message broker هست که توسط بنیان Apache به زبان scala نوشته شده است. این پروژه با هدف یکپارچه سازی و بازدهی بالا (high-throughput و low-latency) برای ساماندهی اطلاعات بلادرنگ (realtime) طراحی شده است. Apache Kafka در واقع اول توسط linkedin توسعه پیدا کرد تا زمانی که در سال ۲۰۱۱ به صورت متن باز درآمد. و بعد از تکمیل شدن توسط بنیان Apache مهندس هایی که روی این پروژه در linkedin کار میکردند با ثبت یک شرکت به نام Confluent با تمرکز روی Kafka آن را توسعه دادند.
در دوره آموزشی Apache Kafka Series - KSQL on ksqlDB for Stream Processing ! با آموزش آپاچی کافکا و کا اس کیو ال برای خواندن جریان اشنا خواهید شد.