پی سی دانلود - data-pipeline

pipeline، مجموعه ای از عناصر(مراحل) پردازش داده است که بصورت سری به یکدیگر متصلند و ورودی هر عنصر، خروجی عنصر قبلی است. در تکنیک pipeline، چند دستور میتوانند در یک زمان اجرا شوند. یعنی دستورات از لحاظ زمان اجرا دارای همپوشانی هستند. فرض کنید میخواهید تعداد زیادی لباس را شسته، خشک کرده و در محلشان قرار دهید. پس ابتدا لباسها را در لباسشویی قرار داده تا شسته شوند، سپس آنها را از لباسشویی خارج کرده و در خشک کن قرار می دهید و پس از خشک شدن، از خشک کن خارج کرده و در مرحله ی بعد، در محلشان قرار میدهید. و باز به سراغ سری بعدی لباسها رفته و برای آنها نیز این مراحل را تکرار می کنید. روش دیگر برای شستن تعداد زیاد لباس این است که در ابتدا تعدادی لباس را در لباسشویی قرار داده و پس از شسته شدن، آنها را از لباسشویی خارج کرده و در خشک کن قرار می دهیم، منتهی از سوی دیگر، تعدادی لباس دیگر را وارد لباسشویی(که فعلاً بیکار است)می کنیم و... . این روش پایپ لاین نام دارد.
در دوره آموزشی O'Reilly Data Pipelines with Python با پیاده سازی متد داده های پایپ لاین با استفاده از پایتون آشنا می شوید.