دانلود پایان نامه : بررسی چالش ها و بهبود فرآیند سیستم های استریم اکسترنال

پردازش جریان داده توزیع شده یک حوزه تحقیقاتی محبوب است و یکی از الگوی های امیدوار کننده برای مدیریت سریعتر و کارآمد داده است. وضعیت برنامه تقریباً در هر سیستم پردازش جریان یک سیتیزن درجه یک است. امروزه ، با توجه به تعریف ، پردازش جریان کاملاً مطبوع است. برای یک برنامه پردازش جریان ، وضعیت از عملیات مانند تجمع ، پیوستن و پنجره پشتیبانی می کند. Apache Flink یکی از سیستم های پردازش جریان قابل قبول و پرکاربرد در صنعت است. یکی از مهمترین دلایلی که مهندسان Apache Flink را برای نوشتن و استقرار برنامه های مداوم انتخاب کرده اند ، ترکیب منحصر به فرد آن از انعطاف پذیری و مقیاس پذیری برای برنامه پذیری مناسب و تضمین محکم سیستم است. ضمانت های Apache Flink همیشه وضعیت های آن را صحیح و سازگار می کند حتی در صورت خرابی گره ها یا تغییر تعداد کارها. حالت Flink می تواند تا مرزهای دیسک سخت گره محاسبه شده خود را با استفاده از پایگاه داده های تعبیه شده برای ذخیره و بازیابی داده ها ، مقیاس بندی کند. با این وجود ، در تمام دولت های موجود که به طور رسمی توسط Flink پشتیبانی می شوند ، این ایالت همیشه برای محاسبه وظایف به صورت محلی در دسترس است. حتی اگر این امر استقرار را راحت تر می کند ، چالش های دیگری مانند پیکربندی مجدد حالت غیر پیش پا افتاده و بازیابی خرابی را ایجاد می کند. در همان زمان ، محاسبه و حالت قطعاً بهم پیوسته است. این استراتژی همچنین منجر به تأمین بیش از حد می شود و فقط برای بارهای فشرده دولت یا فقط بارهای محاسباتی فشرده است. این پایان نامه یک ساختار جایگزین باطن دولت ، FlinkNDB را بررسی می کند ، که می تواند این چالش ها را حل کند. FlinkNDB با استفاده از یک پایگاه داده توزیع شده برای ذخیره حالت ، حالت را جدا و محاسبه می کند. این رساله چالشهای موجود در زمینه های موجود و گزینه های طراحی و اجرای جدید دولت را شامل می شود. ما اجرای FlinkNDB را در برابر دولتهای موجود موجود توسط Apache Flink ارزیابی کرده ایم.