بررسی برنامه ریزی در Hadoop

سال انتشار: 1395
نوع سند: مقاله کنفرانسی
زبان: فارسی
مشاهده: 374

فایل این مقاله در 7 صفحه با فرمت PDF قابل دریافت می باشد

استخراج به نرم افزارهای پژوهشی:

لینک ثابت به این مقاله:

شناسه ملی سند علمی:

NCAEE02_028

تاریخ نمایه سازی: 11 مرداد 1396

چکیده مقاله:

چارچوب نرم افزاری Hadoop بر اساس سیستم پردازش فایل HDFS می باشد. این سیستم درصد خطای بسیار کمی دارد یه این معنیکه مشکلات کمی را بهمراه دارد و مکانیزم آن کم هزینه است و حتی میتوان آن را بروی سخت افزارهای کم هزینه نیز به کار گرفت.ازآنجاییکه Hadoop هم برای حجم زیادی از اطلاعات مناسب است و اینکه دسترسی به اطلاعات برنامه مورد استفاده را با سرعت بالا میسر می کند. طراحی Hadoop به صورت خوشه ای (دسته ای) می باشد که شامل گره داده,گره نام **یا نام گره می باشد که این گره ها در حالت ایده آل از نظر فیزیکی جدا از هم می باشند.عملکرد Hadoop را می توان با انتقال، انتصاب و واگذاری وظایف زمانبندی پیش فرض افزایش داد. در Hadoop برنامه ای با نام Map-Reduce وجود دارد برای نگاشت کاهش و یا کاهش جزییات وجود دارد که برای جمع آوری اطلاعات بر اساس جستجو searching بکارگرفته می شود. از آن جاییکه Hadoop برای مقادیر بالایی از اطلاعات استفاده می شود، بنابراین برنامه ریزی آن در جهت عملکرد بهتر باشد. هدف تحقیق, مطالعه و تحلیل تکنیک های مختلف برنامه ریزی می باشد که جهت افزایش سطح عملکرد در Hadoop مورد استفاده قرار می گیرد.

مراجع و منابع این مقاله:

لیست زیر مراجع و منابع استفاده شده در این مقاله را نمایش می دهد. این مراجع به صورت کاملا ماشینی و بر اساس هوش مصنوعی استخراج شده اند و لذا ممکن است دارای اشکالاتی باشند که به مرور زمان دقت استخراج این محتوا افزایش می یابد. مراجعی که مقالات مربوط به آنها در سیویلیکا نمایه شده و پیدا شده اند، به خود مقاله لینک شده اند :
  • Job Scheduling for Multi-User MapReduce Clusters, Matei Zaharia , hruba ...
  • Job Aware Scheduling Algorithm for MapReduce Framework by Radheshyam Nanduri, ...
  • A Comparative review of job scheduling for MapReduce, Dongjin Yoo, ...
  • Matchma king: A New MapReduce Scheduling Technique Chen He Ying ...
  • Survey on Improved Scheduling in Hadoop MapReduce in Cloud Envi ...
  • Ouincy: Fair Scheduling for Distributed Computing Clusters , Michael Isard, ...
  • Apache Hadoop: http ://H adoop.a pache.org ...
  • Hadoop Tutorial: http ://d eveloper.ya hoo. CO m/h adoop/tuto rial/module1. ...
  • Tom white, Hadoop Definitive Guide, Third Edition, 2012 ...
  • Research on Job Scheduling Algorithm in Hadoop Yang XIA+, Lei ...
  • نمایش کامل مراجع