تجزیه وتحلیل داده های حجیم در تجارت الکترونیک با استفاده از هادوپ

با توجه به افزایش روزافزون حجم اطلاعات وگذر از اقتصاد سنتی و از میان رفتن مرزهای جغرافیایی برای کسب و کار و به تبع آن شدت یافتن رقابت باعث شده است در فضای مجازی به خصوص در تجارت الکترونیکی، امروزه یکی از چالش های مهم داده کاوی که مورد توجه اکثر سازمان ها می باشد پردازش روی مجموعه داده های بسیار بزرگ یا کلان داده است که توجه بسیاری از محققان و متخصصین در حوزه فناوری اطلاعات را به خود معطوف کرده است. برای پیاده سازی و انجام این کار مدل ها و روش های گوناگونی طراحی و ارایه شده است هادوپ Hadoop یکی از محصولات کد باز است که برای ذخیره سازی و پردازش حجم اطلاعات بسیار بالا طراحی شده است . هادوپ، امکان ذخیره سازی و پردازش اطلاعات در چندین سرور با هزینه ای پایین فراهم می آورد همچنین به دلیل داشتن انعطاف پذیری در پذیرش مقیاس بالای داده توسط دو ویژگی مهم یعنی معماری موازی Parallel architecture و روش نگاشت کاهش Map Reduce در این تحقیق از آن استفاده شده است .همچنین بدلیل رایگان و متن باز بودن این سیستمها، از توسعه بیشتر و هزینه بسیار کمتری نسبت به اکثر پایگاه داده های تجاری برخوردار است.هدف از این مقاله تجزیه و تحلیل داده های حجیم با استفاده از هادوپ می باشد