كاوش دادههاي بزرگ: چالشها و پيامدها

دادههاي بزرگ مجموعهاي از مجموعه دادهها هستند كه بسيار پيچيده و بزرگ است. مجموعه دادهها روز به روز رشد ميكنند. به اشتراك گذاري، انتقال، ذخيره و غيره بيشترين چالشهايي هستند كه دادههاي بزرگ با آنها مواجهند. داده كاوي الگوهايي از مجموعه هاي بزرگ را پيدا مي كند. دادهكاوي با دادههاي بزرگ كاري پيچيده است. تئوري HACE فرضيهاي است كه روابط پيچيده و درحال تحول بين دادهها را پيدا ميكند بعبارتي ويژگيها و خصوصيات دادههاي بزرگ را مييابد. در اين مقاله بررسي مي- كنيم كه چگونه سامانههاي مديريت پايگاه دادههاي مرسوم نميتوانند با دادههاي بزرگ مواجه شوند و دادههاي بزرگ شروع به ظهور ميكنند. پيامدها و چالشهاي دادههاي بزرگ و ابزارهاي رايج براي پيادهسازي و تحليل آنها را شرح ميدهيم. به بررسي تكنيكهاي شاخصگذاري مانند MapReduce خواهيم پرداخت كه به دادههاي بزرگ اضافه ميشوند و در بسياري برنامهها مانند اناگرام و مسئله دوستان مشترك و غيره به كار مي- روند. برخي ديگر از برنامههاي جهاني دادههاي بزرگ نيز مورد بحث قرار مي- گيرند. در آخر نيز به مقايسه كلي تكنيكهاي مختلف داده كاوي خواهيم پرداخت.