تبلیغات
«كشكول نامه» - موضوعات مرتبط با Big Data
 
«كشكول نامه»
درباره وبلاگ



مدیر وبلاگ : محمد سوری
نویسندگان
پیوندهای روزانه
پیوندها
آمار وبلاگ
  • کل بازدید :
  • بازدید امروز :
  • بازدید دیروز :
  • بازدید این ماه :
  • بازدید ماه قبل :
  • تعداد نویسندگان :
  • تعداد کل پست ها :
  • آخرین بازدید :
  • آخرین بروز رسانی :
با سلام خدمت همگی همراهان گرامی
بعد از مدت ها (نزدیک به یک سال) خواستم مطلبی را با شما خوبان به اشتراک بگذارم.

من در برهه ای از زمان مشغول تحقیق بر روی موضوعات مرتبط با Big Data (داده های بزرگ) بودم (برای کسب اطلاعات بیشتر، نیاز به جستجو دارید و در این پست در مورد این مبحث، صحبتی نخواهد شد ولی برای شروع، اینجا را ببینید). در این خصوص به نتایجی رسیدم که خواستم آن را با شما هم به اشتراک بگذارم (هر چند ممکن است مطالب نوشته شده در برخی بندها چندان واضح به نظر نرسد).

تعریفی از داده های بزرگ از وب سایت ویکی پدیا:
داده‌های عظیم، ابر داده، بزرگ‌داده یا داده‌های بزرگ (به انگلیسی: Big data) اصطلاحی است که به مجموعهٔ داده‌هایی اطلاق می‌شود که مدیریت، کنترل و پردازش آنها فراتر از توانایی ابزارهای نرم‌افزاری در یک زمان قابل تحمل و مورد انتظار است. مقیاس بزرگ‌داده، به طور مداوم در حال رشد از محدودهٔ چند ۱۰ ترابایت به چندین پتابایت، در یک مجموعهٔ داده واحد است. نـمونه‌هایی از بزرگ‌داده، گــزارش‌های وبی، سامانه‌های بازشناسی با امواج رادیویی، شبکه‌های حسگر، شبکه‌های اجتماعی، متون و اسناد اینترنتی، نمایه‌های جستجوهای اینترنتی، نجوم، مدارک پزشکی، آرشیو عکس، آرشیو ویدیو، پژوهش‌های زمین‌شناسی و تجارت در مقیاس بزرگ هستند.

1- تبدیل محتواهای عکس و متن (blogs, tweets, ...) به یک فرمت ساخت یافته برای تحلیل های بعدی

2- تحلیل داده، سازماندهی، بازیابی و مدل سازی

3- تحلیل داده های مورد استفاده در علم بیو انفورماتیک در پایگاه داده های public

4- تحیل کارایی دانشجویان از طریق بررسی فعالیت های آموزشی دانشجویان در وب

5- پیشگیری از وقوع یک بیماری خاص با پایش مداوم اطلاعات مرتبط با سلامتی شخص و تطابق آن با الگوهای موجود و در نتیجه کاهش هزینه های مراقبت (Healthcare)

6- برنامه ریزی شهری (Urban Planning) از طریق ادغام داده های جغرافیایی با دقت و صحت بالا (High-fidelty)

7- امنیت کامپیوتر از طریق تحلیل اطلاعات Log شده و دیگر رخدادها که به نام Security Information and Events Management (SIEM) شناخته می شود
8- مدل سازی محیطی (environmental) از طریق sensor networks ubiquitously collection data

9- ذخیره انرژی از طریق پرده برداری (unveiling) الگوهای کاربرد

10- مصالح هوشمند از طریق ابتکار ژن مصالح جدید (new materials genome initiative)

11- علوم اجتماعی محاسباتی (متدولوژی جدیدی که به سرعت در حال رشد است به دلیل هزینه بسیار پایین کسب داده (obtain data)

12- تحلیل ریسک سیستمی مالی از طریق تحلیل یکپارچه (مجتمع) یک بافت (web) از قراردادها برای یافتن وابستگی میان موجودیت های مالی

13- امنیت میهن (homeland) از طریق تحلیل شبکه های اجتماعی و تراکنش های مالی تروریست های ممکن (بالقوه)

14- انتقال هوشمند از طریق تحلیل و تجسم (Visualization) داده های زنده (live) و داده های با جزئیات از شبکه راه ها



برخی از چالش های Big data:
1- حجم داده ها

2- تنوع داده ها (ناهمگونی داده ها)

3- نمایش و ترجمه معنایی داده ها

4- نحوه تعریف فیلترهایی برای حذف و فشرده سازی داده های غیر ضروری به نحوی که داده های ضروری از بین نروند (کاهش هوشمند داده ها بدون از دست دادن داده های ضروری)



امیدوارم این مباحث به درد کسانی که پیگیر تحقیقات در حوزه داده های بزرگ هستند، مفید باشد.




نوع مطلب : تكنولوژی، مطالب آموزنده، 
برچسب ها : داده های بزرگ، داده های عظیم، Big Data، research،
لینک های مرتبط :

       نظرات
چهارشنبه 4 آذر 1394
محمد سوری
 
لبخندناراحتچشمک
نیشخندبغلسوال
قلبخجالتزبان
ماچتعجبعصبانی
عینکشیطانگریه
خندهقهقههخداحافظ
سبزقهرهورا
دستگلتفکر
نظرات پس از تایید نشان داده خواهند شد.