Question

big data چیست و چه رابطه ای با دیتابیس دارد؟

Comments

اگر یکم توضیح بدید مربوط به کدام قسمت میشه ممنون می شم
مثلا یه دیتا تایپ جدیده یا یک دستور SQL ای هستش یا . . .
چون هرچی سرچ می کنم فقط میگه که SQLServer,MySQL چه زبان ها و برنامه های خوبی هستن و می تونن داده های بزرگ (big data) رو مدیریت کنن

---

خودم هم نمی دونم دقیقا. گفته شده سیستم های big data.

Answer 1

شرکت‌های بزرگ مثل گوگل، یاهو، آمازون، فیس‌بوک و توییتر از عوامل اصلی ایجاد و شکل‌گیری هیجان‌های اولیه درباره بزرگ داده‌ها بودند. جریان داده‌های ناشی از کلیک (Clikstream) که کاربران برای این شرکت‌ها ایجاد می‌کردند، منجر به تولید انبوهی از داده‌ها شد؛ داده‌هایی که فقط هنگامی که یکجا جمع و پردازش شوند، ارزش واقعی پیدا می‌کنند. در این روند به تدریج، حجم و جریان اطلاعات آنقدر زیاد شد که دیگر با روش‌های تحلیل وب سنتی نمی‌شد آنها را سازماندهی کرد.

 
کلان داده (Big Data)

* هیچ تعریف استاندارد واحدی وجود ندارد ...
کلان‌داده‌ها داده‌هایی هستند که مقدار، تنوع، پیچیدگی آن‌ها نیازمند معماری، ابزارها، الگوریتم‌ها و تحلیل‌های جدید و متفاوتی برای مدیریت داده‌ها و استخراج اطلاعات پنهان از درون آن‌ها می باشد

حجم داده‌ها
افزایش 44 برابری از سال 2009 تا سال 2020
از 0.8 زتابایت به 35 زتابایت
حجم داده‌ها به صورت نمایی رشد می‌کند

داده رابطه‌ای (جداول ، معامله ، میراث داده ها)
داده متنی ( وب )
داده نیمه ساخت‌یافته ( XML )
داده گرافی
شبکه اجتماعی  ، وب معنایی (RDF  )

جریان داده‌ها
شما فقط یک بار می توانید داده‌ها را اسکن کنید

یک برنامه ساده میتواند بسیاری از انواع داده را تولید یا جمع‌آوری کند

کلان‌داده عمومی (آنلاین ، آب و هوا ، امور مالی و ... )

سرعت :

داده‌ها به سرعت در حال تولید هستند و به سرعت نیاز به پردازش دارند
تجزیه و تحلیل آنلاین داده‌ها
تصمیم‌گیری دیرهنگام = از دست رفتن فرصت‌ها
مثال‌ها
تبلیغات الکترونیکی : بر اساس مکان فعلی شما ، سابقه خرید شما ، آنچه که شما علاقه دارید تبلیغات فروشگاه برای شما ارسال می‌شود
نظارت بر بهداشت و درمان : سنسورهای نظارت بر فعالیت‌ها و بدن خود هر اندازه‌گیری غیر‌طبیعی نیاز به واکنش فوری دارد

 

منبع : www.occc.ir

Answer 2

Big Data , وقتی سیستمهایی که ما فکر میکنیم خیلی بزرگن از پس محاسبات برنمیان! BD اصولا یه دسته از اطلاعات خیلی بزرگ هستن که روشهای محاسباتی عادی جلوشون زانو میزنن و ماشینهای محاسباتی پیچیده به وسط میان تا بتونن از طریق پردازش این اطلاعات, الگوها, نمودارها و از همه مهمتر , نحوه ارتباط انسان در این تعمالات اطلاعاتی رو پیدا کنن.

مثلا نحوه تعامل کاربران ف ی* س/ ب...وک رو آنالیز میکنن و بر همین اساس میشه به 1 نفر دوستانی که فکر میکنه اون طرف میشناسه یا بازیهایی که اون طرف دوست داره بهش پیشنهاد میشه. بعد باز همه اینا آنالیز میشه تا درصد موفقیت سیستم و هوش مصنوعیش در ارایه سرویس بهتر به مشتری مورد بررسی قرار میگیره. بعدی این اطلاعات میره به دپارتمان مربوط , بعد از اونجا باز آنالیز میشه , بعدش و بعدش و بعدش...میبنی؟ همش داره پردازش میشه ! اون ماشین بدبخت هی جون میکنه , برنامه نویس و آنالیزور گریشون در میاد فقط و فقط واسه چی؟ واسه اینکه غول شبکه های اجتماعی توی رقابت کم نیاره!!!