Katta ma'lumotlarni qayta ishlash texnologiyalari. Reja Katta ma'lumotlar paradigmasi

Bu qanday amalga oshirilgan
Ijtimoiy media va mobil ilovalardan tortib biznes ma'lumotlarini qazib olish va vizualizatsiya qilishgacha turli biznes intizomlari uchun samarali Big Data yechimlarini yaratishga imkon beruvchi dasturiy va apparat vositalarining ko'plab kombinatsiyalari mavjud. Big Dataning muhim afzalligi - biznesda keng qo'llaniladigan ma'lumotlar bazalari bilan yangi vositalarning muvofiqligi, bu ko'p kanalli savdo va mijozlarni qo'llab-quvvatlash kabi tarmoqlararo loyihalar bilan ishlashda ayniqsa muhimdir.
Katta ma'lumotlar bilan ishlash ketma-ketligi ma'lumotlarni to'plash, hisobotlar va asboblar paneli yordamida olingan ma'lumotlarni tizimlashtirish, tushunchalar va kontekstlarni yaratish va harakatlar bo'yicha tavsiyalarni shakllantirishdan iborat. Katta ma'lumotlar bilan ishlash natijasi oldindan ma'lum bo'lmagan ma'lumotlarni to'plash uchun katta xarajatlarni nazarda tutganligi sababli, asosiy vazifa ma'lumotlarning qanchalik mavjudligini emas, balki nima uchun ekanligini aniq tushunishdir. Bunday holda, ma'lumotlarni to'plash faqat aniq muammolarni hal qilish uchun zarur bo'lgan ma'lumotlarni olish jarayoniga aylanadi.
Masalan, telekommunikatsiya provayderlari doimiy ravishda yangilanib turadigan geolokatsiya ma'lumotlarini o'z ichiga olgan katta hajmdagi ma'lumotlarni jamlaydi. Ushbu ma'lumotlardan maqsadli va mahalliy reklamalarni taqdim etishda foydalanishi mumkin bo'lgan reklama agentliklari, shuningdek, chakana sotuvchilar va banklar uchun tijorat qiziqishi bo'lishi mumkin. Bunday ma'lumotlar odamlarning kuchli maqsadli oqimi mavjudligi haqidagi ma'lumotlarga asoslanib, ma'lum bir joyda chakana savdo nuqtasini ochish to'g'risida qaror qabul qilishda muhim rol o'ynashi mumkin. Londonda bilbord reklamasining samaradorligini o'lchash misoli mavjud. Endilikda bunday reklamaning qamrovini faqat reklama tuzilmalari yaqinida o‘tkinchilarni hisoblaydigan maxsus qurilmaga ega odamlarni joylashtirish orqali o‘lchash mumkin. Reklama samaradorligini o'lchashning ushbu turi bilan taqqoslaganda, uyali aloqa operatori ko'proq imkoniyatlarga ega - u o'z abonentlarining joylashuvini aniq biladi, ularning demografik xususiyatlarini, jinsini, yoshi, oilaviy ahvolini va hokazolarni biladi.
Bunday ma'lumotlarga asoslanib, kelajakda e'lonlar taxtasi yonidan o'tayotgan ma'lum bir shaxsning afzalliklaridan foydalanib, reklama xabarining mazmunini o'zgartirish istiqbollari ochiladi. Agar ma'lumotlar yonidan o'tayotgan odam ko'p sayohat qilishini ko'rsatsa, ularga kurort reklamasi ko'rsatilishi mumkin. Futbol o‘yini tashkilotchilari o‘yinga kelgandagina muxlislar sonini taxmin qilishlari mumkin. Ammo agar ular uyali aloqa operatoridan o'yindan bir soat, kun yoki oy oldin tashrif buyuruvchilar qayerda bo'lganligi haqida ma'lumot so'rash imkoniga ega bo'lganlarida, bu tashkilotchilarga keyingi o'yinlarni reklama qilish uchun joylarni rejalashtirish imkoniyatini beradi.
Yana bir misol, banklar firibgarlikning oldini olish uchun Big Datadan qanday foydalanishi mumkin. Agar mijoz kartani yo‘qotib qo‘yganligini da’vo qilsa va u bilan xaridni amalga oshirayotganda bank real vaqt rejimida tranzaksiya amalga oshirilayotgan xarid hududida mijozning telefonining joylashgan joyini ko‘rsa, bank mijozning iltimosiga binoan ma’lumotlarni tekshirishi mumkin. uni aldamoqchi bo'lganmi yoki yo'qligini bilish uchun. Yoki aksincha vaziyat, mijoz do‘konda xarid qilganida, bank tranzaksiya uchun foydalanilgan karta va mijozning telefoni bir joyda ekanligini ko‘rib, bank kartani o‘z egasi ishlatgan degan xulosaga kelishi mumkin. Katta ma'lumotlarning ushbu afzalliklari tufayli an'anaviy ma'lumotlar omborlari bilan ta'minlangan chegaralar kengayib bormoqda.
Big Data yechimlarini muvaffaqiyatli amalga oshirish bo'yicha qaror qabul qilish uchun kompaniya investitsion ishni hisoblashi kerak va bu ko'plab noma'lum komponentlar tufayli katta qiyinchiliklarga olib keladi. Bunday hollarda analitikaning paradoksi o'tmishga asoslangan kelajakni bashorat qilishdir, buning uchun ko'pincha ma'lumotlar etishmaydi. Bunday holda, dastlabki harakatlaringizni aniq rejalashtirish muhim omil hisoblanadi:

• 
  Birinchidan, bitta aniq biznes muammosini aniqlash kerak, uni hal qilish uchun Big Data texnologiyalari qo'llaniladi, bu vazifa tanlangan kontseptsiyaning to'g'riligini aniqlashning asosiga aylanadi. Siz ushbu vazifaga xos bo'lgan ma'lumotlarni to'plashga e'tibor qaratishingiz kerak va kontseptsiyaning isboti kelajakda yanada oqilona qarorlar qabul qilishingizga yordam beradigan turli xil vositalar, jarayonlar va boshqaruv usullaridan foydalanish imkonini beradi.
  
• 
  Ikkinchidan, ma'lumotlarni tahlil qilish bo'yicha ko'nikma va tajribaga ega bo'lmagan kompaniya Big Data loyihasini muvaffaqiyatli amalga oshira olishi dargumon. Kerakli bilimlar har doim ma'lumotlar bilan ishlash sifatiga ta'sir qiluvchi asosiy omil bo'lgan analitika bo'yicha oldingi tajribadan kelib chiqadi. Ma'lumotlardan foydalanish madaniyati muhim ahamiyatga ega, chunki ko'pincha ma'lumotni tahlil qilish biznes haqidagi qattiq haqiqatni ochib beradi va bu haqiqatni qabul qilish va u bilan ishlash uchun ma'lumotlar bilan ishlashning ishlab chiqilgan usullari kerak bo'ladi.
  
• 
  Uchinchidan, Big Data texnologiyalarining ahamiyati tushunchalarni taqdim etishdadir.Yaxshi tahlilchilar bozorda tanqisligicha qolmoqda. Ularni ma'lumotlarning tijorat ma'nosini chuqur tushunadigan va undan to'g'ri foydalanishni biladigan mutaxassislar deb atash odatiy holdir. Ma'lumotlarni tahlil qilish biznes maqsadlariga erishish vositasidir va Big Data qiymatini tushunish uchun sizga tegishli xatti-harakatlar modeli va harakatlaringizni tushunish kerak. Bunday holda, katta ma'lumotlar iste'molchilar haqida juda ko'p foydali ma'lumotlarni taqdim etadi, ular asosida biznesingiz uchun foydali bo'lgan qarorlar qabul qilishingiz mumkin.
  

Rossiyaning Big Data bozori endigina shakllana boshlaganiga qaramay, ushbu sohadagi individual loyihalar allaqachon muvaffaqiyatli amalga oshirilmoqda. Ulardan ba'zilari Federal Soliq xizmati va Tinkoff kredit tizimlari banki loyihalari kabi ma'lumotlarni yig'ish sohasida muvaffaqiyatli, boshqalari ma'lumotlarni tahlil qilish va uning natijalarini amaliy qo'llash bo'yicha: bu Synqera loyihasi.
Tinkoff Credit Systems Bank massiv parallel hisoblash uchun vosita bo'lgan EMC2 Greenplum platformasini amalga oshirish loyihasini amalga oshirdi. Davomida so'nggi yillar bank to'plangan ma'lumotlarni qayta ishlash tezligi va real vaqt rejimida ma'lumotlarni tahlil qilish talablarini oshirdi, bu kredit kartalaridan foydalanuvchilar sonining yuqori o'sish sur'ati bilan bog'liq. Bank Big Data texnologiyalaridan foydalanishni kengaytirish, xususan, tuzilmagan ma’lumotlarni qayta ishlash va turli manbalardan olingan korporativ ma’lumotlar bilan ishlash rejalarini e’lon qildi.
Rossiya Federal Soliq xizmati hozirda federal ma'lumotlar ombori uchun tahliliy qatlamni yaratmoqda. Uning asosida bitta axborot maydoni va statistik va analitik ishlov berish uchun soliq ma'lumotlariga kirish texnologiyasi. Loyihani amalga oshirish jarayonida Federal Soliq xizmati inspektsiyasining mahalliy darajadagi 1200 dan ortiq manbalari bilan tahliliy ma'lumotlarni markazlashtirish bo'yicha ishlar olib borilmoqda.
Haqiqiy vaqtda katta ma'lumotlarni tahlil qilishning yana bir qiziqarli misoli Simplate platformasini ishlab chiqqan rus startapi Synqeradir. Yechim katta hajmdagi ma'lumotlarni qayta ishlashga asoslangan; dastur mijozlar, ularning xarid qilish tarixi, yoshi, jinsi va hatto kayfiyati haqidagi ma'lumotlarni tahlil qiladi. Kosmetika do'konlari tarmog'idagi kassalarda xaridorlarning his-tuyg'ularini tan oladigan sensorli sensorli ekranlar o'rnatildi. Dastur odamning kayfiyatini aniqlaydi, u haqidagi ma'lumotlarni tahlil qiladi, kunning vaqtini aniqlaydi va do'konning chegirmalar bazasini skanerdan o'tkazadi, shundan so'ng u xaridorga aktsiyalar va maxsus takliflar haqida maqsadli xabarlarni yuboradi. Ushbu yechim mijozlarning sodiqligini oshiradi va chakana savdoni oshiradi.
Agar muvaffaqiyatli xorijiy holatlar haqida gapiradigan bo'lsak, bu borada Dunkin`Donuts kompaniyasida mahsulotlarni sotish uchun real vaqt ma'lumotlaridan foydalanadigan Big Data texnologiyalaridan foydalanish tajribasi qiziq. Do'konlardagi raqamli displeylar kunning vaqti va mahsulot mavjudligiga qarab har daqiqada almashinadigan takliflarni ko'rsatadi. Kompaniya kassir kvitansiyasidan ma'lumotlarni oladi, bu takliflar xaridorlardan eng ko'p javob olgan. Ma'lumotlarni qayta ishlashga bunday yondashuv omborda foyda va tovar aylanmasini oshirish imkonini berdi.
Big Data loyihalarini amalga oshirish tajribasi shuni ko'rsatadiki, bu soha zamonaviy biznes muammolarini muvaffaqiyatli hal qilish uchun mo'ljallangan. Shu bilan birga, katta ma'lumotlar bilan ishlashda tijorat maqsadlariga erishishning muhim omili iste'molchilar talablarini aniqlaydigan tahlillarni, shuningdek, Big Data sohasida innovatsion texnologiyalardan foydalanishni o'z ichiga olgan to'g'ri strategiyani tanlashdir.
Econsultancy va Adobe kompaniyalari tomonidan 2012 yildan beri har yili kompaniya sotuvchilari oʻrtasida oʻtkazilayotgan global soʻrovga koʻra, odamlarning internetda oʻzini qanday tutishi haqidagi “katta maʼlumotlar” koʻp ish qilishi mumkin. Ular oflayn biznes jarayonlarini optimallashtirishga qodir, mobil qurilmalar egalari ma'lumotni topish uchun ulardan qanday foydalanishini tushunishga yordam beradi yoki oddiygina "marketingni yaxshilaydi", ya'ni. samaraliroq. Bundan tashqari, biz bergan diagrammadan ko'rinib turibdiki, oxirgi funktsiya yildan-yilga tobora ommalashib bormoqda.