Big data
Big Data-ның таңқаларлық өсуі
Бәрі Дижитал дәуір басталғалы бері адамзат жинаған мәліметтер жарылысынан басталады. Бұл әрине, компьютерлер санының көбеюімен, Интернетпен және біз өмір сүріп отырған әлемнен мәліметтер жинайтын технологиялардың пайда болуына байланысты. Мәліметтер өздері жаңадан ойлап табылған жоқ. Компьютер дәуірі мен мәліметтер базасынан бұрынғы қағаз жазбалар, архивтегі материалдар мәліметке жатады. Компьютерлер, электрондық кестелер, мәліметтер базасы сол мәліметтерді үлкен ауқымда сақтау мен ретке келтірудің әдісін берді. Аяқ астынан сізге мәліметтер «тышқанды» шырт еткізу қалуы арқылы қолжетімді бола қалды.
Дегенмен алғашқы кестелер мен мәліметтер базасынан бері ұзақ жол жүрілді. Мысалы бүгін, екі күнде жасалып жинақталатын мәліметтер адамзаттың 2000 жылдарға дейін жасалған, жиналған мәліметтерімен бірдей екен. Иә, иә әрбір екі күнде. 2020 жылдарда дижитал мәліметтер шамамен 5 ZB-дан (зетабайт) 50 ZB-қа ұлғаяды екен. 1 ZB = 1000000000000 GB.
Бүгін, біздің әрбір жасаған қадамымыз «дижитал із» қалдырады. тіпті дүкеннен бір зат алсаңыз, мұның бәрі мәлімет ретінде сақталып, қатталып қалады.
Яғни, біздің әрбір дижитал ісіміз «дижитал із» қалдырады, және олар автоматты түрде сізге білінбей жасалып көбейе береді. Интернетке шыққан сайын, GPS-ы бар смартфонмен жүрген кезде, әлеуметтік желіде достарыңызбен байланыста немесе чатта болғанда және сіз кімсіз, қайдансыз, қай салада, қандай компанияда жұмыс істейсіз, қай дүкеннен қандай зат аласыз, қай жеріңіздің ауырады, кіммен қарым-қатынастасыз, қандай сайттарға кіресіз, смартфоныңызда қандай қосымша бағдарламалар (apps) қолданасыз, отбасыңыз, мінез-құлқыңыз т.б. бәрін тізіліп, талданып сақтала береді. Интернеттің барлық беттеріндегі мәліметтер де «Big data». Олар Google-дің, Facebook-тің және тағы басқа алыптардың серверлерінде тұр, оған арнайы органдардың қолы жететіндігіне күмән жоқ. Сіз әртүрлі әлеуметтік желілер, қосымша бағдарламалардағы анкеталарды толтыру арқылы ол мәліметтерді жинауға өзіңіз көмектесіп жатырсыз. Google-ден бір сөзге іздеу салсаңыз, соның жарнамасы келесі бетте тұратынын байқаған шығарсыз. Содан-ақ сізді не қызықтыратынын біледі. «Big data»-дағы мәліметтер жиынтығы тек қана Лауһул Махфузға жетпейтін шығар.
Сонымен қатар, адамның емес ақылды құрлығы, машиналар да мәліметтердің көбеюіне үлес қосады. Олар бір-бірімен немесе үйдегі серверлер арқылы мәлімет алмасады. Үлкен зауыттардағы өндірістегі жабдықтардың көпшілігіне сенсорлар орнатылған, олар да бір-біріне мәліметтер жіберіп тұрады.
«Big Data» термині осы барлық мәліметтерді жинауға және соны адамзаттың өз мүддесіне әртүрлі салаларда қолдану қабілеттілігіне қатысты айтылады.
«Big Data» қалай жұмыс істейді?
«Big Data» мынадай принциптермен жұмыс істейді: бір мәселе, не бір жағдай туралы неғұрлым көп білсеңіз, соғұрлым сіз сенімді идеялар таба аласыз, әрі қарай не болатынын болжай аласыз.
Көп мөлшердегі мәліметтерді салыстыру, бұрын белгісіз болып келген жайттарды анықтауға, соңынан салмақты шешім қабылдауға мүмкіндік береді. Көбінесе бұл жинақталған мәліметтердің негізінде жасалған моделдеу арқылы іске асырылады. Сол модель арқылы жағдайды имитациялап, берілген процесстердің шамаларын реттеу арқылы оңтайлы нәтижелерді көздейді. Бұндай процесстер автоматтандырылған.
Бұл орасан зор мәліметтерді жинау, анықтау, сұрыптау, саралау және өңдеу оңай шаруа емес, ол жасанды интеллекті мен машинамен оқыту арқылы іске асады. Жалпы «мәліметтерге» фотосуреттер, видео, аудиожазбалар, мәтіндер, мәліметтер базасы, сенсорлардың түскен көрсетілімдер және т.б. жатады.
Big data қалай қолданылады?
Толассыз өсіп жатқан осы мәліметтер ағынын қазір біз осыдан біраз жыл бұрын ғана мүмкін болмаған әдістер арқылы өз қажетімізге жарата аламыз. Бұл әртүрлі саладағы бизнес әлеміне төңкеріс әкеледі, компаниялар өздерінің клиенттерінің қай сегментте, қандай тауарға сұраныс болатынын өте үлкен дәлдікпен болжай алады. Big Data сонымен қатар компанияларға өздерінің іс-қимылдарын әлдеқайда тиімді жасауға мүмкіндік береді.
Бизнестен тыс Big Data біздің өмірімізді әртүрлі жолдармен өзгертуге көмектеседі:
Медицинада өте үлкен дәрігерлік жазбаларды сараптау мен моделдеу арқылы ауруларды бастапқы кезеңінде анықтап және жаңа дәрілердің түрін жасауға мүмкіндік береді. Әртүрлі сенсорлардан келетін мәліметтерді жинап, саралау арқылы табиғи және техногендік аппатарды, жер сілкінуін алдын – ала болжап, дер кезінде шара қолдануға жағдай жасайды. Сонымен қатар соғыс жайындағы босқындарды бақылап, қорғауға, полиция күштерінің стратегиясын жасауға, күштерді дұрыс қолдануға, сол арқылы қылмыстардың алдын алуға көмектеседі.
Big Data туғызатын мәселелер
Big Data бізге бұрын түске де кірмеген идеялар мен мүмкіндер силай отырып, шешуін іздейтін мәселелерді де жүктейді:
Мәліметтердің конфиденциалдылығы. Жасалынып жатқан Big Data-ның ішінде біздің жеке өміріміз жайлы ақпараттар өте көп және олардың негізгі бөлігінің конфиденциалдылығын сақтауға біздің құқығымыз бар. Біз ыңғайлылық үшін персоналдық мәліметтерді ашамыз. Дегенмен, персоналдық мәліметтерді ашу мен ыңғайлылықтың балансын табуымыз керек. Мәліметтерді қорғау. Мысалы біз банкілерге онлайн банкинг қолдану үшін өзіміз жайында ақпарттарды береміз, бірақ олар қаншалықты қауіпсіз жағдайларда сақталады?
Егер мәліметтер кездейсоқ ашылып қалса, сол арқылы біреулердің ықпалына түсіп, дискриминацияға түсіп қалу қауіпі де жоқ емес.
Болашаққа қарасақ
Өмірімізді адам танымастай өзгеркен Big Data бүгін осындай болса, ертең не болмақшы? Мәліметтер көбейе береді, сараптау жүйелері технологиясы әрі қарай дами береді.
Бизнестің Big Data-ны қолдану қабілеті өте жоғары болуы шарт. Оны өздерінің стратегиялық активі ретінде қарастырған бизнестер ғана қалып, алдыға дамиды.
