Tehnologija koja stoji iza nsa's xkeyscore

Ako se na trenutak usredotočite na tehnologiju koja stoji iza XKeyscore - navodnog vladinog programa koji NSA koristi za sprečavanje terorista - a ne na politiku, to je zapravo prilično zbunjujuće. Neka izvješća procjenjuju da bi program XKeyscore mogao obraditi čak 41 milijardu zapisa.

U srcu XKeyscore su dva glavna tehnološka trenda: Big Data i Data Analytics. I nije samo vlada željna prihvaćanja ove vrste tehnologije. Informacije su najtoplija roba koja postoji. Evo pogleda što se može naći pod haubicom što se tiče tehničkih specifikacija s programom poput XKeyscore, na temelju onoga što tvrtke koje prikupljaju i analiziraju iste velike skupove podataka koriste i komentare dobavljača koji pomažu tim tvrtkama da prebace te podatke.

Zapanjujuća tehnologija

Big Data odnosi se na prikupljanje skupova podataka toliko velikih da je potrebna posvećena tehnologija kako bi se procijenili, analizirali i izvještavali o tim informacijama. Ukratko, Data Analytics proces je razbijanja tih podataka u uredne odjeljke kako bi ih se moglo dalje pregledati.

Gdje se uvelike koristi ovo veliko prikupljanje i analiza podataka? U privatnoj industriji. Melissa Kolodziej, direktorica marketinških komunikacija u Attunity, tvrtki za rješenja koja pomaže poduzećima pristup i pomicanje velikih količina podataka, rekla je da će tvrtke u maloprodaji uzimati i "sastaviti sve velike količine podataka" kako bi analizirali navike kupca detalji su specifični kao što je to da su vidjeli "ako je ta osoba upravo kupila šampon da bi potom mogla kupcu ponuditi vezani kupon na svom mobilnom telefonu dok je još u trgovini". Kolodziej je rekao da kompanije žele i mogu imati "skoro mogućnosti u stvarnom vremenu" kada je u pitanju analiza ovih velikih skupova podataka i želja da se informacije prikupe što je brže moguće.

Zamišljanje specifičnosti tehnologije

Nisu dostupni stvarni detalji o određenoj tehnologiji koja se može koristiti s XKeyscore, osim činjenice da uključuje 700 Linux poslužitelja koji se nalaze širom svijeta. No moguće je pretpostaviti vrstu hardvera potrebnog za objedinjavanje i upravljanje tim velikim skupima podataka. Samo je nekoliko proizvođača koji prave vrste strojeva koji mogu podnijeti tako zapanjujuću moć obrade: Oracle, HP, IBM i EMC su ti koji najviše padaju na pamet.

Naravno, prikupljanje i analiza ogromne količine podataka omogućuje ne samo marku podatkovnog centra željeza.

"Tehnološke inovacije u hardveru (kapacitet memorije i brzina, višejezgreni, multiCPU-ovi) i softveru (stupacne baze podataka, klasterirani datotečni sustavi i tako dalje) omogućile su" spremanje "gotovo neograničene količine podataka", izjavio je Byron Banks, vlč. predsjednik baze podataka i tehnologije u SAP-u.

Usporedna obrada, napredak u sirovoj računalnoj snazi, kao i ogromni kapacitet za pohranu pri relativno niskim troškovima, omogućili su ovu vrstu rudarstva podataka lakšim za vlade, poduzeća i čak srednja poduzeća. Lawrence Schwartz, potpredsjednik marketinga, Attunity, rekao je da su današnje skladišta podataka "općenito izgrađena za podršku terabajta podataka".

Činjenica da postoji toliko mnogo podataka, koji su svi toliko isprepleteni, također je pomogla u analiziranju i prikupljanju velikih skupova podataka tako primamljivim za industriju. "Mislim da su ljudi oduvijek željeli shvatiti sa čime bi se podaci mogli dobiti. Tijekom proteklog desetljeća postoji toliko mnogo izvora informacija, toliko je više toga sada povezano. Nismo imali godina… toliko računalne snage, da sada postoje mogućnosti ", rekao je Schwartz.

Dosadašnji izazovi i očita prepirka

Iako tehnologija nastavlja naglo napredovanje u pružanju podrške velikim podacima i analizi takvih podataka, izazovi i dalje ostaju.

Schwartz, entiteti prikupljaju više podataka nego što mogu obrađivati. Na raspolaganju je i "ogroman nedostatak znanstvenika podataka" koji bi mogli smisliti ove prikupljene podatke.

„Izazov s mnogim postojećim rješenjima i tehnikama je što nisu u stanju razumjeti i identificirati koje korisne informacije postoje unutar ovih ogromnih skupova od 0 i 1, a zatim ih analizirati i iskoristiti pravovremeno i troškovno učinkovito. SAP, mi usmjereni su na inovacije koje složenost preuzimaju iz IT okruženja i poboljšavaju brzinu i fleksibilnost pomoću kojih se 'podaci' mogu pretvoriti u korisne 'informacije' i dostaviti krajnjem korisniku ili aplikaciji ", rekli su iz SAP-ove banke.

Onda su tu brige o sigurnosti. "Zbog mnoštva podataka i potrošača i dalje guraju i spremaju se u oblake, javnost bi trebala biti zabrinuta zbog prakse informacijske sigurnosti tvrtki čiji oblaci drže naše osobne podatke", rekla je Paige Leidig, viša potpredsjednica tvrtke CipherCloud. "Dok PRISM sjedi i nadzire informacije koje teku kroz određene oblake, XKeyscore aktivno prati bilo koju osobu putem Interneta od web stranica koje posjećuju do e-maila razmjenjenih na postovima na društvenim mrežama. U oba slučaja netko gleda i sastavlja podatke koji se mogu identificirati bez pristanka vlasnika podataka - i to je pitanje privatnosti, čak i ako je motivacija nacionalna sigurnost za dobrobit javnosti."

Ipak, prema Leidigu, ovi programi internetskog nadzora, ako ništa drugo, "naglašavaju našu ovisnost o oblaku na razini poduzeća i potrošača." Što se tiče zaštite podataka ili sprečavanja krađe podataka od hakera ili unutar IT ljudi, Leidig savjetuje da je "bolji pristup omogućavanju oblaka (i ubojitih aplikacija koje poduzeća trebaju i koji potrošači vole) koristeći neraskidivu enkripciju za šifriranje Na taj način neovlašteni korisnici - bilo da ih obavještajna agencija ili cyber lopov - ne mogu iskoristiti te podatke. Kao dodatnu mjeru kontrole, dajte tvrtkama - a ne pružateljima usluga oblaka - da drže ključeve za šifriranje / dešifriranje.

U slučaju zahtjeva za informacijama (pisma NSA-a o kojima smo toliko čuli), poduzeće će biti obaviješteno i može izravno surađivati ​​s vladom, umjesto da ga zaobiđu i u mraku pristupaju podacima kupaca bez pristanka. To je model prema kojem pružatelj usluga oblaka drži ključeve, predaje podatke i zakonom je spriječeno da tvrtki otkrije zahtjev za informacije."

Očigledno je da je velika rasprava u javnosti upravo zato što tehnologija postoji za prikupljanje i analizu ogromnih podataka, daje li to dozvolu vladi i tvrtkama da takvu tehnologiju koriste građanima i kupcima? To će se rasprava zasigurno nastaviti još dugo vremena.

Za više, pogledajte Xkeyscore Ne gleda li vas, to je Google-ov NSA za presretnute podatke.