Hvilke Big Data-tendenser er i horisonten?

Forfatter: Roger Morrison
Oprettelsesdato: 18 September 2021
Opdateringsdato: 1 Juli 2024
Anonim
30 глупых вопросов Data Engineer [Карьера в IT]
Video.: 30 глупых вопросов Data Engineer [Карьера в IT]

Indhold


Kilde: Ymgerman / Dreamstime.com

Tag væk:

Feltet med big data vokser og ændrer sig konstant, men der er nogle store tendenser i horisonten.

Big data er stadig et relativt nyt felt inden for datavidenskab. Det har haft en betydelig indflydelse i analyseverdenen, og big datateknologi og platforme vil fortsat ændre sig, efterhånden som teknologien udvikler sig. Derfor er det så vigtigt at forstå kommende tendenser i big data, der godt kan ses i de kommende år.

I de sidste par år har der været meget diskussion om Hadoop og big datateknologier, og it-branchen har drøftet markant om deres fremtid. Den største bekymring har været, om Hadoop og big data vil blive betragtet som en del af mainstream-teknologien, eller om de vil blive betragtet som et nicheområde. Som vi har set i fortiden, har der været mange innovationer inden for teknologi, der nogensinde blev brugt i mainstream-industrien, men snarere blev brugt i siloer til specielle databehandlingsformål.


På meget kort tid er big data kommet til at være en mainstream-teknologi. I 2013 og 2014 så vi virksomheder tage initiativer til at flytte big data applikationer til produktion. I tidligere år var det kun en type POC (proof of concept), hvor virksomheder validerede teknologien og dens output. Nu i 2015 og i de kommende år vil der være en masse implementering af nye brugssager. De fleste af disse brugssager vil være baseret på realtidsanalyse og opnå mere handlingsmæssige indsigter.

I de kommende år vil vi se en enorm virkning fra big data i næsten enhver branche. Data er kernen i enhver virksomhed, så de skal udtages og analyseres korrekt. Big data og dets relaterede teknologier gør det muligt for os at fange, behandle og analysere data for at få meningsfuld indsigt. Big data-tendensen vil fortsætte med at vokse og give os mulighed for at forstå dens værdi, som vi aldrig har før.


Lad os nu se på nogle af de vigtige big data-tendenser, der godt kan ses i de kommende år.

Naturlig progression af Hadoop-leverandører

Hadoop er en grundlæggende teknologiplatform til behandling af big data. Den grundlæggende Hadoop-platform giver dog ikke alle de fleksibiliteter og fordele, der er nødvendige for korrekt behandling af alle data, så håndtering af big data-behandling på denne basale Hadoop-platform kan være kedelig og kompliceret.

Der er nu en række Hadoop-relaterede teknologier som Hive, Pig og mange flere, der er kendt som "Hadoop-økosystemet." Disse teknologier er baseret på Hadoop-platformen og gør håndteringen af ​​store data mere håndterbar. Der er forskellige leverandører som Cloudera, MapR, Hortonworks og også IBM, der leverer Hadoop-teknologibunker. Disse teknologiplatforme er bygget på den grundlæggende Hadoop-ramme, men er mere brugervenlige og kompakte. De leverer også korrekte brugergrænseflader til at arbejde på forskellige behandlingsopgaver. Som en konsekvens kan virksomhederne fokusere mere på forretningslogik snarere end på platforme.

Væksten af ​​disse Hadoop-sælgere vil fortsætte i de kommende år, og deres tilbud vil have stor indflydelse. Hadoop-leverandørerne vil positionere sig som løsningsudbydere og hjælpe organisationerne med at implementere deres big data applikationer.

Ingen fejl, ingen stress - Din trinvis vejledning til oprettelse af livsændrende software uden at ødelægge dit liv

Du kan ikke forbedre dine programmeringsevner, når ingen er interesseret i softwarekvalitet.

Big Data og Cloud Integration

I dagens verden er cloud computing og dens relaterede infrastruktur uundgåelig. På den anden side vokser big data applikationer hurtigt. Organisationer implementerer flere og større dataprogrammer for at få mere indsigt i de værdifulde data. Som vi ved, behandler big data applikationer enorme mængder data, og disse data behandles i et klynget miljø. Distribueret computing er kernen i alle big databehandlingsapplikationer. Derfor skal den distribuerede databehandlingsinfrastruktur vedligeholdes korrekt for at overvinde svigt, fejl eller andre fatale problemer. Skymiljøet er det bedst egnede til at dække alle disse problemer. Big data applikationer kan køre på denne sky infrastruktur (bestående af et klynget miljø) og give effektiv og kontinuerlig output. Organisationer har ikke brug for deres egen infrastruktur og IT-team; I stedet kan de stole på skyinfrastruktur, som også er omkostningseffektiv. Derfor vil skyintegration med big data blive en stærk styrke.

Problemer med big data og sikkerhed

Sikkerhedsspørgsmål er et stort problem for alle big data-applikationer. Som vi ved, er data nøglen til alle big data-applikationer, så vi er nødt til at forstå sikkerhedstruslerne i god tid. Organisationer arbejder med big data applikationer for at analysere strukturerede, semistrukturerede og ustrukturerede data, hvilket vil give dem meningsfuld indsigt og forretningsretning. Disse værdifulde data og deres output er nøglen til alle forretningsbeslutninger, og skal derfor holdes fortrolige i organisationen. Desværre er ikke alle big data-applikationer designet med sikkerhedsproblemer i tankerne. Som et resultat vil disse big data-applikationer møde sikkerhedstrusler. Derfor vil implementering af sikkerhedsløsninger til big data applikationer være en stor opgave i de kommende år.

Tilbyder Big Data som en tjeneste

Var alle fortrolige med SaaS-modellen, hvor applikationer kører i et skymiljø og brugere får adgang til den som en service. Betalingsmodellen er også fleksibel, hvor brugerne kun betaler for det, de bruger. Det samme koncept vil også blive anvendt til big data applikationer. Forskellige big data-produktfirmaer er allerede vært for deres applikationer i skyen og tilbyder det som en service, og brugerne får adgang til det som en service og betaler på et brugsbasis. I de kommende år vil flere datafirmaer tilbyde big data som en service.

Big Data og Internet of Things (IoT)

Internet of Things (IoT) er det seneste buzzword i tech-branchen. IoT består dybest set af forskellige enheder udstyret med sensorer til indsamling af data. Det er den største udfordring at indsamle alle disse data og udtrække meningsfuld output. Disse enheder bruges overalt - hjem, industrier og endda bærbar teknologi - og de indfanger en betydelig mængde data. Disse sensordata er også en type big data, så brug og behandling af dem i en big data platform vil være en stor udfordring for organisationer.

Konklusion

Big data ser ud til at være her for at blive, og måderne vi håndterer dem vil fortsætte med at ændre sig og vokse. Bortset fra disse fem trends vil der være mange flere udfordringer og nye trends i de kommende år. Cloud og IoT vil være altid til stede sammen med big data applikationer, og disse teknologier tilsammen vil være et kraftfuldt værktøj til dataanalyse.