Ko sem bil mlajši, sem imel rad filmsko serijo Vojne zvezd. Tako mi je bilo všeč, da sem imel te video kasete vsakega posebej. Včasih sem jih gledal znova in znova. Potem je prišel čas DVD-predvajalnikov in te filme sem moral spet dobiti v DVD-ju. Nisem imel pomislekov, da bi celoten komplet ponovno kupil na DVD-ju, saj sem hotel izkusiti novo tehnologijo in še naprej uživati tudi v svojih najljubših filmih. Stvari so bile odlične, dokler se ni pojavila nova tehnologija Blu-ray. Ko sem že dvakrat kupil filme, se nisem veselil, da jih kupim znova. Nekaj časa se nisem trudil, da bi se ‘posodobil’, misleč, da bi se brez te tehnologije dobro znašel. In dobro mi je šlo. Vseeno ni vplivalo na moje življenje. Toda videl sem spremembo trenda in filmov nisem mogel deliti s prijatelji, kot so to počeli med seboj. Res sem se počutil izpuščenega.
Končno sem šel ven in posnel film v Blu-ray. Spominjam se ga ne zaradi tega, ker imam rad film, ampak zaradi dejstva, da je bila kvaliteta videa neverjetna. In za povrh sem dobil celoten nabor filmov v enem Blu-ray disku.
c ++ kako uporabljati imenske prostore
Potreba ali želja po sprotnem obveščanju je najmočnejša, ko gre za naš poklic, saj so tveganja večja. Bistveno je, da ostanete na tekočem s svojo igro.
4 praktični razlogi za učenje Hadoop 2.0:
Naj bo neizogibno, ostajamo na tekočem s svojim poklicem, je postalo pomemben del našega življenja. Naj se sliši še tako zastrašujoče, ni nas treba vznemirjati, saj se tehnologije v resnici ne spreminjajo tako hitro ali drastično. Toda pogovori in informacije o teh tehnologijah in stvareh, ki jih z njimi lahko počnemo, so vse bolj prepoznavni. Tu je nekaj razlogov, zakaj bi morali biti na tekočem:
# 1: Ne izpustite se
Če niste pozorni na najnovejše posodobitve tehnologije, lahko izgledate kot jelen, ki ga ujame žaromet. Ni ravno bleščeča slika vaših poklicnih sposobnosti. Če ste na tekočem, vas bodo vrstniki spoštovali zaradi vaših poklicnih veščin. Morda ne bo treba izvajati vseh novih stvari, ki se jih naučite, vendar je nujno, da se zavedate posodobitev.
Na primer, ko se na Hadoopu govori, lahko vrstnike obvestite, da ima Hadoop 2.5.0 izboljšave preverjanja pristnosti pri uporabi strežnika proxy HTTP. In tudi v isti različici Hadoop obstaja določba za neposredno pisanje v Graphite.
Nujno je biti na tekočem z najnovejšimi posodobitvami, ko organizacije razmišljajo o selitvi na Hadoop. In 'vedeti' lahko močno spremeni vašo kariero.
# 2: Ob konkurenčnem robu
Strokovnjaki, ki so usposobljeni na svojem področju, so spoštovani. In biti na tekočem je najboljši način, da si na vrhu. Vaša potreba, da ostanete na tekočem, odraža vašo strast do službe. Z razvojem strokovnega znanja na svojem delovnem mestu in v svoji panogi si boste prislužili zaupanje in spoštovanje ljudi okoli sebe. Z vidika vodstva je to neprecenljivo!
Tudi če vaša organizacija še vedno sodeluje s Hadoop 1.0, vas poznavanje vseh najnovejših funkcij Hadoop 2 drži na dobri poti, saj je razmeroma nov in zagotovo boljši. Če bi se tega prvi naučil, bi imeli prednost pred vrstniki.
# 3: Nove priložnosti
Žalostna realnost je, da se naša trenutna vloga nenehno spreminja. Sčasoma prihajajo dodatne odgovornosti in priložnosti za opravljanje novih nalog. Če ostanete na tekočem z industrijskimi trendi, ste v najboljšem položaju, da izkoristite te priložnosti.
Podjetja, kot so Macy's, Lockheed Martin, California Creative Solutions, Capital One, CSpring, CACI International Inc., Oracle, Yahoo !, American Express, BlueHawk, Aetna, Lawrence Livermore National Laboratory in številna druga, iščejo ljudi, usposobljene za najnovejše funkcije Hadoop 2, na primer PREJA.
# 4: Sprejemite boljše odločitve
Dodatne informacije vam bodo omogočile premišljene odločitve in boljše odločitve. Pomagal vam bo prepoznati priložnosti in dodati vrednost strategiji vaše organizacije.
Hadoop 2 ima funkcije, ki povečujejo hitrost in zmanjšujejo stroške. Predlaganje možnosti za izboljšanje zmogljivosti in povečanje hitrosti lahko vsekakor poveča produktivnost organizacije. Tu je nekaj funkcij Hadoop 2, ki bodo koristile organizaciji, in če predlagamo, da bodo spodbudile tudi vašo kariero.
Podpora za zagon sistema Hadoop v sistemu Microsoft Windows
Poenostavljena distribucija binarnih datotek MapReduce prek HDFS v porazdeljenem predpomnilniku YARN.
Izboljšana podpora za nove aplikacije na YARN s strežnikom Application History Server in Application Timeline Server
Popolna podpora HTTPS v HDFS
Integracija Kerberos za trgovino s časovnimi premicami YARN.
Podpora hierarhiji heterogenega shranjevanja v HDFS.
Predpomnilnik v pomnilniku za podatke HDFS s centraliziranim upravljanjem in upravljanjem.
Poenostavljena distribucija binarnih datotek MapReduce prek HDFS v porazdeljenem predpomnilniku YARN.
Obstajajo več kot le praktični razlogi za sprotno posodabljanje. Obstajajo tudi tehnični razlogi. Hadoop ima številne funkcije, ki so koristne za organizacije. Če jih poglobite, boste dobili jasno sliko o prednostih.
Katera je najnovejša posodobitev v Hadoopu?
Vsak izdelek gre skozi različne faze izdaj in pripravi različne različice samega sebe. Hadoop ni nobena izjema in je pripravil Hadoop 2.0. Fundacija Apache je pripravila nadaljnje različice Hadoopa, kot sta Hadoop 2.1.0, Hadoop 2.4.0 in dosegla Hadoop 2.5.1, ki je zadnja različica, izdana septembra 2014.
Zakaj je izšel Hadoop 2?
Z novo različico so na voljo dodane funkcije in odpravljene napake. Torej vsakič, ko uporabite določeno različico Hadoopa in pomislite, da je mogoče dodati določeno funkcijo ali odpraviti nekatere napake, o tem obvestite fantje iz fundacije Apache. Ti fantje pa delajo na tem in vam v naslednji različici ponudijo boljši izdelek.
Hadoop 2 - ne samo številka
Hadoop 2 ni le najnovejša različica Hadoopa. Na splošno gre za arhitekturo druge generacije. Arun Murthy, ustanovitelj in arhitekt Hadoopovega distributerja Hortonworks, vztraja, da je to razlikovanje pomembno, ker je bilo treba veliko prenove, da bi Hadoop preselil izven serijske obdelave in v svet analitike v realnem času.
Pogovorimo se, kako drugačen je Hadoop 2.0 od predhodnika Hadoop 1.0. Očitno bo kasneje izdana različica boljša od prejšnje izdaje. Sledijo štiri glavne izboljšave v Hadoop 2.0 v primerjavi s Hadoop 1.x:
Zveza HDFS - Horizontalna razširljivost NameNode
Visoka razpoložljivost NameNode - NameNode ni več ena točka napake
PREJA - Sposobnost obdelave terabajtov in petabajtov podatkov, ki so na voljo v HDFS, z uporabo aplikacij, ki niso MapReduce, kot so MPI, GIRAPH
Upravitelj virov - razdeli dve glavni funkcionalnosti preobremenjenega JobTrackerja (upravljanje virov in razporejanje / spremljanje opravil) v dva ločena demona: globalni upravitelj virov in aplikacija ApplicationMaster
Na voljo so dodatne funkcije, kot so Načrtovalnik zmogljivosti (omogoči podporo za več najemnin v Hadoopu), Posnetek podatkov, Podpora za Windows, dostop do NFS, ki omogoča večje sprejemanje Hadoopa v industriji za reševanje težav z velikimi podatki.
Hadoop 2.X Vs Hadoop 1.X
Naredimo majhno primerjavo in poglejmo, na kakšen način je Hadoop 2.0 boljši in drugačen od Hadoop 1.0
Zakaj ima Hadoop 2 prednost pred Hadoop 1.0?
Hadoop 2.0 ponuja izboljšave zmogljivosti, ki koristijo povezanim tehnologijam v ekosistemu Hadoop. Poleg revolucionarnih lastnosti HDFS in arhitekture druge generacije (YARN) obstaja še več in več razlogov za to, da raje Hadoop 2 namesto Hadoop 1.0:
Hadoop 2 nima več jezikovnih omejitev. To pomeni, da lahko zdaj Hadoop uporablja širok spekter strokovnjakov.
S Hadoop 2 so premagane ovire, kot je pomanjkanje kodirnikov MapReduce.
2-krat hitrejši od Hadoop 1.0
2-kratnik ROI z obstoječo strojno opremo.
Z YARN je vmesnik za programiranje aplikacij veliko bolj odprt in prilagodljiv.
Hadoop 2 širi možnosti za uporabo Hadoopa v projektih velikih podatkov.
S Hadoop 2 lahko razvijalci zdaj izvajajo najrazličnejše naloge drobljenja podatkov, ki presegajo prejšnji obseg serijske obdelave Hadoop.
Ponuja nove priložnosti za upravitelje informacij in odpravlja pomanjkljivosti v prejšnjih različicah.
Ta nova izdaja ima edinstveno funkcijo izvajanja več delovnih obremenitev v isti gruči Hadoop.
Hadoop ni več omejen na eno funkcijo. Njegova uporaba zdaj presega HDFS in MapReduce.
Ključne prednosti PREJE
Zavedamo se, da je YARN arhitektura druge generacije, poglejmo, kaj jo naredi tako čudovito.
Lestvica
Novi modeli in storitve programiranja
Izboljšana uporaba gruče
Okretnost
Veliko več kot Java
In še veliko več
Povpraševanje po veščinah Hadoop 2
Organizacije zdaj lansirajo ali preizkušajo Hadoop 2. Posledično so potrebni strokovnjaki, usposobljeni za Hadoop 2. Številne organizacije so že začele notranje iskati ljudi, ki bi delali s Hadoopom. Obstajajo jasni znaki, da je YARN v porastu in bo sčasoma nadomestil povpraševanje po spretnosti MapReduce.
Tu je nekaj pogledov na trenutno in napovedano povpraševanje po Hadoop veščinah:
Po mnenju analitikov iz Gartnerja je Hadoop 2 ključnega pomena, saj so velika podjetja po vsem svetu ugotovila, da je Hadoop igralec sprememb pri upravljanju velikih podatkov.
Po besedah Erica Kavanagha iz skupine Bloor je Hadoop 2.0 pridobil naklonjenost med informacijskimi delavci, ki želijo prerekati Big Data.
Sprejetje Hadoop 2.0 še naprej narašča in zdaj prehaja v stopnjo zrelosti.
Organizacije se zavedajo prednosti YARN in so nad tem navdušene.
Tu je posnetek prostih delovnih mest za Hadoop 2.0 / YARN v Indeed.com
Kdo se seli na Hadoop 2 ali ga že ima?
Yahoo:
Yahoo! , vodilni v vsem, kar je Hadoop uvedel YARN (0.23.x). Po Murthyju Yahoojev grozd s 35.000 vozlišči zdaj obdela 130-150 delovnih mest na dan v primerjavi s 50-60 pred YARN.
Ko govori o zvezdni predstavi, Murthy citira: 'Ko imaš 2x več kot 35.000 do 40.000 vozlišč, je to fenomenalno.' Dodal je še: 'Precej prepričljiva zgodba je povedati direktorju informacijske tehnologije, da boste, če samo nadgradite programsko opremo s Hadoop 1 na Hadoop 2, na svojih delovnih mestih opazili dvakratne izboljšave pretočnosti.'
eBay:
eBay ima eno največjih skupin Hadoop v industriji, kjer so podatki v petabajtih. Svoje grozde so preselili tudi v Hadoop 2.
Zaključek:
Ker je Hadoop 2 zrel in ga je lažje izvajati, celo prepričujejo skeptike in vse več organizacij prehaja na Hadoop 2.0. Obstajajo tehtni razlogi, da se izognete različicam 1.x. Toda pri Hadoop 2 celo neverniki razmišljajo o njem, saj ga je mogoče uporabiti za najrazličnejše namene. Ko se naučite Hadoop 2.0 in ga izvedete za izvajanje izračunov na velikih podatkih, boste odprli vrata tehnično napredni in finančno koristni karieri.
Imate vprašanje za nas? Prosimo, da jih omenite v oddelku za komentarje, pa se vam bomo oglasili.
Sorodne objave: