Pred desetimi leti je bilo pomanjkanje znanja in nepoznavanje tehnologij, potrebnih za shranjevanje in obdelavo velikih podatkov. Zato so organizacije razvile različne tehnologije, povezane z velikimi podatki, za shranjevanje in analizo velikih podatkov, Hadoop pa je ena izmed pionirskih tehnologij. Če želite vedeti, kako so se podatki razvijali kot veliki podatki in kako se je Hadoop pojavil kot rešitev za težave, povezane z velikimi podatki, pojdite skozi to Spletni dnevnik . Vzpon novih tehnologij vodi tudi do novih poklicnih možnosti. V tem Hadoop kariera blog, vas bom vodil skozi poklicno pot v Hadoopu in drugih tehnologijah velikih podatkov.
Organizacije so zdaj spoznale prednosti analitike velikih podatkov. Pomagal jim je do boljših poslovnih vpogledov, kar je izboljšalo njihove sposobnosti odločanja. Ker organizacije izkazujejo zanimanje za Big Data in za njihovo analizo uporabljajo Hadoop. Zato tudi povpraševanje po delovnih mestih v Big Data in Hadoop hitro narašča.Če se nekdo zanima za analizo podatkov in želi nadaljevati svojo kariero na tem področju, je zdaj pravi čas, da se začne učiti Hadoop in Spark. To bi vam vedno dalo dober začetek bodisi bolj svež bodisi izkušen. Veliko je povpraševanja po strokovnjakih, ki lahko delajo na velikih podatkih. Naj vam povem nekaj napovedi:
- Trg Hadoop naj bi do leta 2022 dosegel 99,31 milijarde USD pri CAGR 42,1% -Forbes
- McKinsey napoveduje, da bo do leta 2018 primanjkovalo 1,5 milijona strokovnjakov za podatke
- Povprečna plača razvijalcev velikih podatkov Hadoop je 135 tisoč USD (podatki o plačah na spletnem mestu Indeed.com)
Želel bi, da greste skozi ta blog -> .Dovolite nam, da nadaljujemo in razumemo spretnosti, ki bi vam lahko omogočile začetek vaše prihajajoče Hadoop kariere.
Kariera Hadoop: Potrebne spretnosti
Vem, da je naslednja stvar, ki vam pride na misel, veščine, potrebne za učenje Big Data & Hadoop. Rad bi vam povedal, da obstaja takega predpogoja ni pri učenju Hadoopa. Seveda pa vam bo znanje o Linuxu pomagalo pri delu s Hadoopom. Če izhajate iz programskega okolja in poznate Javo, Scalo ali Python, bi se lažje naučili, kako napisati program MapReduce v različnih programskih jezikih in izvajati vzporedno obdelavo prek HDFS (Hadoop shramba). Če poznate SQL, boste imeli začetek pri učenju orodij za ekosistem Hadoop, kot so Pig, Hive itd. Podobno, če ste delali z bazami podatkov NoSQL, se boste pri delu s HBase počutili prijetno. Priporočam vam, da to storite poznati različna orodja, ki so prisotna v ekosistemu Hadoop.
Karierna pot Big Data Hadoop | Kariera v Hadoopu | Edureka
Kariera Hadoop: Kdo se lahko odloči za to?
Trg analitike velikih podatkov raste po vsem svetu in ta močan vzorec rasti je odlična priložnost za vse IT strokovnjake. Tu je nekaj skupin strokovnjakov za IT, ki nenehno uživajo v prednostih prehoda na področje velikih podatkov:
- Razvijalci in arhitekti
- Strokovnjaki za BI / ETL / DW
- Starejši IT strokovnjaki
- Preizkuševalni strokovnjaki
- Mainframe strokovnjaki
- Osvežilci
To bi rad dodal, če ste iz IT okolja ali imate kakšno idejo o IT, se lahko enostavno naučite Hadoopa.
Na podlagi vašega udobja, izkušenj in zanimanja se lahko naučite različnih orodij, kot smo razpravljali o zahtevanih veščinah. Nekaj priljubljenih naslovov delovnih mest za velike podatke je:
- Razvijalec Hadoop / Big Data
- Skrbnik Hadoop
- Podatkovni inženir
- Arhitekt velikih podatkov
- Inženir strojnega učenja
- Inženir za razvoj programske opreme
- Inženir za velike podatke
- Svetovalec za velike podatke
Glede na vaš nekdanji profil in zanimanje lahko sprejmete katerega koli od delovnih profilov za Big Data & Hadoop. Prehod na domeno Big Data je lahko eden najboljših poklicnih potez za tehnološke strokovnjake, saj se Big Data povečuje s pospešeno hitrostjo in priložnost raste hkrati, kar je vedno večje področje, ki bo vedno v povpraševanju. Glej to 10 najbolj vročih spletnih dnevnikov s področja tehnoloških veščin kar vam bo dalo predstavo o vročih tehnologijah.
Zdaj pa se pogovorimo o pričakovani plači.
Kariera Hadoop: plača
V Združenem kraljestvu so urne plače razvijalcev Hadoop Developers nekaterih velikanov:
- Raziščite skupino zagotavlja 61 - 67 funtov na uro
- BBC zagotavlja od 48 do 52 funtov na uro
- Eames Consulting Group zagotavlja od 49 do 53 funtov na uro
Slika: Kariera Hadoop - Trend plač Hadoop (itjobswatch.co.uk)
kako razčleniti datoteko xml v javi -
Povprečna letna plača v Združenem kraljestvu znaša od 66.250 do 66.750 funtov glede na itjobswatch.co.uk, povprečna letna plača za delovna mesta Hadoop pa se giblje med 92.512 in 102.679 ameriškimi dolarji za razvijalce Hadoop, kot piše Indeed.com. V Indiji je povprečna plača razvijalca Hadoop od Rs. 4.055880 za Rs. 5.825.000 na podlagi vaših izkušenj, kot poroča Payscale.com. Povprečna plača za razvijalce Hadoop & Java v TCS v Indiji znaša 677.000–738.000 JPY, navaja Glassdoor.com. Cloudera Certification vam daje tudi močnejšo roko, kar lahko povzroči tudi znatno povišanje vaše plače.
Slika: Kariera Hadoop - Trend prostih delovnih mest Hadoop (itjobswatch.co.uk)
Podobno znaša povprečna letna plača za delovna mesta, povezana s podjetjem Spark, 92.512 USD, kot na Indeed.com. Povprečna letna plača po podatkih itjobswatch.co.uk za delovna mesta Apache Spark Developer v Veliki Britaniji znaša 71.250 GBP. Capgemini, BBC, Vodafone, Teamware, HP, Tata Consultancy Services so nekateri veliki velikani, ki iščejo kandidate z znanjem na področju Big Data & Hadoop.
Torej, to vam je morda dalo idejo o plači v različnih regijah. Oglejmo si tudi različne domene, kjer analitika Big Data dela čudeže. Tako boste dobili idejo, da ste morda iz različnih domen, vendar ima analitika Big Data svoje korenine v vseh domenah.
Kariera Hadoop: veliki podatki v različnih domenah
Vzemimo nekaj primerov analitike velikih podatkov na različnih področjih.
Slika: Kariera Hadoop - različne domene velikih podatkov
Bančništvo in finance
Opozarja vas na goljufije z vrednostnimi papirji in prepoznavnost trgovanja v bančnem in finančnem sektorju. Pomaga pri odkrivanju goljufij s kartami, revizijskih poteh in poročanju o kreditnem tveganju podjetja. Podatki o strankah se transformirajo in analizirajo za boljši vpogled in učinkovite zmožnosti odločanja.
SEC (ameriška komisija za vrednostne papirje in borzo) uporablja Big Data za spremljanje dejavnosti na finančnem trgu z uporabo omrežne analitike in procesorjev naravnega jezika. To pomaga ujeti nezakonito trgovanje na finančnih trgih.
Komunikacija, mediji in zabava
Na tem področju se zbirajo, analizirajo in uporabljajo potrošniški podatki za boljše napovedi in priporočila strankam. Uporablja vsebino za mobilne in družabne medije. Na primerWimbledon Championships uporablja velike podatke, da uporabnikom v realnem času omogoči podrobno analizo razpoloženja na teniških tekmah.
Skrb za zdravje
Naraščajoči zdravstveni stroški, nerazpoložljivost podatkov in neuporabni podatki, kot so zgodovina bolnikov in zgodovina primerov bolezni, se arhivirajo in ne analizirajo zaradi nestrukturirane oblike. Podatke o zdravstvenem varstvu lahko analizirate in svoje paciente ustrezno zdravite na podlagi predhodnih zgodovin primerov. Prav tako lahko prepoznate bolezen, ki je pogosta na določenih območjih, tako da je mogoče sprejeti preventivo in jim dati na voljo zdravila.
Univerza na Floridi je uporabila brezplačne podatke o javnem zdravju in Google Maps za ustvarjanje vizualnih podatkov, ki omogočajo hitrejšo identifikacijo in učinkovito analizo zdravstvenih informacij.
Izobraževanje
V izobraževalni sektor poskušamo vključiti podatke iz različnih virov in jih nato uporabiti za izboljšanje izobraževalnega sektorja.Univerza v Tasmaniji z več kot 26000 študenti je uvedla sistem učenja in upravljanja, ki spremlja čas dnevnika, čas, porabljen na različnih straneh, in splošni napredek študenta skozi čas.
Vlada
Obstaja veliko državnih shem, ki se izvajajo in izredno hitro ustvarjajo podatke. Vključevanje in interoperabilnost velikih podatkov iz različnih vladnih shem bo izboljšalo učinkovitost shem in zagotovilo boljše rezultate.
Uprava za prehrano in zdravila (FDA) uporablja velike podatke za odkrivanje in preučevanje vzorcev bolezni in bolezni, povezanih s hrano, kar omogoča hitrejše odzive na zdravljenje.
Prevoz
Podatki iz lokacijskih družbenih omrežij in hitri podatki iz telekomunikacij so vplivali na potovalno vedenje. Modeli povpraševanja po transportu temeljijo na novih strukturah družbenih medijev. Analiza velikih podatkov v prometu bo izboljšala nadzor prometa, načrtovanje poti, sistem za zastoje, upravljanje prihodkov, tehnološke izboljšave itd.
Energija in gospodarske javne službe
V tem desetletju bo treba nadomestiti 60% sredstev električnega omrežja. Pametni števci postanejo glavni tok, saj si potrošniki želijo več nadzora in vpogleda v porabo energije. Pametni bralniki števcev omogočajo zbiranje podatkov v skoraj vsakih 15 minutah. Ti podatki se uporabljajo za boljšo analizo porabe komunalnih storitev.
Pravkar smo razpravljali o nekaterih domenah, kjer lahko analitika Big Data dela čudeže. V vsaki domeni je mogoče analizirati velike podatke, da bi dobili boljši vpogled.
Upam, da je bil ta blog informativen in vam je dodal vrednost. Uspešno kariero Hadoop gradimo na skoraj vseh področjih, kot so zdravstvo, bančništvo, telekomunikacije, družbeni mediji, trgovina na drobno itd.
Tukaj je pričevanje učenca Edureke o tečaj:
Če vas zanima več, lahko to storite študija primera ki vam pove, kako se analitika velikih podatkov uporablja v domeni Healthcare in kako Hadoop revolucionira zdravstveno analitiko. Torej, kaj še čakaš? Nadaljujte in začnite svojo pot k ustvarjanju svetle kariere v Big Data & Hadoop.
Zdaj, ko ste razumeli kariero Big Data & Hadoop, si oglejte Edureka, zaupanja vredno podjetje za spletno učenje z mrežo več kot 250.000 zadovoljnih učencev, razširjenih po vsem svetu. Tečaj Edureka Big Data Hadoop Certification Training pomaga učencem, da postanejo strokovnjaki za HDFS, prejo, MapReduce, Pig, Hive, HBase, Oozie, Flume in Sqoop z uporabo primerov uporabe v realnem času na področju maloprodaje, družbenih medijev, letalstva, turizma, financ
Imate vprašanje za nas? Prosimo, omenite to v oddelku za komentarje in se vam bomo javili.