Semasa kecil saya dulu suka dengan siri filem Star Wars. Saya sangat menyukainya sehingga saya mempunyai kaset video masing-masing. Saya biasa menonton mereka berulang kali. Kemudian tiba masanya pemain DVD dan saya terpaksa mendapatkan filem-filem ini lagi dalam DVD. Saya tidak ragu untuk membeli keseluruhan set itu lagi dalam DVD kerana saya ingin mengalami teknologi baru dan terus menikmati filem kegemaran saya juga. Segala sesuatu menjadi hebat sehingga teknologi baru yang lain, Blu-ray muncul. Sudah dua kali membeli filem, saya tidak sabar untuk membelinya lagi. Untuk beberapa waktu saya tidak berusaha untuk 'mengemas kini' diri saya, dengan berfikir bahawa saya akan melakukannya dengan baik tanpa teknologi ini. Dan saya berjaya. Itu tidak mempengaruhi hidup saya. Tetapi saya dapat melihat perubahan trend dan tidak dapat berkongsi filem saya dengan rakan-rakan saya, seperti yang mereka lakukan antara satu sama lain. Saya benar-benar merasa terpinggir.
Saya akhirnya keluar dan mendapatkan filem dalam Blu-ray. Saya mengingatinya bukan kerana saya suka filem, tetapi kerana kualiti video itu sangat mengejutkan. Selain itu, saya mendapat keseluruhan filem dalam satu Blu-ray Disc.
Keperluan atau dorongan untuk terus diperbaharui adalah yang paling kuat dalam hal profesion kita kerana risikonya lebih besar. Menjadi penting untuk terus mengikuti permainan anda.
4 Sebab Praktikal untuk Belajar Hadoop 2.0:
Seperti yang tidak dapat dielakkan, mengikuti perkembangan terkini dalam profesion kita telah menjadi bahagian penting dalam kehidupan kita. Seperti yang menakutkan, kedengarannya tidak perlu dikhawatirkan kerana teknologi tidak benar-benar berubah dengan cepat atau drastik. Tetapi perbincangan dan maklumat mengenai teknologi ini dan perkara-perkara yang dapat kita lakukan dengannya semakin jelas. Berikut adalah beberapa sebab mengapa anda harus terus mengetahui:
# 1: Jangan Terperangkap
Tidak memperhatikan kemas kini terbaru dalam teknologi dapat membuat Anda terlihat seperti rusa yang terperangkap di lampu depan. Bukan gambaran sebenar kemampuan profesional anda. Berkemas kini akan membuat anda dihormati oleh rakan sebaya kerana kemahiran profesional anda. Mungkin tidak ada keperluan untuk menerapkan setiap hal baru yang Anda pelajari tetapi perlu mengetahui kemas kini adalah mustahak.
Contohnya, apabila terdapat perbincangan mengenai Hadoop, anda boleh memberitahu rakan anda bahawa Hadoop 2.5.0 mempunyai peningkatan pengesahan semasa menggunakan pelayan proksi HTTP. Dan juga dalam versi Hadoop yang sama, ada peruntukan untuk menulis terus ke Graphite.
Menjadi mustahak untuk mengikuti perkembangan terkini apabila organisasi memikirkan untuk berhijrah ke Hadoop. Dan 'mengetahui' boleh memberi perbezaan besar dalam kerjaya anda.
# 2: Mempunyai Keunggulan Bersaing
Profesional yang mahir dalam bidangnya dihormati. Dan terus mengikuti perkembangan adalah cara terbaik untuk terus berada di tahap teratas. Keperluan anda untuk terus mengemas kini menggambarkan minat anda terhadap pekerjaan anda. Dengan mengembangkan kepakaran dalam pekerjaan dan industri anda, anda akan mendapat kepercayaan dan rasa hormat dari orang di sekeliling anda. Dari perspektif kepemimpinan, ini sangat berharga!
Walaupun organisasi anda masih berfungsi dengan Hadoop 1.0, mengetahui semua ciri terkini Hadoop 2 akan memastikan anda sentiasa berada di landasan yang baik kerana ia agak baru dan pastinya lebih baik. Menjadi orang pertama yang belajar ini akan memberi kelebihan kepada rakan sebaya.
# 3: Peluang Baru
Adalah kenyataan menyedihkan bahawa peranan kita sekarang terus berubah. Seiring dengan bertambahnya masa tanggungjawab dan peluang untuk melakukan tugas baru. Dengan terus mengikuti perkembangan industri, anda berada dalam kedudukan terbaik untuk merebut peluang ini.
Syarikat seperti Macy's, Lockheed Martin, California Creative Solutions, Capital One, CSpring, CACI International Inc., Oracle, Yahoo !, American Express, BlueHawk, Aetna, Lawrence Livermore National Laboratory dan banyak lagi mencari orang yang mahir dalam ciri terkini Hadoop 2, seperti YARN.
# 4: Buat Keputusan Lebih Baik
Maklumat tambahan akan membolehkan anda membuat pilihan yang tepat dan keputusan yang lebih baik. Ini akan membantu anda mengenali peluang dan menambah nilai pada strategi organisasi anda.
Hadoop 2 mempunyai ciri-ciri yang meningkatkan kelajuan serta mengurangkan kos. Mencadangkan pilihan untuk meningkatkan prestasi dan meningkatkan kelajuan pasti dapat meningkatkan produktiviti organisasi. Berikut adalah beberapa ciri Hadoop 2 yang akan memberi manfaat kepada organisasi dan menunjukkan bahawa mereka akan meningkatkan karier anda juga.
Sokongan untuk menjalankan Hadoop pada Microsoft Windows
Penyebaran binari MapReduce yang dipermudahkan melalui HDFS dalam YARN Distused Cache.
Sokongan yang dipertingkatkan untuk aplikasi baru di YARN dengan Pelayan Sejarah Aplikasi dan Pelayan Garis Masa Aplikasi
Sokongan HTTPS lengkap dalam HDFS
Penyatuan Kerberos untuk kedai garis masa YARN.
Sokongan untuk hierarki Penyimpanan Heterogen dalam HDFS.
Cache dalam memori untuk data HDFS dengan pentadbiran dan pengurusan terpusat.
Penyebaran binari MapReduce yang dipermudahkan melalui HDFS dalam YARN Distused Cache.
nombor fibonacci c ++
Terdapat lebih daripada sekadar alasan praktikal untuk terus diperbaharui. Terdapat juga alasan teknikal. Hadoop mempunyai banyak ciri yang bermanfaat bagi organisasi. Melihat mereka secara mendalam akan memberi anda gambaran yang jelas tentang apa kelebihannya.
Apakah kemas kini terbaru di Hadoop?
Setiap produk melalui pelbagai peringkat pelepasan dan hadir dengan pelbagai versi sendiri. Hadoop tidak terkecuali dan hadir dengan Hadoop 2.0. Yayasan Apache telah hadir dengan versi Hadoop berikutnya seperti Hadoop 2.1.0, Hadoop 2.4.0 dan telah mencapai Hadoop 2.5.1, yang merupakan versi terbaru yang dikeluarkan pada bulan September 2014.
Mengapa Hadoop 2 dikeluarkan?
Dengan versi baru dilengkapi ciri tambahan dan pepijat tetap. Oleh itu, setiap kali anda menggunakan Hadoop versi tertentu dan berpendapat bahawa ciri tertentu dapat ditambahkan atau beberapa pepijat perlu diperbaiki, anda memberi tahu orang-orang di yayasan Apache mengenainya. Orang-orang ini seterusnya berusaha dan memberi anda produk yang lebih baik dalam versi seterusnya.
Hadoop 2 - Bukan Sekadar Nombor
Hadoop 2 bukan hanya versi terbaru Hadoop. Pada amnya, ia adalah seni bina generasi kedua. Arun Murthy, pengasas dan arkitek di pengedar Hadoop Hortonworks, menegaskan bahawa perbezaan itu penting kerana jumlah rekayasa semula yang diperlukan untuk menggerakkan Hadoop melampaui pemprosesan kumpulan dan ke dalam dunia analisis masa nyata sangat besar.
Mari kita bincangkan betapa berbezanya Hadoop 2.0 dengan pendahulunya Hadoop 1.0. Jelas, versi yang dikeluarkan kemudian akan lebih unggul daripada versi sebelumnya. Berikut adalah empat penambahbaikan utama dalam Hadoop 2.0 berbanding Hadoop 1.x:
HDFS Federation - Skalabiliti mendatar NameNode
Ketersediaan Tinggi NameNode - NameNode bukan lagi Titik Kegagalan Tunggal
YARN - Keupayaan memproses Terabyte dan Petabyte data yang terdapat dalam HDFS menggunakan aplikasi Non-MapReduce seperti MPI, GIRAPH
Pengurus Sumber - Membahagi dua fungsi utama JobTracker yang dibebankan (pengurusan sumber dan penjadualan / pemantauan pekerjaan) menjadi dua daemon yang berasingan: Pengurus Sumber global dan aplikasi per aplikasi
Terdapat ciri tambahan seperti Capacity Scheduler (Aktifkan sokongan Multi-tenancy di Hadoop), Snapshot Data, Sokongan untuk Windows, akses NFS, memungkinkan peningkatan penggunaan Hadoop di Industri untuk menyelesaikan masalah Big Data.
Hadoop 2.X vs Hadoop 1.X
Mari buat perbandingan kecil dan lihat dengan cara apa Hadoop 2.0 lebih baik dan berbeza dari Hadoop 1.0
Mengapa Hadoop 2 lebih disukai daripada Hadoop 1.0?
Hadoop 2.0 menawarkan peningkatan prestasi yang menguntungkan teknologi yang berkaitan dalam ekosistem Hadoop. Selain ciri inovatif HDFS dan seni bina generasi kedua (YARN), ada lebih banyak alasan untuk memilih Hadoop 2 daripada Hadoop 1.0:
Hadoop 2 tidak lagi mempunyai larangan bahasa. Maksudnya, sebilangan besar profesional kini dapat menggunakan Hadoop.
Dengan Hadoop 2, rintangan seperti kekurangan coder MapReduce diatasi.
2 kali lebih pantas daripada Hadoop 1.0
ROI 2 kali ganda dengan perkakasan yang ada.
Dengan YARN, antara muka pengaturcaraan aplikasi jauh lebih terbuka dan fleksibel.
Hadoop 2 memperluas kemungkinan untuk menggunakan Hadoop dalam projek Big Data.
Dengan Hadoop 2, pembangun kini dapat melakukan banyak tugas penghancuran data, di luar skop pemprosesan kumpulan Hadoop sebelumnya.
Menawarkan peluang baru untuk pengurus maklumat dan mengatasi kekurangan dalam versi sebelumnya.
Rilis baru ini mempunyai ciri unik menjalankan banyak beban kerja pada kluster Hadoop yang sama.
Hadoop tidak lagi terhad kepada satu ciri. Aplikasinya kini melampaui HDFS dan MapReduce.
Manfaat Utama YARN
Kami menyedari YARN menjadi seni bina generasi kedua, mari kita lihat apa yang menjadikannya hebat.
Skala
Model dan perkhidmatan Pengaturcaraan baru
Penggunaan kluster yang dipertingkatkan
Ketangkasan
Jauh lebih banyak daripada Java
Dan banyak lagi
Permintaan untuk Kemahiran Hadoop 2
Organisasi kini melancarkan atau bereksperimen dengan Hadoop 2. Akibatnya, terdapat keperluan untuk profesional yang mahir dalam Hadoop 2. Banyak organisasi telah mula mencari orang untuk bekerja dengan Hadoop secara dalaman. Terdapat petunjuk yang jelas bahawa YARN sedang meningkat dan akhirnya akan menggantikan permintaan untuk kemahiran MapReduce.
Berikut adalah beberapa pandangan mengenai permintaan semasa dan unjuran untuk kemahiran Hadoop:
Menurut penganalisis dari Gartner, Hadoop 2 adalah perkembangan penting kerana perusahaan besar di seluruh dunia mendapati Hadoop menjadi penukar permainan dalam pengurusan Big Data mereka.
Menurut Eric Kavanagh, dari kumpulan Bloor, Hadoop 2.0 telah mendapat daya tarikan di kalangan pekerja maklumat yang ingin memperdaya Big Data.
Penerapan Hadoop 2.0 terus meningkat dan kini memasuki tahap kematangan.
Organisasi menyedari faedah YARN dan teruja dengannya.
Berikut adalah petikan peluang pekerjaan untuk Hadoop 2.0 / YARN di Sesungguhnya.com
Siapa yang berpindah ke Hadoop 2 atau sudah?
Yahoo:
Yahoo! , pemimpin dalam semua perkara Hadoop telah melaksanakan TAHUN (0.23.x). Menurut Murthy, kumpulan 35,000 nod Yahoo kini memproses 130-150 pekerjaan sehari berbanding 50-60 sebelum YARN.
Semasa membincangkan prestasi luar biasa, Murthy memetik, 'Apabila anda mendapat 2x lebih dari 35,000 hingga 40,000 node, itu sangat luar biasa'. Dia juga menambahkan, 'Ini adalah kisah yang sangat menarik untuk memberitahu CIO bahawa jika anda hanya menaik taraf perisian anda dari Hadoop 1 ke Hadoop 2, anda akan melihat peningkatan hasil kerja sebanyak 2 kali dalam pekerjaan anda.'
eBay:
eBay mempunyai salah satu kluster Hadoop terbesar di industri, di mana datanya terdapat dalam petabyte. Mereka juga telah memindahkan kelompok mereka ke Hadoop 2.
Kesimpulan:
Dengan Hadoop 2 matang dan lebih mudah dilaksanakan, mereka bahkan meyakinkan orang yang ragu-ragu dan semakin banyak organisasi yang berhijrah ke Hadoop 2.0. Terdapat alasan yang sah untuk mengelakkan versi 1.x. Tetapi dengan Hadoop 2, bahkan orang-orang kafir mempertimbangkannya kerana dapat digunakan untuk berbagai macam penggunaan. Mempelajari Hadoop 2.0 dan menerapkannya untuk melakukan perhitungan pada Big Data, anda akan membuka pintu gerbang untuk kerjaya yang maju secara teknikal dan bermanfaat dari segi kewangan.
Ada soalan untuk kami? Sila sebutkan di bahagian komen dan kami akan menghubungi anda.
Catatan berkaitan: