Hadoop

23 Mac 2021 | Cybrary

Hadoop ialah platform perisian yang membolehkan pengguna mengurus sejumlah besar data. Hadoop memproses sejumlah besar data berstruktur, separa berstruktur dan tidak berstruktur. Beberapa contoh set data yang dikendalikan oleh Hadoop ialah rekod strim klik Internet, log pelayan web, siaran media sosial, e-mel pelanggan dan data sensor IoT . Hadoop pada asasnya ialah kabinet fail berteknologi tinggi yang besar, tetapi mempunyai kegunaan lain. Hadoop juga boleh digunakan untuk melakukan analisis ramalan, perlombongan data dan pembelajaran mesin.

Hadoop boleh dipecahkan kepada empat komponen utama:

Sistem Fail Teragih Hadoop (HDFS)
- Menyimpan data
Yet Another Resource Negotiator (YARN)
- Memperuntukkan sumber sistem kepada apl dan menjadualkan kerja
Pengurangan Peta
- Membahagikan kerja pemprosesan kepada berbilang tugas
Hadoop Biasa
- Satu set utiliti yang menyediakan keupayaan asas yang diperlukan oleh komponen Hadoop lain

Apakah nilai yang Hadoop tawarkan kepada SMB saya?

Kemungkinan besar pemilik SMB dan pekerja mereka mendapat manfaat daripada Hadoop melalui analisis set data besar oleh pihak ketiga yang lain dan bukannya secara langsung dengan memanfaatkan kuasanya. Pengecualian wujud dalam SMB yang mengendalikan set data yang sangat besar, tetapi itu adalah pengecualian.

Hadoop telah menjadi agak biasa digunakan kerana ia boleh diakses, berpatutan dan sangat berguna apabila melihat set data yang besar dan cuba mengusik korelasi, ekstrapolasi dan ramalan.

Hadoop boleh diskalakan dengan berbilang mesin untuk menampung hampir semua saiz set data. Hadoop menggunakan "perkakasan komoditi," yang bermaksud sistem kos rendah terus dari rak . Tiada sistem khas atau perkakasan tersuai yang mahal diperlukan untuk menjalankan Hadoop, menjadikannya murah untuk dikendalikan. Profesional IT selalunya merupakan orang yang paling mendapat manfaat daripada Hadoop ini, kerana ia membolehkan mereka membeli bilangan dan jenis perkakasan yang paling sesuai dengan keperluan tersuai perniagaan atau jabatan IT.

Apabila data berkembang, ia akan menjadi semakin penting untuk menyimpannya dengan cekap dan berkesan. Apabila anda dikehendaki mengumpul set data besar-besaran, storan mungkin menjadi lebih mahal; itulah sebabnya menggunakan alat data seperti Hadoop ialah strategi pintar untuk jangka panjang syarikat anda.