Percikan

Pasang Spark di Docker Container

Pasang Spark di Docker Container
  1. Bolehkah saya menjalankan percikan dalam bekas docker?
  2. Cara Mengakses Spark UI Dipasang di Docker?
  3. Boleh mencetuskan kontena?

Bolehkah saya menjalankan percikan dalam bekas docker?

0, Aplikasi Spark boleh menggunakan bekas Docker untuk menentukan kebergantungan perpustakaan mereka, bukannya memasang kebergantungan pada contoh Amazon EC2 individu dalam kelompok. Untuk menjalankan Spark dengan Docker, anda mesti mengkonfigurasi pendaftaran Docker terlebih dahulu dan menentukan parameter tambahan apabila mengemukakan permohonan percikan.

Cara Mengakses Spark UI Dipasang di Docker?

Pergi ke contoh EC2 anda dan salin alamat IPv4 awam. tambah port: 18080 di hujungnya dan tampalnya dalam tab baru. Pelayan Sejarah akan menunjukkan UI Spark untuk pekerjaan gam.

Boleh mencetuskan kontena?

Containerisasi permohonan anda

Langkah terakhir adalah untuk membuat imej kontena untuk aplikasi percikan kami supaya kami dapat menjalankannya di Kubernetes. Untuk membekalkan aplikasi kami, kami hanya perlu membina dan menolaknya ke Hub Docker. Anda perlu menjalankan Docker dan dilog masuk ke Hub Docker seperti ketika kami membina imej asas.

Mengautomasikan pekerjaan kerja keras pada kelompok
Apa itu Automasi Burung?Mengapa kerja keras menjadi masalah di SRE?Fasa perjalanan SRE yang mana termasuk kerja keras automatik?Apakah kaedah untuk m...
Menggunakan docker untuk mengasingkan persekitaran pengeluaran adalah pendekatan yang betul?
Bolehkah Docker digunakan untuk persekitaran pengeluaran?Sekiranya kita menggunakan Docker dalam pengeluaran?Apa itu pengasingan docker?Bagaimana Doc...
Dev/panggung/prod dalam akaun AWS berasingan, diuruskan melalui ruang kerja awan terraform, bagaimana saya boleh menggunakan lb ip dalam rekod dns untuk setiap env?
Bagaimana Terraform mengetahui akaun AWS yang hendak digunakan?Bagaimana saya menggunakan zon hos dari akaun AWS yang lain?Bagaimana saya membuat rek...