Butiran Utama

Masa Jenis: Penuh Masa

Jenis Pekerja: Pekerja

Tujuan peranan ini adalah untuk memacu penghantaran artefak binaan yang cekap dan memberikan kepimpinan teknikal dalam reka bentuk, pembangunan, dan penyebaran platform QBE.

• Ketua reka bentuk, pembangunan, dan pengoptimuman saluran data dan aliran kerja dalam Azure Databricks menggunakan Python.
• Bekerjasama dengan pasukan platform untuk memastikan keselarasan sumber, protokol keselamatan, dan kebolehsesuaian untuk persekitaran Databricks.
• Mengarsitek, melaksanakan, dan mengekalkan saluran ETL yang dioptimumkan, memastikan mereka boleh dipercayai, berskala, dan cekap.
• Bekerjasama rapat dengan pihak berkepentingan untuk memahami keperluan perniagaan dan merancang penyelesaian data yang memenuhi keperluan mereka.
• Memberi kepimpinan teknikal kepada jurutera data junior, membimbing mereka dalam amalan terbaik untuk reka bentuk saluran data, pemprosesan data, dan pengoptimuman Databricks.
• Mengkoordinasikan dengan pasukan platform untuk memastikan ketersediaan, kebolehpercayaan, dan prestasi infrastruktur yang mendasari.
• Memimpin usaha penyelesaian masalah dan penyelesaian berkaitan pemprosesan data dan kegagalan saluran, memastikan masa henti yang minimum.
• Memantau prestasi saluran data dan melaksanakan strategi pengoptimuman untuk memperbaiki masa pemprosesan, mengurangkan kos, dan meningkatkan keseluruhan kecekapan platform.
• Bekerjasama dengan arkitek data dan jurutera untuk membangunkan model data yang boleh diintegrasikan dengan lancar dengan Databricks.
• Menjaga pengetahuan terkini mengenai amalan terbaik dan teknologi baru dalam kejuruteraan data, khususnya dalam ekosistem Azure.

Keperluan:

• 5+ tahun pengalaman dalam kejuruteraan data dengan fokus pada membina dan mengoptimumkan saluran data.
• Pengalaman yang kuat dengan Azure Databricks dan keupayaan untuk memimpin dan mengoptimumkan aliran kerja kompleks dalam persekitaran ini.
• Kemahiran dalam Python untuk pemprosesan data, pembangunan saluran, dan automasi.
• Pengalaman dengan Azure Data Lake, Azure SQL, dan penyelesaian penyimpanan dan pemprosesan data lain dalam Azure.
• Pemahaman mendalam tentang proses ETL, termasuk reka bentuk saluran, automasi, dan penyelesaian masalah.
• Pengalaman langsung dengan Databricks Delta Lake, Apache Spark, dan pemadaman prestasi dalam Databricks.
• Kesedaran mengenai infrastruktur awan (Azure), termasuk pertimbangan rangkaian, penyimpanan, dan keselamatan.
• Kebolehan untuk bekerjasama dan berkomunikasi secara efektif dengan pasukan merentasi fungsi, termasuk pasukan platform, untuk memastikan keselarasan dan penghantaran yang berjaya.
• Kemahiran penyelesaian masalah dan penyelesaian yang kuat, terutamanya berkaitan dengan prestasi saluran data dan kegagalan.
• Kemahiran komunikasi dan kepimpinan yang cemerlang, dengan kebolehan untuk membimbing dan mengajar jurutera junior.

Kelayakan Yang Diharapkan:

• Pengalaman dengan amalan DevOps dan saluran CI/CD untuk aliran kerja kejuruteraan data.
• Kesedaran mengenai Azure Synapse Analytics, Azure Data Factory, dan perkhidmatan data berasaskan Azure lain.
• Pengalaman bekerja dalam persekitaran Agile dengan kesedaran tentang alat pengurusan projek.

Kemahiran:

Komunikasi, Pemikiran Kritis, Perkhidmatan Pelanggan, Sistem Kewangan, Kerjasama yang Sengaja, Pengurusan Prestasi, Peningkatan Proses, Sistem Pengurusan Pangkalan Data Relasional (RDBMS), Pengurusan Risiko, Pembangunan Perisian, Metodologi Kitaran Hayat Pembangunan Perisian (SDLC), Pengurusan Pihak Berkepentingan, Kepimpinan Strategik, Pengurusan Pasukan, Model Air Terjun

Cara Memohon:

Untuk menghantar permohonan anda, klik "Mohon" dan ikuti proses langkah demi langkah.

Peluang Pekerjaan Setara:

QBE adalah majikan yang memberikan peluang yang sama dan dikehendaki mematuhi undang-undang peluang pekerjaan yang setara di setiap bidang kuasa di mana ia beroperasi.

Sila rujuk kepada penerangan kerja.