Adakah Anda Orangnya?

Sebagai Jurutera Ketua Teknikal - Data, anda akan merancang, melaksanakan, dan meningkatkan platform data dari hujung ke hujung yang dibina di atas AWS S3, Glue, Lake Formation, dan DMS. Anda akan memimpin sebuah pasukan kecil jurutera sambil bekerjasama secara lintas fungsi dengan pemangku kepentingan dari penipuan, kewangan, produk, dan kejuruteraan untuk memastikan akses data yang boleh dipercayai, tepat pada masanya, dan selamat di seluruh perniagaan.

Anda akan memimpin amalan terbaik dalam reka bentuk data, tadbir urus, dan keterlihatan, memanfaatkan alat AI Generatif untuk meningkatkan produktiviti kejuruteraan dan mempercepatkan masa untuk mendapatkan wawasan.

Anda akan memimpin amalan terbaik dalam reka bentuk data, tadbir urus, dan keterlihatan, memanfaatkan alat AI Generatif untuk meningkatkan produktiviti kejuruteraan dan mempercepatkan masa untuk mendapatkan wawasan.

Anda Akan Menyumbang Kepada

• Memiliki reka bentuk dan kebolehan skala seni bina tasik data untuk beban kerja penstriman dan batch, memanfaatkan perkhidmatan asli AWS.
• Memimpin pembangunan saluran kemasukan, transformasi, dan penyimpanan menggunakan AWS Glue, DMS, Kinesis/Kafka, dan PySpark.
• Menyusun dan mengembangkan data ke dalam format tabel terbuka (Apache Iceberg, Delta Lake) untuk menyokong pertanyaan waktu nyata dan perjalanan masa untuk perkhidmatan hiliran.
• Mendorong produk data, membolehkan akses API-pertama dan layan diri kepada dataset yang dikurasi untuk kes penggunaan pengesanan penipuan, penyelarasan, dan pelaporan.
• Mentakrif dan mengesan SLA dan SLO untuk saluran data kritikal, memastikan ketersediaan tinggi dan ketepatan data dalam persekitaran fintech yang dikawal.
• Bekerjasama dengan pasukan InfoSec, SRE, dan Tadbir Urus Data untuk mematuhi keselamatan data, pengesanan lineage, kawalan akses, dan pematuhan (GDPR, MAS TRM).
• Menggunakan alat AI Generatif untuk meningkatkan produktiviti pembangun, termasuk menjana automatik kerangka ujian, dokumentasi skema, scaffolds transformasi, dan wawasan prestasi.
• Memberi bimbingan kepada jurutera data, menetapkan arah teknikal, dan memastikan penghantaran saluran data yang berkualiti tinggi dan boleh diperhatikan.

Tanggungjawab

• Mereka bentuk saluran yang boleh diskala dan dioptimumkan untuk kos merentasi paradigma waktu nyata dan batch menggunakan alat seperti AWS Glue, Step Functions, Airflow, atau EMR.
• Mengurus kemasukan dari sumber transaksi menggunakan AWS DMS, dengan tumpuan kepada pengendalian pergeseran skema dan replikasi latensi rendah.
• Mereka bentuk strategi pengpartitionan, pemampatan, dan metadata yang cekap untuk tabel Iceberg atau Hudi yang disimpan dalam S3, yang dikatalogkan dengan Glue dan Lake Formation.
• Membina pasar data, pandangan audit, dan lapisan analitik untuk menyokong proses yang dipacu mesin (contohnya, enjin penipuan) dan antara muka yang boleh dibaca manusia (contohnya, papan pemuka).
• Memastikan keterlihatan data yang kukuh dengan metrik, amaran, dan pengesanan lineage melalui OpenLineage atau Great Expectations.
• Memimpin semakan suku tahunan tentang kos data, prestasi, evolusi skema, dan reka bentuk seni bina dengan pemangku kepentingan dan kepimpinan senior.
• Melaksanakan kawalan versi, CI/CD, dan amalan infrastruktur-sebagai-kod menggunakan GitOps dan alat seperti Terraform.

• Pengalaman sekurang-kurangnya 7 tahun dalam kejuruteraan data.
• Pengalaman mendalam secara langsung dengan tumpuan data AWS: Glue (Pekerjaan & Pengendali), S3, Athena, Lake Formation, DMS, dan Redshift Spectrum.
• Keahlian dalam merancang saluran data untuk sistem masa nyata, penstriman, dan kumpulan, termasuk reka bentuk skema, pengoptimuman format, dan SLA.
• Kemahiran pengaturcaraan yang kuat dalam Python (PySpark) dan SQL lanjutan untuk pemprosesan analitik dan transformasi.
• Pengalaman terbukti dalam mengurus seni bina data menggunakan format jadual terbuka (Iceberg, Delta Lake, Hudi) pada skala besar.
• Memahami pemprosesan aliran dengan Kinesis/Kafka dan orkestra melalui Airflow atau Step Functions.
• Pengalaman dalam melaksanakan kawalan akses data, dasar penyulitan, dan aliran kerja pematuhan dalam persekitaran terkawal.
• Keupayaan untuk mengintegrasikan alat GenAI ke dalam proses kejuruteraan data untuk memacu produktiviti dan peningkatan kualiti yang dapat diukur — dengan kebersihan kejuruteraan yang kuat.
• Keupayaan yang ditunjukkan untuk memimpin pasukan, membuat keputusan seni bina, dan berkolaborasi dengan pihak berkepentingan lintas fungsi.

Poin Tambahan

• Pengalaman bekerja dalam persekitaran yang diatur oleh PCI DSS atau mana-mana bank pusat dengan keperluan pengauditan dan penyimpanan data.
• Pengalaman dalam domain pembayaran atau perbankan, dengan kes penggunaan berkaitan penyesuaian, analisis chargeback, atau pengesanan penipuan.
• Kefahaman tentang kontrak data, corak mesh data, dan prinsip data sebagai produk.
• Pengalaman menggunakan GenAI untuk mengautomasi dokumentasi data, menghasilkan ujian data, atau menyokong kes penggunaan penyesuaian.
• Terpapar kepada strategi penalaan prestasi dan pengoptimuman kos dalam AWS Glue, Athena, dan S3.