• Terlibat dalam reka bentuk, pembangunan dan pengoptimuman platform data besar syarikat, menyokong pertumbuhan perniagaan yang berterusan dan pengambilan keputusan berasaskan data.

• Bertanggungjawab untuk pembinaan kluster ClickHouse, penalaan prestasi, pemantauan dan penyelenggaraan harian, memastikan ketersediaan tinggi dan prestasi tinggi sistem.

• Terlibat dalam pembangunan, pengelolaan dan penyelenggaraan tugas pemprosesan aliran Flink, memastikan kestabilan rantaian pemprosesan data masa nyata.

• Menyokong keperluan perkhidmatan data pihak perniagaan, membangunkan perkhidmatan API berdasarkan Java Spring Boot.

• Membantu pasukan sains data dalam membina saluran data, menyokong latihan model algoritma dan perkhidmatan dalam talian.

• Sentiasa mengoptimumkan proses pemprosesan data dan seni bina sistem, meningkatkan kestabilan dan kebolehan pengembangan sistem.

• Secara proaktif mengambil tanggungjawab dalam projek, mendorong penyelesaian masalah, memiliki semangat pemilik, dan mampu mengekalkan kecekapan dan komunikasi yang baik di bawah tekanan tinggi.

• Ijazah sarjana muda dan ke atas, dengan keutamaan kepada bidang berkaitan seperti komputer, kejuruteraan perisian, teknologi maklumat.

• Pengalaman berkaitan big data selama 3~5 tahun.

• Kuasai asas pangkalan data: memahami prinsip pangkalan data relasi (seperti MySQL, PostgreSQL) dan pangkalan data lajur (seperti ClickHouse, Doris), serta memahami mekanisme penyimpanan bawah tanah dan pengoptimuman pertanyaan.

• Kemampuan pengembangan yang kuat: mahir dalam Java, mempunyai pengalaman menggunakan kerangka Spring Boot untuk membangunkan perkhidmatan REST API.

• Kemahiran komunikasi dan kerjasama yang cemerlang, mampu bekerjasama rapat dengan pasukan analisis data, produk dan perniagaan.

• Bertanggungjawab, mempunyai daya tahan tekanan dan kemampuan menyelesaikan masalah yang baik, mampu memajukan kemajuan kerja secara proaktif.

• Boleh menerima pemindahan ke Jepun selepas enam bulan (sokongan visa dari syarikat).

Bonus jika anda juga mempunyai:

1. Pengalaman praktikal dengan komponen seperti Kafka, Zookeeper, HDFS, Hive, Airflow;

2. Pengalaman dalam projek berkaitan sistem cadangan, profil pengguna, penarafan peribadi;

3. Latar belakang berkaitan algoritma ramalan (seperti ramalan siri masa, ramalan perilaku pengguna);

4. Familiar dan telah mengamalkan model bahasa besar (LLM, seperti ChatGPT, LLama) dalam senario aplikasi perniagaan atau sistem (seperti pengayaan data, ringkasan automatik, soal jawab pintar);

5. Pernah terlibat dalam projek pembangunan gudang data masa nyata dan sistem metrik;

6. Pengalaman dalam membangunkan platform big data dari 0 hingga 1 adalah keutamaan.

ClickHouse

• Menguasai pemodelan data ClickHouse, pengoptimuman pertanyaan dan pengawalan sumber;

• Mempunyai pengalaman praktikal dalam operasi kluster, menyelesaikan masalah dan pemantauan prestasi;

• Familiar dengan integrasi ClickHouse dengan perantara data/pemprosesan aliran/sistem penjadualan.

Flink

• Familiar dengan mekanisme asas Flink, seperti checkpoint, state backend, mekanisme window;

• Mampu menulis tugas pemprosesan masa nyata Flink yang kompleks secara berdikari, dan menyelesaikan masalah prestasi semasa operasi;

• Mempunyai pengalaman dalam penyebaran kluster Flink dan penyelenggaraan kestabilan.