Kami mencari seorang Backend Developer yang sangat terampil untuk membangun database yang kuat dan mengembangkan sistem backend yang mampu mengekstrak, memproses, dan menyimpan data dari situs web eksternal. Kandidat yang ideal akan memiliki pengalaman dalam web scraping, manajemen database, pengembangan API, dan optimisasi backend.

• Merancang dan mengimplementasikan database yang skalabel (PostgreSQL, MySQL, MongoDB) untuk menyimpan sejumlah besar data terstruktur.
• Mengembangkan skrip web scraping menggunakan Python (Scrapy, BeautifulSoup, Selenium) atau Node.js (Puppeteer, Cheerio) untuk mengekstrak data dari situs web eksternal.
• Memastikan pembersihan, validasi, dan pengaturan data sebelum dimasukkan ke dalam database.
• Membangun RESTful API untuk menyajikan data secara efisien ke frontend.
• Optimalkan kueri database untuk memastikan waktu respons yang cepat.
• Implementasikan cron jobs dan skrip otomatisasi untuk pembaruan data berkala.
• Amankan penyimpanan data dan mencegah blok deteksi scraping (misalnya, proxy yang berputar, browser tanpa kepala).
• Integrasikan API pihak ketiga jika diperlukan untuk mengambil sumber data tambahan.