FULL_TIME
Ringkasan Lowongan
Kami mencari Python dan PySpark Developer yang sangat terampil dan berpengalaman untuk bergabung dengan tim kami. Kandidat yang ideal akan bertanggung jawab merancang, mengembangkan, dan mengoptimalkan pipeline serta solusi big data menggunakan Python, PySpark, dan framework komputasi terdistribusi. Peran ini bekerja sama dengan data engineer, data scientist, dan pemangku kepentingan bisnis untuk memproses, menganalisis, dan memperoleh insight dari dataset berskala besar.
Tanggung jawab utama:
Rekayasa dan Pengembangan Data: Merancang dan mengimplementasikan pipeline data yang dapat diskalakan menggunakan PySpark dan framework big data lainnya. Mengembangkan kode yang dapat digunakan kembali serta efisien untuk ekstraksi, transformasi, dan pemuatan data (ETL). Mengoptimalkan alur kerja data dari sisi performa dan efisiensi biaya.
Analisis dan Pemrosesan Data: Memproses dan menganalisis dataset terstruktur dan tidak terstruktur. Membangun serta memelihara data lake, data warehouse, dan solusi penyimpanan lainnya.
Kolaborasi dan Pemecahan Masalah: Bekerja sama dengan tim lintas fungsi untuk memahami kebutuhan bisnis dan mengubahnya menjadi solusi teknis. Mendiagnosis serta menyelesaikan hambatan performa dalam pipeline big data.
Kualitas Kode dan Dokumentasi: Menulis kode yang bersih, mudah dipelihara, dan terdokumentasi dengan baik. Menjaga kepatuhan terhadap kebijakan tata kelola data dan keamanan.
Persyaratan dan kualifikasi yang diperlukan:
Keahlian pemrograman: Mahir menggunakan Python dengan pengalaman memakai pustaka pemrosesan data seperti Pandas dan NumPy. Memiliki pengalaman yang kuat dalam PySpark dan Apache Spark.
Big Data dan Cloud: Memiliki pengalaman langsung dengan platform big data seperti Hadoop, Databricks, atau platform serupa. Mengenal layanan cloud seperti AWS (EMR, S3), Azure (Data Lake, Synapse), atau Google Cloud (BigQuery, Dataflow).
Keahlian database: Memiliki pengetahuan yang kuat tentang database SQL dan NoSQL. Berpengalaman bekerja dengan database relasional seperti PostgreSQL, MySQL, atau Oracle.
Alat Orkestrasi Alur Kerja Data: Berpengalaman menggunakan alat orkestrasi alur kerja seperti Apache Airflow atau alat serupa.
Pemecahan Masalah dan Komunikasi: Mampu menyelesaikan masalah rekayasa data kompleks secara efisien. Memiliki kemampuan komunikasi yang kuat untuk bekerja secara efektif dalam lingkungan kolaboratif.
Kualifikasi yang diutamakan: Pengetahuan tentang arsitektur dan framework Lakehouse. Mengenal pipeline machine learning serta integrasinya. Berpengalaman dengan alat CI/CD dan praktik DevOps untuk alur kerja data. Sertifikasi Spark, Python, atau platform cloud menjadi nilai tambah.
Pendidikan: Gelar sarjana atau magister di bidang Ilmu Komputer, Rekayasa Data, atau bidang terkait.
Awalnya diposting di Himalayas.
PySpark Developer
Inizio Partners Corp • United States
Gaji tidak dicantumkan
Deskripsi Pekerjaan
Ringkasan
- Perusahaan
- Inizio Partners Corp
- Lokasi
- United States
- Tipe kerja
- FULL_TIME
- Gaji
- Gaji tidak dicantumkan
- Tanggal tayang
- 11 Okt 2026
- Terlihat sejak
- 12 Nov 2026
Sumber & keterlacakan data
Himalayas (public board)Buka sumber asli ↗https://himalayas.app/companies/inizio-partners-corp/jobs/pyspark-developer
Siap melamar? Langsung di sumber asli.Buka Halaman Lamaran
Lowongan Terkait Lainnya
FULL_TIME1bln
Senior Data Scientist - ML Model Development
Inizio Partners Corp • United States
Gaji tidak dicantumkanLihat Detail →
FULL_TIME1blnGCP Data Engineer
Inizio Partners Corp • United States
Gaji tidak dicantumkanLihat Detail →
FULL_TIME1blnSenior Data Scientist, eCommerce
Inizio Partners Corp • United States
Gaji tidak dicantumkanLihat Detail →
FULL_TIME1blnMachine Learning Engineer (GCP)
Inizio Partners Corp • United States
Gaji tidak dicantumkanLihat Detail →