- Merancang dan mengimplementasikan sistem perangkat lunak. mereka juga memverifikasi dan memelihara sistem ini
- Bangun sistem yang kuat untuk penyerapan dan pemrosesan data
- Ekstrak operasi Load Transform yang dikenal sebagai proses ETL
- Menggali dan meneliti metode baru untuk mendapatkan data dan meningkatkan kualitasnya.
- Membangun arsitektur data yang memenuhi kebutuhan bisnis. Mereka bertanggung jawab untuk menghasilkan solusi terstruktur dengan mengintegrasikan beberapa bahasa dan alat pemrograman
- Menambang data dari berbagai sumber untuk membangun model bisnis yang efisien (opsional)
- Kelola data meta dan informasi lain yang terkait dengan data yang dipelihara (opsional)
- Bekerja dengan tim lain, analis data, dan ilmuwan data.
Persyaratan
– PENGALAMAN PENDIDIKAN
- Sarjana / Magister Matematika, Fisika, Statistik, Ilmu Komputer, Analisis Bisnis atau bidang lain yang relevan.
- Sertifikat Analisis Data / Ilmu Data dari organisasi profesional
- 4+ Tahun pengalaman profesional yang relevan di industri rintisan / Teknologi
– KETERAMPILAN TEKNIS
- Pemrograman: perlu memiliki pengalaman langsung dalam bahasa pemrograman yang dominan seperti Java, C++ atau PYTHON
- Database dan SQL : pengetahuan mendalam tentang DBMS dan SQL. Beberapa sistem manajemen database yang umum digunakan untuk rekayasa Big Data adalah MySQL, Oracle, Database dan Apache HIVE
- Sistem Operasi: pemahaman yang kuat tentang Linux dan Perintah OS Windows
- Alat dan kerangka kerja Hadoop : memiliki pengalaman dengan teknologi berbasis Hadoop APACHE seperti HDFS, MapReduce, Apache Pig, APache HBase dan Apache Spark
- Data Mining and modeling : memiliki pengalaman dengan data mining, data wrangling, dan teknik pemodelan data untuk memproses dan membersihkan data menggunakan berbagai metode, menemukan tren* dan pola yang tidak terlihat dalam data, dan membuatnya siap untuk dianalisis (opsional)
- Pengalaman di Pentaho, Knime, Rapid Miner atau SPSS, Hadoop atau Spark. Python atau R atau C++, SQL atau Tanpa database SQL