Databoks.id x DQLab: Peran Data Engineer di Industri Media
Ia mengatakan, ada beberapa hard skill dan tools yang dibutuhkan untuk menjadi data engineer. Pertama database management seperti MySQL, Cassandra atau Postgree. Kedua, bahasa pemrograman seperti Python, Java, dan Scala. Ketiga, teknologi cloud seperti AWS dan Azure. Terakhir, computing frameworks Hadoop dan Spark.
Yogi juga menjelaskan beberapa tugas harian atau daily task Data Engineer di Databoks. Menurutnya, membuat, pemeliharaan, dan melakukan monitoring automating content dalam proses ETL menjadi tugas utama harian yang selalu dijalankan.
“Proses ETL ini sebenarnya jadi inti tugas atau daily task data engineer di Databoks. Contohnya, kita mau bersi informasi mengenai gempa yang terjadi pukul 2 subuh. Jurnalis tidak akan selalu sedia 24/7 untuk membuat artikel atau informasi tersebut. Nah, data engineer melalui monitoring automating bisa membuat konten gempa otomatis dari BMKG,” katanya.
Lebih lanjut, ia mengungkapkan, tugas yang dilakukan ialah support data analyst untuk scraping dan cleaning data dari berbagai sumber. Selain itu, riset untuk NLP model, seperti keyword extractor, sentiment analysis hingga summarization juga perlu dilakukan untuk mendukung media agar menyediakan informasi yang sesuai.
Databoks merupakan bagian dari Katadata yang dikenal sebagai platform berita dan informasi dengan variasi lini bisnis seperti Katadata.co.id, Katadata Learning Center, Sisi by Katadata. Secara khusus, Databoks.id adalah portal data statistik ekonomi, bisnis, riset, migas, serta industri yang terbaru dan terlengkap di Indonesia.
