Familiar dengan Google BigQuery? Secara garis besar, Google BigQuery adalah salah satu service cloud yang digunakan oleh Tim Data, Warung Pintar. Google BigQuery sendiri merupakan multi-cloud dan serverless data warehouse yang didesain untuk kebutuhan analisa data. Sudah setahun lebih Warung Pintar menggunakan service tersebut, di mana kami telah memiliki 2000+…

Setiap pekerjaan tentu punya ceritanya masing-masing. Sama halnya seperti yang saya alami selama kurang lebih 1.5 tahun berkecimpung di dunia data, tepatnya sebagai Data Engineer. Setelah waktu itu sempat menuliskan tentang apa itu Data Engineer dan apa yang dilakukan serta ingin dibangun oleh Tim Data Engineer, seperti yang bisa dibaca…

In this story I will give my experience about ETL process on google spreadsheet and store it into bigquery. Let’s begin First, of course we need to add some data into google spreadsheet. Here is my example data:

Ada pepatah yang berbunyi, “As much as you want to plan your life, it has a way of surprising you with unexpected things.” Kenapa tiba-tiba saya mengeluarkan pepatah itu? Pada awalnya, saya sudah berencana untuk menulis cara melakukan analisa kode dari sebuah platform git. …

Actually I just finished this project 9 month ago. But I am too lazy to write it on medium haha. Now, I am just trying to make it more readable and easy to learn for everyone. Here we go : Surabaya has a portal that collect all the complaint from…

Dalam cerita kali ini saya membagikan sebuah kisah unik sewaktu saya berhadapan dengan airflow. Ya kita sebagai tim Data Engineer di Warung Pintar menggunakan airflow melalui google cloud composer sebagai sarana untuk melakukan scheduling dan monitoring workflow khususnya terkait kebutuhan ETL. Untuk dokumentasi airflow lebih lengkap ada di sini . …

Beberapa waktu yang lalu saya mendapatkan sebuah task yang tidak biasa. Kenapa tidak biasa ? karena problem pada task ini tidak biasa, saya harus mengirim lewat email melalui google sheet. Mana bisa ? Mana mungkin ? itu lah yang terpikir pada benak saya. Sebelumnya saya ucapkan terima kasih kepada co-workers…

Well, this is my second story since I began my medium in February. It took almost 6 months for me to start writing again, LOL. Before I start it, I will continue this story using Bahasa. Jika kalian membaca cerita pertama saya mengenai folium https://medium.com/@adamwdb/playing-with-kasir-pintars-data-using-folium-in-python-e097948ebd4d , saya merupakan android developer…

This is my first story in medium. Everyday I work as an android developer at Kasir Pintar. But one day, I was curious and idle about the data on this startup. Therefore I am trying now to ‘play’ with the data. The thing that is very easy to do is…