Sign in

Data Engineer, sometimes do ML

Familiar dengan Google BigQuery?

Secara garis besar, Google BigQuery adalah salah satu service cloud yang digunakan oleh Tim Data, Warung Pintar. Google BigQuery sendiri merupakan multi-cloud dan serverless data warehouse yang didesain untuk kebutuhan analisa data.

Sudah setahun lebih Warung Pintar menggunakan service tersebut, di mana kami telah memiliki 2000+…


Warehouse Tekno, Warung Pintar.

Setiap pekerjaan tentu punya ceritanya masing-masing. Sama halnya seperti yang saya alami selama kurang lebih 1.5 tahun berkecimpung di dunia data, tepatnya sebagai Data Engineer.

Setelah waktu itu sempat menuliskan tentang apa itu Data Engineer dan apa yang dilakukan serta ingin dibangun oleh Tim Data Engineer, seperti yang bisa dibaca…


https://unsplash.com/photos/VMKBFR6r_jg

In this story I will give my experience about ETL process on google spreadsheet and store it into bigquery. Let’s begin

First, of course we need to add some data into google spreadsheet. Here is my example data:


Ada pepatah yang berbunyi, “As much as you want to plan your life, it has a way of surprising you with unexpected things.” Kenapa tiba-tiba saya mengeluarkan pepatah itu? Pada awalnya, saya sudah berencana untuk menulis cara melakukan analisa kode dari sebuah platform git. …


https://m.solopos.com/surabaya-kota-terpopuler-dunia-2018-957650

Actually I just finished this project 9 month ago. But I am too lazy to write it on medium haha. Now, I am just trying to make it more readable and easy to learn for everyone. Here we go :

Surabaya has a portal that collect all the complaint from…


Dalam cerita kali ini saya membagikan sebuah kisah unik sewaktu saya berhadapan dengan airflow. Ya kita sebagai tim Data Engineer di Warung Pintar menggunakan airflow melalui google cloud composer sebagai sarana untuk melakukan scheduling dan monitoring workflow khususnya terkait kebutuhan ETL. Untuk dokumentasi airflow lebih lengkap ada di sini .


Beberapa waktu yang lalu saya mendapatkan sebuah task yang tidak biasa. Kenapa tidak biasa ? karena problem pada task ini tidak biasa, saya harus mengirim lewat email melalui google sheet. Mana bisa ? Mana mungkin ? itu lah yang terpikir pada benak saya. …


Well, this is my second story since I began my medium in February. It took almost 6 months for me to start writing again, LOL. Before I start it, I will continue this story using Bahasa.

Jika kalian membaca cerita pertama saya mengenai folium https://medium.com/@adamwdb/playing-with-kasir-pintars-data-using-folium-in-python-e097948ebd4d , saya merupakan android developer…


source : http://python-visualization.github.io/folium/docs-master/quickstart.html

This is my first story in medium. Everyday I work as an android developer at Kasir Pintar.

But one day, I was curious and idle about the data on this startup. Therefore I am trying now to ‘play’ with the data.

The thing that is very easy to do is…

Adam WB

Get the Medium app

A button that says 'Download on the App Store', and if clicked it will lead you to the iOS App store
A button that says 'Get it on, Google Play', and if clicked it will lead you to the Google Play store