Wednesday, 25 January 2023

Metadata

METADATA

Kosakata Metadata menjadi jargon yang pertama kali saya dengar saat memasuki dunia basis data di tahun 2015. Awalnya hanya sekedar ikutan trend bicara metadata. Tidak paham maksud dan manfaatnya. Maksud metadata pun hanya bersumber dari teman-teman fotografer. Mereka wajib mencamtumkan metadata saat mengirim foto untuk lomba. Metadata yang tidak jelas dari sebuah foto maka akan dilewatkan oleh juri.

Kemudian sedikit mulai mendapat tambahan informasi, metadata adalah data tentang data, informasi tentang data. Tapi kalimat tersebut tidak membawa arti yang khusus. Hari ke hari dalam proses pembuatan basis data maupun data warehouse berjalan seperti biasanya.

Jika pembaca terlibat dengan tim pengembang perangkat lunak yang memiliki standar dan mengikuti metode-metode pembangunan seperti Agile ataupun Waterfall, mungkin juga dengan kehebohan saat ini atas Scrum, Sprint dan Big Data, Metadata akan menyelamatkan hidup tim Anda. 

Ternyata metadata adalah hal yang simpel namun tidak mudah, membutuhkan pengalaman untuk menentukan metadata. Artinya mudah dari metadata adalah informasi dari suatu hal. Jika itu sebuah foto, maka informasinya adalah waktu pengambilan, lokasi, parameter foto yg digunakan dan tentunya nama Anda selaku pengambil foto. Dalam basis data, metadata menunjukan dan menentukan karakter atau parameter sebuah tabel data. Berapa banyak kolom yang diperlukan, tipe data untuk setiap kolom, berapa panjang karakter, mana kolom primary key, mana kolom foreign key dan pada beberapa organisasi juga dicantumkan penjelasan singkat dari tabel/data tersebut.

Perangkat terkini seperti Teradata, Talend maupun Microsoft studio telah dilengkapi konversi metadata. cukup dengan beberapa klik, maka metadata dapat dibuat. 

Metadata menjadi sangat berarti saat Anda melakukan pengambilan data dan penyatuan data. Pipeline yang anda bangun memerlukan metadata untuk memperbarui informasi sebuah data. Rancang bangun pipeline yang multi line dan melibatkan banyak komponen memerlukan mekanisme cepat dan mudah untuk akomodasi sebuah perubahan kolom/field. 

Tanpa metadata, Anda harus merubah skema data pada setiap komponen dalam pipeline. hal ini akan merepotkan dan menimbulkan inkonsisten skema data. Pada akhirnya data tidak dapat tersimpan dengan benar pada data warehouse.


#metadata #teradata #talend #powerbi #microsftstudio #storytellingwithdata


No comments:

Post a Comment

JURUS PEMBELAH DATA

Tulisan berikut ini adalah perjalanan penulis membuka data dari sisi pandang data scientist Pemahaman Bisnis Judul: Stroke Prediction Datase...