Masalah: ketika didatawarehouse terkadang kita buat suatu logic yang mana, hanya insert baris baru ketika ada data baru saja. logic ini digukan untuk data yang lama memang tidak ada perubahan. Solusi: didalam ADF / Azure Data Factory kita membuat beberapa data flow seperti dibawah ini: disini ada beberapa task seperti…

Problem when I’m check job trigger at Azure Data Factory there pipeline have got error and error like this: I have googling about this issue and is still not find and users on coomunity like Stackoverflow and Msdn not find this issue. Solution the solution is you can create a…

Masalah Terkadang user dari kita ingin memonitor sumber data yang sudah mereka berikan kepada kita. biasanya dari mereka memonitoring data tersebut ada 2 jenis yaitu nama file dan last modified. Solusi Ini pengalaman saya untuk membuatnya dengan Azure Data Factory (ADF). Dalam aktivitas tersebut saya menggunakan beberapa aktivitas yaitu Metadata, For Each, dan Stored Procedure. Metadata aktivitas ini digunakan apabila ingin mengambil Metadata suatu file. metadata sendiri biasanya kita dapatkan seperti dari link ini dan detail seperti dibawah ini: