Changes for page Friday 14 February 2025
Last modified by dennis yoshikawa on 2025/02/14 01:23
From version
6.5


edited by dennis yoshikawa
on 2025/02/14 01:18
on 2025/02/14 01:18
Change comment:
There is no comment for this version
To version
4.23


edited by Haekal Yusril Faizin
on 2025/02/13 12:28
on 2025/02/13 12:28
Change comment:
There is no comment for this version
Summary
Details
- Page properties
-
- Author
-
... ... @@ -1,1 +1,1 @@ 1 -XWiki. dennis1 +XWiki.haekalfaizin - Content
-
... ... @@ -10,47 +10,25 @@ 10 10 What Have You Done? 11 11 {{/success}} 12 12 13 -* Airflow-airbyte maintenance 13 +1. xxx 14 +1. xxx 15 +1. xxx 14 14 15 -~1. create task for delete gcs folder table dharmadexa 16 -2. change incremental method in airbyte for tb) 17 - 18 -* Dkonsul 19 - 20 -~1. Deploy transformation code to production. 21 -2. Final QC with partnership team. 22 - 23 -* *D2D* 24 - 25 -~1. enhance logic stickness rate (mart) 26 -2. weekly regrup w/product 27 - 28 -* MCN 29 - 30 -~1. troubleshoot on DAG and resource 31 -2. repointing new database for all pipeline existing 32 - 33 -* Screening 34 - 35 -~1. regroup w/PM and DA for validate data and discuss funneling data 36 -2. enhance logic fact table dharmadexa 37 -3. preparation dharmadexa data phase 3 (funneling) 38 -4. testing geo.py to get city from long lat 39 -5. migrasi dataset cleaned_screening_merck.dim_screening_stunting to CH 40 - 41 41 {{warning}} 42 42 What Issues You Have? 43 43 {{/warning}} 44 44 45 -1. That's difficulty in finding open source data quality tools is that most of them are paid. 21 +1. xxx 22 +1. xxx 23 +1. xxx 46 46 47 47 {{info}} 48 48 What Next You Will Do? (Optional) 49 49 {{/info}} 50 50 51 -1. Exp 52 52 1. xxx 53 53 1. xxx 31 +1. xxx 54 54 55 55 **What Support You Need? (Optional)** 56 56 ... ... @@ -137,52 +137,17 @@ 137 137 {{/warning}} 138 138 139 139 1. There is no info regarding database repointing of MCN from tech team. So, the data is not updated. Already solved by coordinating with Product Team 140 -1. Need to enhance the RAGaccuracy to around 90%118 +1. Need to enhance the accuracy to around 90% 141 141 142 142 {{info}} 143 143 What Next You Will Do? (Optional) 144 144 {{/info}} 145 145 146 -1. Increase RAG accuracy by adding more train query LLM147 -1. Start daily recurring scraping for tiktok dashboard148 -1. Start dkonsul insight next week124 +1. xxx 125 +1. xxx 126 +1. xxx 149 149 150 150 **What Support You Need? (Optional)** 151 151 152 - 153 -=== Summary === 154 - 155 -Berikut ringkasan laporan mingguan dari 14 Februari 2025 yang ditulis oleh Haekal Yusril Faizin. Laporan ini merangkum aktivitas dan isu dari tim Data Engineer, Data Analyst, dan Data Analyst & AI. 156 - 157 -**Data Analyst** 158 - 159 -* Menyelesaikan fase kedua Dharma Dexa. 160 -* Memindahkan visualisasi data dan analitik dari Looker ke Metabase. 161 -* Mendesain ulang data DKonsul untuk struktur dan organisasi yang lebih baik. 162 -* Menangani berbagai permintaan data on-demand. 163 - 164 -**Data Analyst & AI** 165 - 166 -* Menerapkan, mengevaluasi, dan mendokumentasikan API Screening Dharma Dexa untuk diakses oleh tim Tech. 167 -* Menerapkan, mengevaluasi, dan mendokumentasikan master user GUE Ecosystem untuk diakses oleh tim Tech. 168 -* Memperbaiki masalah lonjakan sumber daya yang disebabkan oleh jadwal scraping. 169 -* Merepoint, menyelaraskan ulang, dan mendesain ulang pipeline dan database yang digunakan untuk scraping. 170 -* Menerapkan pemetaan kepatuhan dengan data terbaru dari tim kepatuhan. 171 -* Memvalidasi data, alur, dan skrip untuk kinerja laporan pengguna dokter. 172 - 173 -**Isu** 174 - 175 -* Pilihan bagan dan fleksibilitas yang terbatas dalam kustomisasi Metabase. 176 -* Kurangnya informasi mengenai database repointing MCN dari tim teknologi. 177 -* Perlu meningkatkan akurasi RAG menjadi sekitar 90%. 178 - 179 -**Langkah Selanjutnya** 180 - 181 -* Melanjutkan desain ulang data DKonsul dan migrasi ke Metabase. 182 -* Melanjutkan dengan Dharma Dexa Fase 3 dan mengembangkan Dasbor Pelacak Kunjungan AppSheet MCN. 183 -* Meningkatkan akurasi RAG, memulai scraping berulang harian untuk dasbor TikTok, dan memulai wawasan DKonsul minggu depan. 184 - 185 -**Dukungan yang Dibutuhkan** 186 - 187 -* Validasi data dan peningkatan penyaringan Dharma Dexa. 130 + 188 188 )))