[請益] 如何系統化清理資料

看板Soft_Job (軟體人)作者 (節衣縮食)時間13年前 (2013/04/21 09:43), 編輯推噓1(1012)
留言13則, 4人參與, 最新討論串1/1
公司打算清理客戶系統裡的髒資料 包含重覆的客戶、地址、電話等等格式不合者 林林總總的骯髒狀況還不少 我目前只想到下SQL去找、更正 但覺得這樣很沒系統 而且客戶系統跟其他系統會交換資料,別的系統也可以過來更新 如此一來可能清好的又被改掉 不知道版上朋友是否有推薦的工具/方法/案例可以參考? 謝謝! -- ※ 發信站: 批踢踢實業坊(ptt.cc) ◆ From: 175.180.69.138

04/21 10:27, , 1F
別的系統是直接更新還是透過客戶系統的api?
04/21 10:27, 1F

04/21 12:08, , 2F
我覺得寫支小程式清..比較好
04/21 12:08, 2F

04/21 17:32, , 3F
要根絕應該是改寫資料的程式,但如果各系統沒有統一規劃
04/21 17:32, 3F

04/21 17:33, , 4F
那就是大改動,有心做是最好 不過會很苦
04/21 17:33, 4F

04/21 17:34, , 5F
沒有的話就跟2樓說的一樣 弄個排程定時清
04/21 17:34, 5F

04/21 17:37, , 6F
會有重覆資料可能連資料庫規劃都沒做好 聽起來像爛坑
04/21 17:37, 6F

04/21 21:12, , 7F
髒的主因是客戶資料(公司戶)有的業務敲全名有的敲縮寫
04/21 21:12, 7F

04/21 21:14, , 8F
就會造成看似不同其實意義相同的資料重複。聯絡人的資料則
04/21 21:14, 8F

04/21 21:16, , 9F
是A筆缺電話、B筆缺mail,兩筆併起來就是完整的。
04/21 21:16, 9F

04/21 21:17, , 10F
外部系統整合靠API,但系統設計不同所以還是可能清過又亂
04/21 21:17, 10F

04/21 21:19, , 11F
還有user討厭系統卡一堆又要求excel匯入功能,也是髒骯來源
04/21 21:19, 11F

04/21 23:36, , 12F
簽到最上層再來講 不然什麼都不要動
04/21 23:36, 12F

04/22 01:39, , 13F
要杜絕的話就用經濟部給的統一編號當PK
04/22 01:39, 13F
文章代碼(AID): #1HSqHTsk (Soft_Job)
文章代碼(AID): #1HSqHTsk (Soft_Job)