引用:
作者micall.lee
但依照經驗,該做的正規化還是要做,使用者很龜毛
|
我還在想要怎麼做? 我一直認為很難 ....
因為我的資料都是IP address , 目前還有Protocol (TCP/UDP/ICMP) 及相對應的Port number
這要怎麼做正規化 ?? 完全沒有rule可走....
目前我只能放任資料長下去 , 反正一天一個Table , 把DB當做文字檔使用!!
之前有測過,如果我寫個程式去分析文字檔,並將需要的data取出後另外存成一個標準格式的文字檔
光是分些這些標準文字檔,足足跑了一整天,分析工作才完成一半
後來死心,中斷執行程式,將資料全部塞到MySQL , 原本以為DB一定也要做Full Table SCAN
速度肯定快不到那去 , 結果我錯了 ,我需要的結果全部都在10-20秒算完 , 執行單一SQL command
都會在10-20秒內完成 , 3000萬筆的資料似乎對MySQL影響不是很大的樣子...
