瀏覽單個文章
anderson1127
Elite Member
 

加入日期: Jan 2002
文章: 4,032
引用:
作者micall.lee
但依照經驗,該做的正規化還是要做,使用者很龜毛


我還在想要怎麼做? 我一直認為很難 ....
因為我的資料都是IP address , 目前還有Protocol (TCP/UDP/ICMP) 及相對應的Port number
這要怎麼做正規化 ?? 完全沒有rule可走....

目前我只能放任資料長下去 , 反正一天一個Table , 把DB當做文字檔使用!!

之前有測過,如果我寫個程式去分析文字檔,並將需要的data取出後另外存成一個標準格式的文字檔
光是分些這些標準文字檔,足足跑了一整天,分析工作才完成一半

後來死心,中斷執行程式,將資料全部塞到MySQL , 原本以為DB一定也要做Full Table SCAN
速度肯定快不到那去 , 結果我錯了 ,我需要的結果全部都在10-20秒算完 , 執行單一SQL command
都會在10-20秒內完成 , 3000萬筆的資料似乎對MySQL影響不是很大的樣子...
__________________
您想買新硬碟嗎? 購買前請務必參考這篇文章,是我的實際經驗

還想讓統一賺你的錢嗎?統一集團成員(能見度高的):
星巴克、家樂福、7-11、無印良品、黑貓宅急便、聖娜多堡、阪急百貨、
康是美、博客來、夢時代、Mister Donut 、Cold Stone 、龜甲萬、
維力33%股權、光泉31%股權、Smile速邁樂、紅心辣椒、台北轉運站(統一企業BOT)

統一LP33膠囊有環保署早已列管的一級管制品: DNOP塑化劑
舊 2014-08-12, 03:19 PM #24
回應時引用此文章
anderson1127離線中