在做data mining,很重要的一部是對(duì)數(shù)據(jù)進(jìn)行清洗,由于數(shù)據(jù)量巨大,我是分段從數(shù)據(jù)庫中取出數(shù)據(jù)存成文本格式,最后再將所有的文本合并成一個(gè)大的文件,
在文件合并的過程中,我用了一個(gè)小工具,
Txtunit.exe,短小精悍,
合并完之后會(huì)有一些空白行的出現(xiàn),我們需要將這些空白行清除掉,做法參見
emeditor刪除空行 - HOHO網(wǎng)頁設(shè)計(jì) - 51CTO技術(shù)博客
主要是使用了一個(gè)匹配的正則 ^[ \t]*\n
更多文章、技術(shù)交流、商務(wù)合作、聯(lián)系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號(hào)聯(lián)系: 360901061
您的支持是博主寫作最大的動(dòng)力,如果您喜歡我的文章,感覺我的文章對(duì)您有幫助,請(qǐng)用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點(diǎn)擊下面給點(diǎn)支持吧,站長非常感激您!手機(jī)微信長按不能支付解決辦法:請(qǐng)將微信支付二維碼保存到相冊(cè),切換到微信,然后點(diǎn)擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對(duì)您有幫助就好】元
