场景:通过程序 把一个文件中的所有内容读到内存中,再去判断行数。通过这种方法,很可能超过半小时(1个15MB左右的文本文件) 而得不到结果。

而通过使用cmd命令,却能在非常短的时间内得到行数。


测试结果:(测试环境:win 7, 64bit,  8G内存)

通过cmd命令读 一个15MB左右的文本文件,约1秒内可得到行数;

读一个2.6GB左右的文本文件,约50秒内可得到行数。


截图:

通过cmd命令读取大文本文件的行数_hive

通过cmd命令读取大文本文件的行数_文本文件_02

通过cmd命令读取大文本文件的行数_hive_03


样例命令:

find /V "" /C test.txt
find /V "" /C C:\tmp\OPTUMHCC_ARCHIVE_UNZIP_testFile\testOut\534.txt
find /V "" /C C:\tmp\OPTUMHCC_ARCHIVE_UNZIP_testFile\testOut\CMS_RAPS_RETURN20130802.txt