论使用程序处理大规模文件的注意事项
2008-07-25 15:18
411 查看
几百万的文件处理,写出程序让它自己跑吧,但如何能确保它一夜都在工作?或者说没有其他干扰的跑完,实现我们的目标?
这就需要在程序中做好记录,记录的详细程度需要研究,因为太简单看不出来什么东西,太详细动辄几百M的文本,也会看花眼,即使打开都要十几秒,更别说搜索了。
“度”,凡事都得讲求一个“度”字。
好,下面详细讨论一下。
1、首先程序本身要最优化。
2、做好出错部分的记录。
这就需要在程序中做好记录,记录的详细程度需要研究,因为太简单看不出来什么东西,太详细动辄几百M的文本,也会看花眼,即使打开都要十几秒,更别说搜索了。
“度”,凡事都得讲求一个“度”字。
好,下面详细讨论一下。
1、首先程序本身要最优化。
2、做好出错部分的记录。
相关文章推荐
- 包含别人的dll,然后我们用类库再次封装成dll的时候的注意事项;源文件与模块生成时的文件不同;创建调试信息文件 ··PDB时发生意外的错误,进程无法访问文件,因为另一个程序正在使用此文件
- VS2010下使用dmp文件和pdb文件定位程序异常代码行号的注意事项
- 使用静态库时需要注意的事项(gcc下程序调用静态库编译命令:主文件必须在静态库前面!)
- node.js使用fs的文件处理注意事项
- 一般处理程序中使用注意事项
- 使用静态库时需要注意的事项(gcc下程序调用静态库编译命令:主文件必须在静态库前面!)
- 使用webpack打包.css文件时需要注意的事项
- 制作Label标签文件时,使用convert_imageset.exe的注意事项
- 在ashx一般处理程序文件中不能使用session和request的问题解决办法
- easy UI使用include<>包含页面时以及加载js文件所注意的事项。
- 使用SetUnhandledExceptionFilter转储程序崩溃时内存DMP注意事项
- Python下使用help(dict),显示'more'不是内部或外部命令,也不是可运行的程序或批处理文件,该如何处理?
- asp中使用MSXML2.DOMDocument处理XML数据时的注意事项
- 如何使用阿里云OSS储存文件和注意事项
- 安卓开发使用SVN管理注意事项SO文件不提交问题
- android开发关于隐藏文件的使用注意事项
- WebWork之--使用fileUpload interceptor实现文件上传[基本配置+注意事项]
- stm32F205程序移植到stm32F405片子,使用FPU时注意事项
- Java高并发程序-Chapter5 锁的优化及注意事项(第三十三讲)无锁 - 无锁类的使用