您的位置:首页 > 数据库

大容量txt数据导入SQL Server助攻记

2015-11-25 01:41 253 查看
小伙伴们有个数据竞赛,提供的数据是944MB大小的TXT数据文档,导入SQL遇到一些麻烦。于是帮着解决,顺便也熟练了SQL Server的一些操作-----

打开如此大的txt需要的时间很长,而且不全。不过数据的行数还是可以计算出来的,当看到每行,计算一下每行占的字节数。用总大小除以每行字节数,就是行数。不考虑其他的占内存情况下,粗略估计出他们的数据是1千万行左右的样子。

首先,新建一个容量大点的数据表, 导入数据, 数据源(平面文件源)



代码页那里选UTF-8,可以预览,看是否能正常显示出中文。

左侧高级可以编辑列的属性,Name和DateType还有列宽,含中文的选择unicode,仅数字和字母的直接选字符串。





注:主要碰到的问题是数据格式的问题;列宽尽量够就行,太大占空间。

导入之时遇到的问题,一般都能在互联网上找到答案,学会利用。
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: