大容量txt数据导入SQL Server助攻记

小伙伴们有个数据竞赛,提供的数据是944MB大小的TXT数据文档,导入SQL遇到一些麻烦。于是帮着解决,顺便也熟练了SQL Server的一些操作-----

打开如此大的txt需要的时间很长,而且不全。不过数据的行数还是可以计算出来的,当看到每行,计算一下每行占的字节数。用总大小除以每行字节数,就是行数。不考虑其他的占内存情况下,粗略估计出他们的数据是1千万行左右的样子。

首先,新建一个容量大点的数据表, 导入数据,  数据源(平面文件源)


代码页那里选UTF-8,可以预览,看是否能正常显示出中文。

左侧高级可以编辑列的属性,Name和DateType还有列宽,含中文的选择unicode,仅数字和字母的直接选字符串。




注:主要碰到的问题是数据格式的问题;列宽尽量够就行,太大占空间。

导入之时遇到的问题,一般都能在互联网上找到答案,学会利用。


转载于:https://www.cnblogs.com/peterYong/p/6556584.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值