StreamReader的缓冲区大小不够,导致上传的文件只处理了一部分

截取原始代码的一部分

    StreamReader sr = new System.IO.StreamReader(stream, encoding);
                    //sr.DiscardBufferedData();

                    int TotalCount = 0;

                    using (sr)
                    {

                        int line = 0;
                        while (sr.Peek() > 0)
                        {
                            ++line;
                            
                                string temp = sr.ReadLine();


stream是上传的文件流

文件是csv格式,我是分批处理了。文件总共2万行,每次处理1千行。文件大小716KB。

在vs中调试的时候正常,但是发布到IIS后,每次处理了2千行后崩溃。后来每次处理200行,500行,1500行都是在2000行附近崩溃。

初步判断堆栈溢出类似问题。

后来查了系统日志,报告ReadLine方法内部“尝试读取的文件已经关闭”。

后来改成:

 StreamReader sr = new System.IO.StreamReader(stream, encoding,true,256*1024);

发现大概到7千行时停止。那么问题就出在这里。

现在这样写:

 StreamReader sr = new System.IO.StreamReader(stream, encoding,true,Convert.ToInt32( stream.Length));

可以把文件读完。

弊端就是文件长度不能超过Int32.MaxValue个字节。

 

另外发现一个以前困扰我的问题:

背景线程与普通线程的区别:就是背景线程发生异常不影响主线程。实际测试发现。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值