最近做的一个接口,需要从一个FTP目录下载大量图片数据,某某原因就不说了,反正就是根目录下直接来106万张图片,大概每张250k左右,windows资源管理器访问FTP时都打不开。
实现方式如下:
m_ftp_connect->GetCurrentDirectory(cur_path);
m_log->WriteLog(kLogInfo,"开始遍历源FTP目录:%s", cur_path.GetBuffer());
DWORD beginTm = ::GetTickCount();
CFtpFileFind finder(m_ftp_connect);
BOOL bWorking=finder.FindFile("*.*");
while (bWorking)
{
bWorking = finder.FindNextFile();
DWORD endTm = ::GetTickCount() - beginTm;
if (finder.IsDots() )
continue;
//........
}
定位后发现卡在FindFile()这个位置不动。
自己在本地模拟环境时尝试了在根目录下放了约12W图片,27G,得到的endTm值大概在17000~24000之间。这意味着在现场环境下这种遍历方式会卡在这里更长时间。
大家有没有啥好的解决方案或者对这种状况的比较好的解释?