ftp协议采集对方服务器的文件（C语言实现）

已于 2022-05-31 22:47:30 修改
阅读量678 收藏 1
点赞数
分类专栏： linux C/C++ 文章标签： linux c++ c语言
于 2021-07-26 12:19:10 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/woaiminghui/article/details/119106906
版权

本程序照搬的话肯定运行不起来的，因为程序中需要一些库文件本文章没有提供
1.使用封装过后的libftp库来采集服务器的文件

#include "_freecplus.h"
#include "_ftp.h"

struct st_arg
{
     char ip[31];            // IP地址和端口
     int mode;               // ftp模式
     char username[101];     // ftp用户名
     char password[101];     // ftp密码
     char localpath[301];    // 采集过来的文件存放路径
     char remotepath[301];   // 服务器存放文件的路径
     char remotepathbak[301]; // 服务器存放备份文件的路径
     int timeval;              // 运行时间间隔
     int ptype;                // 采集模式 1-增量采集 2-删除  3-备份
     char matchname[301];      // 匹配的文件名
     char listfilename[301];       // 使用nlist命令后存储文件清单的文件
     char okfilename[301];       //  存储采集成功的文件，使用xml格式存储
}starg;

struct file_info
{ 
     char filename[301]; 
     char mtime[301]; 	
};

void EXIT(int sig); 
void _help(char *argv[]);
bool _xmltobuffer(char *xmlbuffer); 
bool LoadList();     // 将文件清单的内容加到容器
bool _ftpgetwpfiles();   // 业务处理主函数
bool AppendToOKFileName(struct file_info *stfileinfo);  // 如果ptype==1，把采集成功的文件记录追加到okfilename文件中
bool LoadOKFileName();// 把okfilename文件内容加载到vokfilename容器中
bool CompVector();        // 容器之间进行对比
bool WriteToOKFileName();    // 采集成功的文件写入vokfilename容器，覆盖旧的vokfilename

Cftp ftp;
CLogFile logfile; 
vector<struct file_info> vlistfile,vlistfile1; 
vector<struct file_info> vokfilename,vokfilename1; 


int main(int argc,char *argv[])
{ 
    if(argc != 3)
    {
        _help(argv);  return -1;
    } 
    CloseIOAndSignal();  signal(SIGINT,EXIT);  signal(SIGTERM,EXIT); 
    if(logfile.Open(argv[1],"a+") == false)
    { 
       printf("logfile.Open(%s) is failed\n");
       return -1; 	
    }
    logfile.Write("open logfile (%s) is ok\n",argv[1]);  
    if(_xmltobuffer(argv[2]) == false)
    {
    		logfile.Write("_xmltobuffer is failed\n"); 
    		return -1;
    }
    logfile.Write("_xmltobuffer() is ok\n"); 
    while(true)
    {
    	  if(ftp.login(starg.ip,starg.username,starg.password,starg.mode) == false)
    	  	{
    	  		  logfile.Write("ftp.login(%s,%s,%s,%d) is failed\n",starg.ip,starg.username,starg.password,starg.mode); 
    	  		  return -1; 
    	  	}  
    	  	logfile.Write("ftp.login() is ok\n"); 
    	  if(_ftpgetwpfiles() == false)
    	  	{
    	  		 logfile.Write("_ftpgetwpfiles() is fialed\n"); 
    	  		 return -1;
    	  	} 
    	  ftp.logout(); 
    	  sleep(starg.timeval);   
    }	
    return 0; 
}

void EXIT(int sig)
{
    logfile.Write("程序退出,sig=%d\n",sig); 
    exit(0);
}

void _help(char *argv[])
{ 
     printf("\n"); 
     printf("Using:/home/cerzong/htidc/c/ftpgetwpfiles logfilename xmlbuffer\n"); 
     printf("\n"); 
     printf("Example: /home/cerzong/htidc/c/ftpgetwpfiles  /home/cerzong/htidc/log/ftpgetwpfiles.log \"<ip>127.0.0.1:21</ip><mode>1</mode><username>xxxxxx</username><password>xxxxx</password><localpath>/home/cerzong/htidc/data/wpfiles</localpath><remotepath>/home/cerzong/wpfile</remotepath><remotepathbak>/home/cerzong/wpfilebak</remotepathbak><timeval>60</timeval><ptype>1</ptype><matchname>*.DTB</matchname><listfilename>/home/cerzong/htidc/list/listfile.list</listfilename><okfilename>/home/cerzong/htidc/list/okfilename.xml</okfilename>\"\n");
     printf("\n"); 
     printf("本程序采集分区预警信号文件\n"); 
     printf("<ip> ftp服务器的IP地址和端口\n"); 
     printf("<mode> ftp模式\n"); 
     printf("<username> ftp用户名\n"); 
     printf("<password> ftp密码\n"); 
     printf("<remotepath>  服务器文件存放的目录\n"); 
     printf("<remotepathbak> 服务器文件备份的目录，当ptype==3时有效\n"); 
     printf("<timeval> 程序运行时间间隔\n"); 
     printf("<ptype> 当ptype==1时，增量采集 ptype==2 删除服务器的文件 ptype==3 备份服务器文件\n"); 
     printf("<matchname> 需采集文件的匹配名\n"); 
     printf("<lsitfilename> 文件清单 路径全称\n"); 
     printf("<okfilename> 采集成功的文件清单 路径全称\n"); 
     printf("\n");   
}

bool _xmltobuffer(char *xmlbuffer)
{
	   memset(&starg,0,sizeof(struct st_arg)); 
	   GetXMLBuffer(xmlbuffer,"ip",starg.ip); 
	   if(strlen(starg.ip) == 0)  
	   {  logfile.Write("ip is null\n");   return false; } 
	   
	   GetXMLBuffer(xmlbuffer,"mode",&starg.mode); 
	   if(starg.mode != 1)
	   	{  logfile.Write("mode is error,starg.mode=%d\n",starg.mode);  return false; } 
	   	
	   GetXMLBuffer(xmlbuffer,"username",starg.username); 
	   if(strlen(starg.username)==0)
	   	{   logfile.Write("username is null\n");  return false;  } 
	   	
	   GetXMLBuffer(xmlbuffer,"password",starg.password); 
	   if(strlen(starg.password)==0)
	   	{   logfile.Write("password is null\n");  return false;  } 
	   	
	   GetXMLBuffer(xmlbuffer,"remotepath",starg.remotepath); 
	   if(strlen(starg.remotepath)==0)
	   	{   logfile.Write("remotepath is null\n");  return false;  } 
	   
	   GetXMLBuffer(xmlbuffer,"remotepathbak",starg.remotepathbak); 
	   if(strlen(starg.remotepathbak)==0)
	   	{   logfile.Write("remotepathbak is null\n");  return false;  } 
	   	
	   GetXMLBuffer(xmlbuffer,"timeval",&starg.timeval); 
	   if(starg.timeval==0)
	   	{   logfile.Write("timeval is 0\n");  return false;  } 
	   	
	   GetXMLBuffer(xmlbuffer,"ptype",&starg.ptype); 
	   if(starg.ptype==0)
	   	{   logfile.Write("ptype is 0\n");  return false;  } 
	   	
	   	GetXMLBuffer(xmlbuffer,"matchname",starg.matchname); 
	   if(strlen(starg.matchname)==0)
	   	{   logfile.Write("matchname is null\n");  return false;  } 
	   	
	   		GetXMLBuffer(xmlbuffer,"listfilename",starg.listfilename); 
	   if(strlen(starg.listfilename)==0)
	   	{   logfile.Write("listfilename is null\n");  return false;  } 
	   	
	   	GetXMLBuffer(xmlbuffer,"okfilename",starg.okfilename); 
	   if(strlen(starg.okfilename)==0)
	   	{   logfile.Write("okfilename is null\n");  return false;  } 
	   	
	   	GetXMLBuffer(xmlbuffer,"localpath",starg.localpath); 
	   	if(strlen(starg.localpath)==0)
	   		{
	   			 logfile.Write("localpath is null\n");   return false; 
	   		}
	   	
	   	return true;
}

bool LoadList()
{ 
     	vlistfile.clear(); 
     	CFile File; 
      if(File.Open(starg.listfilename,"r") == false) 
      	{
      		logfile.Write("File.Open(%s) is failed\n");  return false; 
      	}
      struct file_info stfileinfo; 
      while(true)
      {
      	 memset(&stfileinfo,0,sizeof(struct file_info));
      	 	if(File.Fgets(stfileinfo.filename,300,true) == false)  break; 
      	 	if(starg.ptype==1)
      	 		{
      	 			   if(ftp.mtime(stfileinfo.filename) == false)  
      	 			   	{
      	 			   		  logfile.Write("ftp.mtime() is fialed\n");  
      	 			   	}  
      	 			   strcpy(stfileinfo.mtime,ftp.m_mtime); 
      	 		}
      	 	vlistfile.push_back(stfileinfo); 
      }
     
      return true; 
}

bool _ftpgetwpfiles()
{
	   if(ftp.chdir(starg.remotepath) == false) 
	   	{
	   		 logfile.Write("ftp.chdir(%s) is fialed\n",starg.remotepath); 
	   		 return false; 
	   	} 
	   	
	   if(ftp.nlist(".",starg.listfilename) == false)
	   	{
	   		 logfile.Write("ftp.nlist() is failed, starg.remotepath=%s,starg.listfilename=%s\n",starg.remotepath,starg.listfilename); 
	   		 return false; 
	   	} 
	   	
	   if(LoadList() == false)
	   	{
	   		 logfile.Write("LoadList() is fialed\n");  return false; 
	   	}
	   	if(starg.ptype ==1)
	   	{
	   	   	
	   	   		LoadOKFileName();
               CompVector();
               WriteToOKFileName();
            // 把vlistfile1容器中的内容复制到vlistfile容器中
               vlistfile.clear(); vlistfile.swap(vlistfile1);
	   	}
	    for(int ii=0;ii<vlistfile.size();ii++)
	    {
	    	   char strlocalpath[301]; 
	    	   char strremotepath[301];
	    	  
	    	   sprintf(strlocalpath,"%s/%s",starg.localpath,vlistfile[ii].filename); 
	    	   sprintf(strremotepath,"%s/%s",starg.remotepath,vlistfile[ii].filename);
	    	   
	    	   logfile.WriteEx("get %s...",strremotepath);
	    	    
	    	   if (ftp.get(strremotepath,strlocalpath,true)==false) 
	    	   	{
	    	   		  logfile.WriteEx("failed\n");
	    	   		  break;
	    	   	} 
	    	   	logfile.WriteEx("ok\n");
	    	    // 删除
	    	   if(starg.ptype==2)
	    	   	{
	    	   		  ftp.ftpdelete(strremotepath); 
	    	   	}
	    	   	// 备份 
	    	   if(starg.ptype==3)
	    	    {
	    	   	    char strremotepathbak[301]; 
	    	   	    sprintf(strremotepathbak,"%s/%s",starg.remotepathbak,vlistfile[ii].filename); 
	    	   	    ftp.ftprename(strremotepath,strremotepathbak);
	    	    }
	    	   if(starg.ptype==1)   
	    	   // 将采集成功的文件名字和时间添加okfilename文件里 <filename>ssss.DTB</filename><mtime>22</mtime> 	
	    	   AppendToOKFileName(&vlistfile[ii]);
	    	   
	    }
	   	
	   	return true;
}

bool AppendToOKFileName(struct file_info *stfileinfo)
{
	   CFile File; 
	   if(File.Open(starg.okfilename,"a",false) == false)  
	   	{
	   		   logfile.Write("File.Open(%s) failed\n",starg.okfilename); 
	   		   return false; 
	   	}  
	   	File.Fprintf("<filename>%s</filename><mtime>%s</mtime>\n",stfileinfo->filename,stfileinfo->mtime); 
	   	return true; 
}

// 把okfilename中的内容加载到容器中
bool LoadOKFileName()
{ 
	    vokfilename.clear(); 
	    CFile File; 
	    // 第一次打开的时候没有文件内容
	    if(File.Open(starg.okfilename,"r",false) == false)
	    {
	    		  logfile.Write("File.Open(%s) is failed\n",starg.okfilename); 
	    		  return true; 
	    } 
	    char strbuffer[301]; 
	    struct file_info stfileinfo; 
	    while(true)
	    {
	    	   memset(strbuffer,0,sizeof(strbuffer));
	    	   memset(&stfileinfo,0,sizeof(struct file_info));  
	    	   if(File.Fgets(strbuffer,300,true) == false)  break; 
	    	   GetXMLBuffer(strbuffer,"filename",stfileinfo.filename);
	    	   GetXMLBuffer(strbuffer,"mtime",stfileinfo.mtime); 
	    	   
	    	   vokfilename.push_back(stfileinfo); 
	    }	 
	    return true;
}

// 把vlistfile容器中的文件与vokfilename容器中文件对比，得到两个容器
// 一、在vlistfile中存在，并已经采集成功的文件vokfilename1
// 二、在vlistfile中存在，新文件或需要重新采集的文件vlistfile1
bool CompVector()
{    
	    vokfilename1.clear();  vlistfile1.clear();

      for (int ii=0;ii<vlistfile.size();ii++)
      {
         int jj=0;
         for (jj=0;jj<vokfilename.size();jj++)
      {
         if ( (strcmp(vlistfile[ii].filename,vokfilename[jj].filename)==0) &&
           (strcmp(vlistfile[ii].mtime,vokfilename[jj].mtime)==0) )
        {
           vokfilename1.push_back(vlistfile[ii]); break;
        }
    }

      if (jj==vokfilename.size())
      {
           vlistfile1.push_back(vlistfile[ii]);
      }
}
	   return true;
}

//把vokfilename1容器中的内容先写入okfilename文件中，覆盖之前的旧okfilename文件
bool WriteToOKFileName()
{
	   CFile File; 
	   if(File.Open(starg.okfilename,"w",false) == false)
	   	{
	   		  logfile.Write("File.Open(%s) is failed\n",starg.okfilename);  return false; 
	   	} 
	   for(int ii=0;ii<vokfilename1.size();ii++)
	    {
	   	    File.Fprintf("<filename>%s</filename><mtime>%s</mtime>\n",vokfilename1[ii].filename,vokfilename1[ii].mtime); 
	    } 
	   return true;
}

2.编写Makefile

CC=g++
FLAG=-g
all:libftp.a ftpgetfiles
libftp.a: ftplib.c
                gcc -c -o libftp.a ftplib.c
ftpgetfiles:ftpgetfiles.cpp _ftp.h _ftp.cpp libftp.a
                $(CC) $(FLAG) -o ftpgetfiles ftpgetfiles.cpp _freecplus.cpp _ftp.cpp libftp.a -lm -lc
                cp ftpgetfiles /oracle/htidc/bin/
clean:
                rm -rf libftp.a ftpgetfiles

3，编写完Makefile后执行make命令编译Makefile文件，之后执行ftpgetfiles程序来采集文件
在这里插入图片描述

程序执行后可以通过日志看到文件采集成功
在这里插入图片描述

七个橘子多少钱
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
使用C语言socket实现windows pc与ftp服务器通信---socket实现ftp客户端
cjc211322的专栏
02-02 6708
使用C语言socket实现windows pc与ftp服务器通信---socket实现ftp客户端
c语言实现ftp文件传输
11-18
C语言实现的ftp 文件传输协议，包括文件上传 ，文件下载，查看目录 等功能，
ftp文件采集
qq_41940067的博客
06-09 346
本地文件根据文件名过滤
配置文件服务器数据采集
weixin_33795833的博客
05-15 191
服务器数据采集第一版本: import requests if mode == 'agent': 　　import subprocess 　　res = subprocess.getoutput('ifconfig') 　　ip_info = res[2:5] 　　requests.post('http://127.0.0.1:8001/asset',data = ip_info) ...
c语言实现ftp客户端，下载ftp的文件内容信息
jenie的专栏
06-18 2965
由于工作需要，需要做一个从ftp服务器下载相关文件内容，保存本地 ftp.h #ifndef TIANJING_FTP_H #define TIANJING_FTP_H #include <stdio.h> //链接服务器 int ftp_connect( char *host, int port, char *user, char *pwd ); //断开服务器 int ftp_quit( int c_sock); //设置表示类型 int ftp_type( int c_s.
c 怎么跨服务器取文件,c语言远程文件获取服务器
weixin_39949413的博客
08-09 546
c语言远程文件获取服务器 内容精选换一换用户可根据产品型号获取所需软件包以及数字签名文件。{version}表示软件版本号，{arch}表示CPU架构，{os}表示操作系统版本。{version}表示软件版本号，{arch}表示CPU架构，{os}表示操作系统版本。华为云帮助中心，为用户提供产品简介、价格说明、购买指南、用户指南、API参考、最佳实践、常见问题、视频帮助等技术文档，帮助您快速上手使...
【C/C++】项目_1_生成测试数据txt/xml文件（crtsurfdata.cpp），ftp协议及ftp采集模块（_ftp.h，_ftp.cpp，ftpgetfiles.cpp）
01-09
段错误，crontab2.ftp安装：firewall3.ftp命令：get，put3.1 登录ftp服务器（必须先开启）3.2 查看/下载/上传文件3.3 windows登录ftp4.ftp应用：OpenForRename，Fgets4.1 shell语言及数据完整性4.2 C语言实现ftp下载...
c语言轻量化ftp文件传输库
最新发布
03-31
该ftp文件传输库基于TCP/IP协议实现，使用socket编程进行网络通信。具体实现细节如下： - 建立连接 客户端和服务器端通过socket连接进行通信。客户端使用ftp协议的默认端口21连接服务器端，建立控制连接。通过控制...
基于curl数据采集之单页面采集函数get_html的使用
10-27
首先，curl是一个命令行工具，用于传输数据，支持多种协议，如HTTP、HTTPS、FTP等。在PHP开发环境中，PHP内置了cURL扩展，可以让开发者编写代码来发送请求和接收响应。当进行单页面数据采集时，通常会用到以下步骤：...
单片机C语言程序设计中的网络通信应用：掌握网络通信协议与应用，实现单片机与外部世界的互联
[单片机C语言程序设计中的网络通信应用：掌握网络通信协议与应用，实现单片机与外部世界的互联](https://img-blog.csdnimg.cn/9d17fa8ec1474ce9a87075b9f7844e5b.jpg?x-oss-process=image/watermark,type_ZHJvaWRzYW...
一个开源的Ftp库，C语言实现，有例程
07-16
LibNcFTP是一个开源的FTP源码库，该库用C语言实现的，可以灵活应用在自己的应用上，非常简单好用。附带一个测试例程
二、ftp采集数据模块
qq_43403759的博客
04-27 1466
  在前面的步骤中，已经模拟生成了气象站点的气象观测数据，这个就相当于模拟了服务端的数据源（产生气象观测数据）。   接下来要完成的就是，从服务端那里将观测数据采集回来，用的方法就是利用ftp从服务端下载数据。现在就是要设计一个ftp采集模块，从服务端采集数据。 一、ftp 下载服务器数据的流程   在设计 ftp 采集模块之前，先来回顾一下利用ftp从服务端下载数据的大致过程。 （1）登录 ftp 服务器，用户名和密码 （2）选择主动模式或者被动模式，一般是被动模式 （3）找到要下载数据的路径，也就是要切
c语言实现tcp 服务器设计_FTP服务器的实现（C语言）
weixin_39819138的博客
11-29 637
我们在之前的文章中，曾经对FTP文件传输协议做过详细的介绍。本章，我们对如何用C语言实现FTP服务器做一个简单的介绍。概述FTP文件传输协议，是因特网上使用得最广泛的文件传输协议。FTP提供交互式的访问，允许客户指明文件的格式与类型，并允许文件具有存储权限。FTP屏蔽了不同操作系统之前的细节，因此适合在异构网络中任意计算机之间传送文件。FTP的基本工作原理FTP使用C/S方式，一个FTP服务器可以...
C语言实现FTP文件传输
热门推荐
q3415597181的博客
04-10 1万+
一、要求 FTP实则为两个程序的互相交流，把信息指令相互发送并处理。 1.客户端请求下载文件 —把文件名发送给服务器。 2.服务器接收客户端发送的文件名 —根据文件名找到文件，把文件大小发送给客户端。 3.客户端接收到文件大小—准备开始接受，开辟内存，准备完成要告诉服务器可以发送了。 4.服务器接受的开始发送的指令开始发送。 5.开始接收数据，存起来，接受完成，告诉服务器接收完成。 6.关闭连接。 二、FTPclient 1. ftpclient.h #pragma once #include &
FTP文件读取
yinmai的专栏
09-12 4888
目前项目内部需求是将FTP文件服务器上的各类office和pdf文件读取出来返回给前端进行预览展示 1.配置ftp访问信息，并读取配置 /** * ftp配置信息 */ @Component @ConfigurationProperties(prefix = "ftp.server") @Data public class FtpPropertiesConfig { /** * IP地址 */ private String host; /**
c#如何通过ftp上传文件_ftp定时上传文件，ftp定时上传文件怎么上传，教程详解...
weixin_39983993的博客
11-29 230
不知道大家用过ftp定时任务上传文件的ftp上传工具吗？小编到现在为止也只用过一款ftp上传工具是具有定时功能的。定时这个功能是真的很棒了，节省了很多时间而且还很方便快捷。下面小编就来介绍一下ftp定时任务上传文件的ftp上传工具吧，加上教程哦。工具名称：IIS7服务器管理工具它可以批量管理ftp站点，不过这都是基本功能，它最重要的是能定时上传下载、定时备份还能够自动更新。这些功能就是我推荐最主要...
通过ftp采集文件的性能总结
weibin_6388的专栏
02-01 3885
通过ftp采集文件的性能总结 1，简介 在数据采集的过程中，使用excel或csv的格式将数据上传到服务器上，再通过Java的文件操作和流操作，获取上传文件的信息，最后通过CSVReader读取上传的文件信息，最后通过jdbc接口将文件信息存储到数据库中。 2，性能测试          性能测试是在优化jdbc接口之后，使用大批量数据测试扫描存储文件的性能。测试时单次存储5条数据。使用的
ftp客户端库(C编写，平台Linux,Win)
antk119的专栏
11-08 4176
ftp库,用c编写,作者是Thomas Pfau附有详细的API（html）和说明（README.ftplib_v3.1），在windows和linux环境中都可以使用，还附了ftp协议的RFC 959文档下载页面：http://nbpfaus.net/~pfau/ftplib/ ftplibftplib is a set of routines that implemen
ftplib实现FTP上传与下载的功能
chinaherolts2008的博客
02-26 586
FTP server默认的端口号为21，20端口用于数据传输。 本文参考地址：https://docs.python.org/3.6/library/ftplib.html ftplib里包含FTP和FTP_TLS两个class，后者是封装了TLS安全传输协议的FTP，本文不多描述，查看官网即可，很简单。 ftplib.FTP class就是一个模拟FTP协议客户端的class，可以使用此class与FTP server进行各种交互，如数据上传和下载等。 FTP的数据传输有两种模式ASCII和b
C语言实现FTP文件传输协议详解
本教程着重讲解如何使用C语言来实现FTP的客户端和服务器端程序，旨在帮助学习者掌握C语言设计FTP协议软件的技术，并对Winsock API有深入理解。 FTP协议允许用户在Internet上进行文件的双向传输，它基于客户机/...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值