FTP该如何实现断点续传？

客户端的实现步骤如下：

一、下载：

1、向服务器发送“REST + 本地文件长度”命令，告诉服务器，客户端要断点下载了。这时服务器还不知道客户端要下载哪个文件；

要实现FTP的断点续传，FTP服务器必须支持REST指令，这条指令在FTP协议文本RFC959中就已经定义了，不过它不是FTP服务器必须支持的指令。一般,你可以在下载前使用REST 100命令进行实验，如果服务器正常执行了这条命令，说明该服务器支持FTP断点续传。REST后面跟的数表示下载文件的起始位置，而REST 0表示从文件最开始处下载。REST命令本身并不执行下载功能，你仍需要使用RETR命令执行下载工作。

2、向服务器发送“RETR + 文件名”命令，通知服务器要下载的文件名，这时服务器开始定位文件指针读文件并发送数据。

3、客户端定位本地文件指针（文件末尾）；

4、两端的准备工作都做完了以后，客户端创建socket，以被动或非被动方式建立数据通道，循环调用recv接收数据并追加入本地文件；

二、上传：

1、获取服务器上和本地要上传文件的同名文件大小；

2、向服务器发送“APPE ＋ 文件名”，通知服务器，接下来从数据通道发送给你的数据要附加到这个文件末尾。

3、定位本地文件指针（和FTP上文件大小相同的位置）

4、从文件指针处读数据并发送。

代码里将断点上传和断点下载放到同一个函数（MoveFile）里，通过get参数说明是上传还是下载。

一:开发背景

由于需要对多个服务器发布大的数据包，所以自己在LINUX用C语言，开发了一个传送器工具。因为上传时需要支持断点续传，所以自己参考ftp-rfc959和一些文章开发了这个支持断点续传的上传工具。整个工具分两部分开发的：一是支持断点续传的Ftp工具，包含下载和上传功能。二是同时对多个服务器发布不同数据包的传送器工具。本文只是对断点续传的商船和下载作探讨。

二：实现

其实Ftp上传下载的实现很简单,首先Ftp服务器端要支持文件的定位,

然后就是通过建立的Socket用Ftp服务器命令和服务器交互.

有些也可以通过Socket做自己的客户端和服务器端，但是有些服务器是自己能管理控制的，而且原来自己也写过一些这样C/S模式的工具，简单消息的传送接收还不错。

但用来传输文件效率很低，比文件传送协议FTP（File Transfer Protocol）差的太多。 利用Ftp的服务端可以省去服务器端的开发，而且可以向任何开放Ftp服务的服务器上传送文件，可以不考虑对方安装的

是什么的 *** 作系统。

三：FTP

文件传送协议 FTP 只提供文件传送的一些基本的服务，它使用 TCP 可靠的运输服务。FTP 的主要功能是减少或消除在不同 *** 作系统下处理文件的不兼容性。

FTP 使用客户服务器方式。

一个 FTP 服务器进程可同时为多个客户进程提供服务。FTP的服务器进程由两大部分组成：一个主进程，负责接受新的请求；另外有若干个从属进程，负责处理单个请求。

A、通常的方式：

控制连接在整个会话期间一直保持打开，FTP 客户所发出的传送请求通过控制连接发送给控制进程，但控制连接并不用来传送文件，实际用于传输文件的是“数据连接”。

控制进程在接收到 FTP 客户发送来的文件传输请求后就创建一个“数据传送进程”和一个“数据连接”，并将数据连接连接到“数据传送进程”，数据传送进程实际完成文件的传送，在传送完毕后关闭“数据传送连接”并结束运行

当客户进程向服务器进程发出建立连接请求时，要寻找连接服务器进程的熟知端口(21)，同时还要告诉服务器进程自己的另一个端口号码，用于建立数据传送连接。接着，服务器进程用自己传送数据的熟知端口(20)与客户进程所提供的端口号码建立数据传送连接。

B、 被动模式：

FTP客户端发出的连接请求，一般通过服务器的21号端口建立控制连接，专门用来传输一些字符串命令和响应信息。控制命令通道一定是由客户端向服务器的连接（默认的端口是21，也可以指定端口，这要看服务器的设置）。

PASV:通过控制通道通过发送PASV 服务器命令到 FTP服务器。请求建立被动模式数据连接通道。 (客户端的命令 passive)

服务器返回连接的信息（227 Entering Passive Mode (70,0,10,62,120,18) ）地址和端口。端口=最后第二位乘256再加上最后一位（120*256+18）。（注意端口设为0的情况） 如： *f_port = atoi(port_1) * 256 + atoi(port_2)

服务器端和客户端身份转换，原客户端在本地建立监听，监听来自原服务器远端的连接请求建立数据连接通道。

四、 实现方法：

A、下载：

1、向服务器发送“REST + 本地文件长度”，告诉服务器，客户端要断点下载了。这时服务器还不知道客户端要下载的文件名；

2、向服务器发送"RETR + 文件名"，通知服务器要下载的文件名，这时服务器开始定位文件指针读文件并发送数据。

3、客户端定位本地文件指针偏移到文件末尾；

4、两端的准备工作都做完了以后，客户端创建socket，以被动或非被动方式建立数据链接，循环调用recv接收文件数据并追加到本地文件末尾；

B、上传：

1、获取服务器上和本地要上传文件的同名文件大小；

2、向服务器发送“APPE ＋ 文件名”，通知服务器，从数据通道发送给你的数据要附加到这个文件末尾。

3、定位本地文件指针，文件指针偏移到指定位置，这个位置与FTP服务器上文件大小相同的位置。

4、从文件指针处读数据并发送。

C、Ftp服务器命令

我们平时使用的命令，大多是客户端的。服务器端的命令可以参考下面：

命令 描述

ABOR 中断数据连接程序 ACCT <account>系统特权帐号

ALLO <bytes> 为服务器上的文件存储器分配字节 APPE <filename>添加文件到服务器同名文件

CDUP <dir path>改变服务器上的父目录 CWD <dir path>改变服务器上的工作目录

DELE <filename>删除服务器上的指定文件 HELP <command>返回指定命令信息 LIST <name>如果是文件名列出文件信息，如果是目录则列出文件列表 MODE <mode>传输模式（S=流模式，B=块模式，C=压缩模式）

MKD <directory>在服务器上建立指定目录 NLST <directory>列出指定目录内容

NOOP 无动作，除了来自服务器上的承认 PASS <password>系统登录密码

PASV 请求服务器等待数据连接PORT <address>IP 地址和两字节的端口 ID PWD 显示当前工作目录 QUIT 从 FTP 服务器上退出登录

REIN 重新初始化登录状态连接REST <offset>由特定偏移量重启文件传递

RETR <filename>从服务器上找回（复制）文件 RMD <directory>在服务器上删除指定目录

RNFR <old path>对旧路径重命名RNTO <new path>对新路径重命名

SITE <params>由服务器提供的站点特殊参数 SMNT <pathname>挂载指定文件结构

STAT <directory>在当前程序或目录上返回信息 STOR <filename>储存（复制）文件到服务器上

STOU <filename>储存文件到服务器名称上 STRU <type>数据结构（F=文件，R=记录，P=页面）

SYST 返回服务器使用的 *** 作系统TYPE <data type>数据类型（A=ASCII，E=EBCDIC，I=binary）

USER <username>>系统登录的用户名

D、服务器返回的部分数字代码含义

125 Data connection already openTransfer starting.

226 Transfer complete.

227 Entering Passive Mode (127,0,0,1,4,18).

230 User xxxxx logged in.

331 Password required for xxxxx.

425 Can’t open data connection.

226 Closing data connection.

200 return a state of TYPE or MODE commond

220 connection state

五、关于Socket

关于Socket编程有很多参考资料，这里不作详细说明

Socket是应用层与TCP/IP协议族通信的中间软件抽象层，它是一组接口

Socket 是一个基本的通信机制Socket把复杂的TCP/IP协议族隐藏在Socket接口后面，对用户来说，一组简单的接口就是全部，让Socket去组织数据，以符合指定的协议.

Socket也具有一个类似于打开文件的函数调用Socket()，该函数返回一个整型的Socket描述符，随后的连接建立、数据传输等 *** 作都是通过该Socket实现的。

常用的Socket类型有两种：

A、流式Socket（SOCK_STREAM）：流式是一种面向连接的Socket，针对于面向连接的TCP服务应用。

B、数据报式Socket（SOCK_DGRAM）：数据报式Socket是一种无连接的Socket，对应于无连接的UDP服务应用。

Socket的程序是一种C/S结构，分客户端和服务器端。

A、客户端

– 初始化Socket

– 连接服务器(connect)，如果连接成功，这时客户端与服务器端的连接就建立了

– 客户端发送数据请求，服务器端接收请求并处理请求，然后把回应数据发送给客户端

– 客户端读取数据，最后关闭连接，一次交互结束。

B、服务器端

- 初始化Socket

- 端口绑定(bind)

- 监听(listen)端口

- 调用accept阻塞，等待客户端连接

在这里我们使用的就是面向连接的流式Socket，只编写客户端的程序。

六、代码：

下面仅提供一个编译过并在使用中的函数简单的说明其实现原理,

需要有一点C语言和Linux/UNIX的socket编程基础即可理解。

只是建立连接和传输部分的一个函数。当文件传出结束或断开时，

可以调用检查函数看是否成功，字节是否正常等，如果不正常结束，

可以再次循环调用它并定为服务器文件的字节，继续传输。

其他的控制和功能都在其他函数中实现。为移植方便使用标准C语法符合C89标准。

code：

/*****************************************************************

* FileName: uftt_ver5.c *

* Company: algorithmics china lib Co.,Ltd. *

* Author: G.L.Zhang --- zglcl008 *

* Time: [2006-12-20] *

* Description: uninterrupted file transfers tools *

*****************************************************************/

int f_file_trans(const char *ft_addr, int ft_port, const char *ft_usr,const char *ft_pwd, const char *ft_opt, const char *ft_src, char *ft_obj, int ft_flg)

{

int cmd_sock = -1

int dat_sock = -1

int stream_sock= -1

int dat_port = 0

char dat_buffer[1024*5]

struct sockaddr_in f_server

struct sockaddr_in f_datasvr

unsigned char *pasv_ip = NULL

unsigned char *pasv_port = NULL

unsigned int len_addr = 0

long rc_size = 0

/* long svr_file_size = 0*/

long file_size = 0

int rc = 0

if (ft_addr == NULL || ft_usr == NULLft_pwd == NULL ||

ft_opt == NULL || ft_src == NULL || ft_obj == NULL ||

ft_port == 0 || ft_flg <0) {

err_quit("--- file transfers parameter error")

}

/* get ftp commomd socket */

if ((cmd_sock = socket(AF_INET, SOCK_STREAM, 0)) <0) {

perror("cmmond socket")

err_quit("--- command sock error")

}

bzero(&f_server, sizeof(f_server))

f_server.sin_family = AF_INET

f_server.sin_port = htons(ft_port)

f_server.sin_addr.s_addr = inet_addr(ft_addr)

if (connect(cmd_sock, (struct sockaddr *)&f_server, sizeof(f_server)) <0) {

perror("connect")

err_quit("--- command sock error")

}

rc = uftt_cmd(dat_buffer, cmd_sock, NULL)

if (rc == 220)

printf("-1- %d OK\n", rc)

else

printf("-1- %d ERR\n", rc)

rc = uftt_cmd(dat_buffer, cmd_sock,"USER %s",ft_usr)

if (rc == 331)

printf("-2- %d OK\n", rc)

else

printf("-3- %d ERR\n", rc)

rc = uftt_cmd(dat_buffer, cmd_sock,"PASS %s",ft_pwd)

if (rc == 230)

printf("-3- %d OK\n", rc)

else

printf("-3- %d ERR\n", rc)

rc = uftt_cmd(dat_buffer, cmd_sock, "TYPE I")

if (rc == 200)

printf("-41- %d OK\n", rc)

else

printf("-41- %d ERR\n", rc)

rc = uftt_cmd(dat_buffer, cmd_sock, "MODE S")

if (rc == 200)

printf("-42- %d OK\n", rc)

else

printf("-42- %d ERR\n", rc)

memset(dat_buffer, ''\0'', sizeof(dat_buffer))

rc = uftt_cmd(dat_buffer, cmd_sock, "PASV")

if (rc == 227)

printf("-5- %d OK\n", rc)

else

printf("-5- %d ERR\n", rc)

#ifdef ZGL_DEBUG

printf("-5- %d %s\n", rc, dat_buffer)

#endif

/* get passive port */

dat_port = 0

if ((rc = get_svr_port(dat_buffer, (int *)&dat_port)) <0)

err_quit("data stream port error")

#ifdef ZGL_DEBUG

printf("--- pasive port=[%d]\n", dat_port)

#endif

if ((dat_sock = socket(AF_INET, SOCK_STREAM, 0)) <0) {

perror("data socket")

err_quit("--- data sock error")

}

len_addr = sizeof(f_datasvr)

bzero(&f_datasvr, sizeof(f_datasvr))

rc = getsockname(cmd_sock, (struct sockaddr *)&f_datasvr, (unsigned int *)&len_addr)

f_datasvr.sin_port = htons(dat_port)

/* 0=all port or appoint port TEST OK ***

f_datasvr.sin_port = htons(dat_port)

f_datasvr.sin_port = 0

*/

if (bind(dat_sock,(struct sockaddr *)&f_datasvr,len_addr) == -1)

err_sys("--- data sock bind error")

if (listen(dat_sock,1) == -1)

err_sys("--- data sock bind error")

rc = getsockname(dat_sock, (struct sockaddr *)&f_datasvr, (unsigned int *)&len_addr)

pasv_ip = (unsigned char *)&f_datasvr.sin_addr

pasv_port = (unsigned char *)&f_datasvr.sin_port

rc = uftt_cmd(dat_buffer, cmd_sock,"PORT %d,%d,%d,%d,%d,%d",pasv_ip[0],

pasv_ip[1], pasv_ip[2], pasv_ip[3], pasv_port[0], pasv_port[1])

if (rc == 200)

printf("-6- %d OK\n", rc)

else

printf("-6- %d ERR\n", rc)

/* get RETR put STOR append APPE */

if (ft_flg == 0) {

rc = uftt_cmd(dat_buffer, cmd_sock, "STOR %s", ft_obj)

}

else if (ft_flg >0){

rc = uftt_cmd(dat_buffer, cmd_sock, "APPE %s", ft_obj)

}

if (rc == 150)

printf("-7- %d OK\n", rc)

else

printf("-7- %d ERR\n", rc)

stream_sock = accept(dat_sock, (struct sockaddr *)&f_datasvr, (unsigned int *)&len_addr)

if (stream_sock <0)

err_sys("--- stream socket error")

rc_size = f_put_file(stream_sock, ft_src, ft_obj, ft_flg, file_size)

/* do without ***

rc = uftt_cmd(dat_buffer, dat_sock,"QUIT")

printf("-8- %d \n", rc)

*/

close(stream_sock)

close(dat_sock)

rc = uftt_cmd(dat_buffer, cmd_sock,"QUIT")

if (rc == 226)

printf("-9- %d OK\n", rc)

else

printf("-9- %d ERR\n", rc)

close(cmd_sock)

return rc_size

}

在安装好的Linux，当我输入ftp的时候，提示我没有找到ftp的指令，在网上查看，说是要去安装一个vsftpd。先将权限设置为root，或者指令前加sudo。指令如下：

yum install vsftpd

或者

sudo yum install vsftpd

2

然后安装好后，输入/sbin/service vsftpd restart去重启vsftpd.

3

然后安装ftp。

yum install vsftpd

4

然后输入ftp后，尽可以进入ftp的控制界面。

5

现在如果你想登陆一个FTP,就可以通过open指令去进入该FTP。

例如：open 127.0.0.0

如果FTP设置权限，可能在输入后需要输入用户名和密码。

这样就可以直接进入FTP去 *** 作了。

END

*** 作指令

FTP的 *** 作指令其实和Linux很相似，如下：

1、ls

列出远程机的当前目录2、cd 在远程机上改变工作目录3、lcd 在本地机上改变工作目录4、ascii

设置文件传输方式为ASCII模式5、binary 设置文件传输方式为二进制模式6、close 终止当前的ftp会话7、hash

每次传输完数据缓冲区中的数据后就显示一个#号8、get（mget） 从远程机传送指定文件到本地机9、put（mput）

从本地机传送指定文件到远程机10、open 连接远程ftp站点11、exit退出ftp。

例如：下载文件

下载文件之前要先设置好本地的目录，用来存放下载的文件

lcd /home/123/web ##设置本地存放目录 默认为 /home/usr

get 123.txt ##下载123.txt文件到 /home/123/web 中

get -c 123.txt ##断点续传下载

mget *.txt ##批量下载所有txt文件

mget -c *.txt ##断点续传

mget -c ./123/aaa/*.txt ##断点续传、批量下载ftp端aaa目录下的所有txt文件

pget -c -n 10 file.dat

##以最多10个线程以允许断点续传的方式下载file.dat

##可以通过设置 set pget:default-n 5 的值而使用默认值。

mirror aaa/

##将aaa目录整个的下载下来，子目录也会自动复制 本地自动建立目录

例如：上传文件

put 123.txt ##同下载

mput *.txt ##同下载

mirror -R aaa/ ##同下载

例如：查看ftp端文件

ls *.txt ##查找当前目录下的所有txt文件

ls ./123/ ##列出123目录下所有文件

find . -name "*.txt" ##递归查找站点上所有的txt文件

find ./xx -name "*.txt" ##查找xx目录下所有的txt文件

附1: ls第二次读取的是本地缓存,可以用 rels 代替 ls 或者catch off / catch on 来开关catch,catch flush清空本地catch

附2: 浏览本地目录的命令可用!ls, 如 !ls /usr/local/bin/

---