网络基础、ftp任务(进度条、计算文件大小、断点续传、搭建框架示例)

一、网络基础

1、端口,是什么?为什么要有端口?

  端口是为了将同一个电脑上的不同程序进行隔离。

  IP是找电脑;端口是找电脑上的应用程序;

  端口范围:1 – 65535 ;    1 - 1024 不要用  ;  一般程序员用8000、8001……

2、OSI  七层模型(记住哪七层)

  应用层,使用软件;                 打开软件或网站

表示层,看到数据,如图片和视频;   生产原始数据

会话层,保持登录或链接状态;       应用偷偷携带一点其他数据: 令牌 19rRNAwf8g

传输层,TCP/UDP;                [TCP][原始数据|19rRNAwf8g]

网络层,IP;                      【IP】【[TCP][原始数据|19rRNAwf8g]】

数据链路层,MAC;                [MAC][ 【IP】【[TCP][原始数据|19rRNAwf8g]】]

物理层,将数据转换成电信号发送;

3、TCP三次握手,四次挥手

  socket客户端向服务端发起连接请求:三次握手(只能先由客户端向服务端发起请求)

    client.connect((……))

客户端                           服务端

我能打你吗

来呀来呀

好的,我这就来

----------------------------------------

client.send(收发数据)

收发数据                     收发数据

  客户端和服务端断开连接:四次挥手(客户端和服务端都可以主动断开连接)

    client.close() 或者 conn.close()

------------------------------------------------------------

我要断开连接

断开就断开,等我处理一些手头的事情

……

我处理完了,断开吧

拜拜

  补充:断开连接时,反应到代码上:抛出异常(windows)/发送空内容(linux和mac系统)

总结:必须了解网络相关知识。

二、FTP任务分析(进度条、计算文件大小、断点续传、搭建框架示例)

1、进度条(\r移动到行首、print不换行end=””)

    import time
    def jdt(now,all): # 进度条函数
        per = int(now / all * 100)
        print(‘\r%s %s%%‘ % (‘*‘*per , per) ,end=‘‘)
        time.sleep(0.05)

    for i in range(101):
        jdt(i,100) # 执行进度条函数

2、计算文件大小

  之前我们学过一种计算文件大小的方式:os.path.getsize(file_path),现在再来学习一种方式:

    import os
    size1 = os.path.getsize(‘server.py‘)
    size2 = os.stat(‘server.py‘).st_size
    print(size1,size2)  # 1844 1844

3、断点续传

  我们先来写一个断点续传(脚本主要实现了客户端向服务端上传文件,上传过程中中断的话,再次上传此文件时接着上次中断的地方继续上传)的简单示例,然后从中提取一些编程思想:

    import os
    import json
    import socketserver
    import shutil

    CODE = {
        ‘1001‘:‘上传文件,从头开始上传‘
    }

    def upload(cmd_dict,conn,username):
        """
        服务端完成上传文件(含断点续传)
        :param cmd_dict:
        :param conn:
        :return:
        """
        # 2. 获取文件信息
        file_md5 = cmd_dict[‘md5‘]
        file_name = cmd_dict[‘file_name‘]

        file_md5_path = os.path.join(username, file_md5)
        file_name_path = os.path.join(username, file_name)
        upload_file_size = cmd_dict[‘size‘]

        # 3. 判断文件是否存在
        exist = os.path.exists(file_md5_path)
        if not exist:  # 不续传
            # 3.1.1 可以开始上传了,我已经准备好。
            response = {‘code‘: 1001}
            conn.sendall(json.dumps(response).encode(‘utf-8‘))

            # 3.1.2 接收上传的文件内容
            f = open(file_md5_path, ‘wb‘)
            recv_size = 0
            while recv_size < upload_file_size:
                data = conn.recv(1024)
                f.write(data)
                f.flush()
                recv_size += len(data)
                return
            f.close()

            # 3.1.3 改名字
            shutil.move(file_md5_path, file_name_path)

        else:  # 续传
            # 3.2 续传+大小
            exist_size = os.stat(file_md5_path).st_size
            response = {‘code‘: 1002, ‘size‘: exist_size}
            conn.sendall(json.dumps(response).encode(‘utf-8‘))

            f = open(file_md5_path, ‘ab‘)
            recv_size = exist_size
            while recv_size < upload_file_size:
                data = conn.recv(1024)
                f.write(data)
                f.flush()
                recv_size += len(data)
            f.close()

            # 3.1.3 改名字
            shutil.move(file_md5_path, file_name_path)

    class NbServer(socketserver.BaseRequestHandler):
        def handle(self):
            """
            self.request 是客户端的socket对象
            :return:
            """
            # 1. 接收命令
            upload_cmd_bytes = self.request.recv(8096)
            cmd_dict = json.loads(upload_cmd_bytes.decode(‘utf-8‘))

            if cmd_dict[‘cmd‘] == ‘upload‘:
                upload(cmd_dict,self.request,‘lili‘)  # 服务端代码有个文件夹(lili)才能运行
            elif cmd_dict[‘cmd‘] == ‘download‘:
                pass

    if __name__ == ‘__main__‘:
        server =     socketserver.ThreadingTCPServer((‘127.0.0.1‘,8001),NbServer)
        server.serve_forever()

服务端

    import os
    import socket
    import json
    import hashlib
    CODE = {
        ‘1001‘:‘上传文件,从头开始上传‘
    }

    def file_md5(file_path):
        """
        文件进行md5加密
        :param file_path:
        :return:
        """
        obj = open(file_path,‘rb‘)
        m = hashlib.md5()
        for line in obj:
            m.update(line)
        obj.close()
        return m.hexdigest()

    def jdt(size,total_size):
        """
        显示进度条
        :return:
        """
        val = int(size / total_size * 100)
        print(‘\r%s%%|%s‘ % (val, "#" * val,), end=‘‘)

    def send_file(exist_size,file_total_size):
        """
        发送文件
        :param exist_size:开始读取字节的位置
        :param file_total_size: 文件总字节大小
        :return:
        """
        f = open(file_path, ‘rb‘)
        f.seek(exist_size)
        send_size = exist_size
        while send_size < file_total_size:
            data = f.read(1024)
            sk.sendall(data)
            send_size += len(data)
            jdt(send_size,file_total_size)
        f.close()
        print(‘上传成功‘)

    def upload(file_path):
        """
        文件上传(含断点)
        :param file_path:
        :return:
        """
        file_md5_val = file_md5(file_path)
        file_name = os.path.basename(file_path)
        file_size = os.stat(file_path).st_size

        cmd_dict = {‘cmd‘: ‘upload‘, ‘file_name‘: file_name, ‘size‘: file_size, ‘md5‘: file_md5_val}
        upload_cmd_bytes = json.dumps(cmd_dict).encode(‘utf-8‘)
        sk.sendall(upload_cmd_bytes)

        # 2. 等待服务端的响应
        response = json.loads(sk.recv(8096).decode(‘utf-8‘))
        if response[‘code‘] == 1001:
            send_file(0, file_size)
        else:
            # 短点续传
            exist_size = response[‘size‘]
            send_file(exist_size,file_size)

    sk = socket.socket()
    sk.connect((‘127.0.0.1‘,8001))

    while True:
        # upload|文件路|径
        user_input = input("请输入要执行的命令")
        # 1. 自定义协议{‘cmd‘:‘upload‘,‘file_path‘:‘.....‘}
        cmd,file_path = user_input.split(‘|‘,maxsplit=1)
        if cmd == ‘upload‘:
            upload(file_path)
        elif cmd == ‘download‘:
            pass

客户端

总结:

  1)CODE 自定义状态码;

2)自定义规范: {‘code‘:1000 };

3)if…else… 分支用 反射;

  4)其他:删除修改文件,如下示例:

 

    import os
    import shutil

    # py2 + win:报错
    os.rename(‘a.txt‘,‘b.txt‘)

    # py2 + py3 都不会报错
    shutil.move(‘c.txt‘,‘a.txt‘)  # 若a.txt已经存在,则会将其覆盖掉
    shutil.rmtree(‘E:\@Lily\pythonDemo\classic‘) # 递归删除一个目录以及目录内的所有内容

  

4、搭建框架示例

# myProject/

   # ├── bin   (当前项目的启动脚本在这里)

   # │   ├── start.py
   # ├── core   (核心代码都在这里)
   # │   └── main.py
   # └── db
   #     └── userInfo.json

   # └── lib(不是内置和第三方模块,可能是自己写的,较完善且跟此程序相关性小)
   #     └── models.py

   # └── conf(配置文件,多处用到某个值以后可能会被修改,则写到配置文件中)
   #     └── settings.py

   # └── log(日志文件,供用户查看追责或者公司分析数据)
   #     └── all.log

# ├── readme (对程序作说明,说明如何使用此程序)

原文地址:https://www.cnblogs.com/xihuanniya/p/9878995.html

时间: 2024-10-21 19:12:33

网络基础、ftp任务(进度条、计算文件大小、断点续传、搭建框架示例)的相关文章

cocos2dx基础篇(23)——进度条CCProgressTimer

[唠叨] 哎,周围的同学都在搞cocos2dx 3.X了,而我还在用2.2.3.没办法,网上3.X的教程毕竟很少,还是等我的同学学得差不多了,我再换成3.X跟着同学搞,哪里不会问哪里. 本节主要来讲讲进度条CCProgressTimer,相信大家也不会陌生的吧.如安装软件时显示的进度.游戏中人物的HP.MP显示的百分比横条. [致谢] http://gl.paea.cn/contents/2260d48c5e2bc83d.html (没错,又是这位大牛...) [CCProgressTimer]

FTP之进度条,cd切换,创建文件夹及校验思路

\r 回车,回到当前行的行首,不会换到下一行,如果接着输出的话,本行以前的内容会被逐一覆盖 import optparse import socket import configparser import json import os,sys STATUS_CODE = { 250 : "Invalid cmd format, e.g: {'action':'get','filename':'test.py','size':344}", 251 : "Invalid cmd

Bootstarp学习(十七)进度条

进度条 在网页中,进度条的效果并不少见,比如一个评分系统,比如加载状态等.就如下图所示的一个评分系统,他就是一个简单的进度条效果: 进度条和其他独立组件一样,开发者可以根据自己的需要,选择对应的版本: ? LESS版本:源码文件progress-bars.less ? Sass版本:源码文件_progress-bars.scss ? 编译后版本:bootstrap.css文件第4500行-第4575行 而且Bootstrap框架为大家提供多种样式风格的进度条,供大家使用(见右侧代码编辑器),这一

用户体验超棒的微信WebView进度条

现在微信的用户体验一直被产品经理们所推崇,今天这里具体分析一下微信在WebView的进度条上怎么提升用户体验. 最终微信的加载进度条的效果图 网络正常的状态,分为两种加载速度,前部分正常速度加载,后边速度特意放慢,让用户感觉到你在非常卖力的在进行网络请求. 断开网络的状态: 进度条还是分为两种速度,类似于网络正常的状态,也能让用户感觉到你在非常卖力的在进行网络请求. 实现的思路 大方面要分两种情况:没有网络,有网络情况 实现加载进度条的两种速度,前边比较快,后边估计放缓慢 利用自定义View属性

matlab学习---------------进度条waitbar

语法: h = waitbar(x,'message') waitbar(x,'message','CreateCancelBtn','button_callback') waitbar(x,'message',property_name,property_value,...) waitbar(x)   %将进度条进度改为新值 waitbar(x,h)  %将句柄h的进度条进度改为x waitbar(x,h,'updated message') %更新进度条显示的进度和文字 实例1):h = w

深入理解BootStrap Item14 -- 进度条(progressbar)

1.进度条 在网页中,进度条的效果并不少见,比如一个评分系统,比如加载状态等.就如下图所示的一个评分系统,他就是一个简单的进度条效果: 进度条和其他独立组件一样,开发者可以根据自己的需要,选择对应的版本: ? LESS版本:源码文件progress-bars.less ? Sass版本:源码文件_progress-bars.scss ? 编译后版本:bootstrap.css文件第4500行-第4575行 而且Bootstrap框架为大家提供多种样式风格的进度条,供大家使用. 2.进度条–基本样

Bootstrap中的进度条

进度条 在网页中,进度条的效果并不少见,比如一个评分系统,比如加载状态等.就如下图所示的一个评分系统,他就是一个简单的进度条效果: 进度条和其他独立组件一样,开发者可以根据自己的需要,选择对应的版本: ? LESS版本:源码文件progress-bars.less ? Sass版本:源码文件_progress-bars.scss ? 编译后版本:bootstrap.css文件第4500行-第4575行 而且Bootstrap框架为大家提供多种样式风格的进度条,供大家使用,这一小节只是给大家直观上

简单实现一个文件上传的进度条

新手初学web 文件上传做完了 进度做了 没有进度条只有文字 不太好看  需要做个进度条  没有美工 网上很多的 进度条 需要图片 还有各种框架 看着好麻烦 只好自己弄一个 还挺简单的 没想象的那么复杂  分享一下 jsp页面 <tr> <td width="100">图片</td> <td> <div style="width: 450px;"> <div class="file-box&

网络基础与FTP准备

一网络基础 1.端口: 端口是为了将同一台电脑上的不同程序进行隔离 (IP是在找电脑,端口是在找电脑上的程序) 实例: MySQL是一个软件,帮助我们在硬盘上进行操作,默认端口是3306 Redis是一个软件,帮助我们在内存里进行数据操作,默认端口:6379 网站默认端口:80,访问时:http://www.baidu.com:80 (前面是http) :443,访问时:https://www.baidu.com:443 (前面是https) 范围: 一共:1-65535 内置:1-1024 一