第十四章 网络编程

1.网络基础

参考：http://www.cnblogs.com/Eva-J/articles/8066842.html

2.软件开发架构

C/S架构：Client与Server ，中文意思：客户端与服务器端架构，这种架构也是从用户层面（也可以是物理层面）来划分的。

B/S架构：Browser与Server,中文意思：浏览器端与服务器端架构，这种架构是从用户层面来划分的。（其实B/S架构也是一种C/S架构）

3.计算机网络

1.在网络中的两个程序通过IP和PORT找到对方

IP地址是指互联网协议地址（英语：Internet Protocol Address，又译为网际协议地址），是IP Address的缩写。IP地址是IP协议提供的一种统一的地址格式，它为互联网上的每一个网络和每一台主机分配一个逻辑地址，以此来屏蔽物理地址的差异。

IP地址是一个32位的二进制数，通常被分割为4个“8位二进制数”（也就是4个字节）。IP地址通常用“点分十进制”表示成（a.b.c.d）的形式，其中，a,b,c,d都是0~255之间的十进制整数。例：点分十进IP地址（100.4.5.6），实际上是32位二进制数（01100100.00000100.00000101.00000110）。
"端口"是英文port的意译，可以认为是设备与外界通讯交流的出口。

2.socket概念

Socket是应用层与TCP/IP协议族通信的中间软件抽象层，它是一组接口。在设计模式中，Socket其实就是一个门面模式，它把复杂的TCP/IP协议族隐藏在Socket接口后面，对用户来说，一组简单的接口就是全部，让Socket去组织数据，以符合指定的协议。

3.套接字（socket）介绍

-- 套接字起源于 20 世纪 70 年代加利福尼亚大学伯克利分校版本的 Unix,即人们所说的 BSD Unix。 因此,有时人们也把套接字称为“伯克利套接字”或“BSD 套接字”。一开始,套接字被设计用在同 一台主机上多个应用程序之间的通讯。这也被称进程间通讯,或 IPC。套接字有两种（或者称为有两个种族）,分别是基于文件型的和基于网络型的。

-- 套接字的分类

基于文件类型的套接字家族

套接字家族的名字：AF_UNIX

unix一切皆文件，基于文件的套接字调用的就是底层的文件系统来取数据，两个套接字进程运行在同一机器，可以通过访问同一个文件系统间接完成通信

基于网络类型的套接字家族

套接字家族的名字：AF_INET

(还有AF_INET6被用于ipv6，还有一些其他的地址家族，不过，他们要么是只用于某个平台，要么就是已经被废弃，或者是很少被使用，或者是根本没有实现，所有地址家族中，AF_INET是使用最广泛的一个，python支持很多种地址家族，但是由于我们只关心网络编程，所以大部分时候我么只使用AF_INET)

4.传输协议价绍

TCP（Transmission Control Protocol）可靠的、面向连接的协议（eg:打电话）、传输效率低全双工通信（发送缓存&接收缓存）、面向字节流。使用TCP的应用：Web浏览器；电子邮件、文件传输程序。

UDP（User Datagram Protocol）不可靠的、无连接的服务，传输效率高（发送前时延小），一对一、一对多、多对一、多对多、面向报文，尽最大努力服务，无拥塞控制。使用UDP的应用：域名系统 (DNS)；视频流；IP语音(VoIP)。

我知道说这些你们也不懂，直接上图。

4.套接字（socket）的使用

4.1基于TCP协议的socket

特点：TCP链接服务端同一时间只能与一个客户端进行通信，服务端与客户端一旦建立连接，将一直占用socket链接

1- 简单版TCP通信

server端

import socket

# sk = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
sk = socket.socket()  # 拿到一个socket实例化对象，默认是基于网络类型的套接字家族，类型是TCP
sk.bind((‘127.0.0.1‘, 9000))  # 把地址绑定到套接字
sk.listen()  # 监听链接
conn, addr = sk.accept()  # 接收客户端链接
print(addr) # (‘127.0.0.1‘, 51625) 客户端的地址
conn.send(‘haha‘.encode(‘utf-8‘))  # 向客户端发送消息，消息是bytes类型
ret = conn.recv(1024).decode(‘utf-8‘)  # 接收客户端消息，需要解码 1024--最大接收1024个字节
print(ret)  # 打印客户端消息
conn.close()  # 关闭客户端套接字
sk.close()  # 关闭服务器套接字

client端

import socket

# sk = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
sk = socket.socket()  # 拿到一个socket实例化对象，默认是基于网络类型的套接字家族，类型是TCP
sk.connect((‘127.0.0.1‘, 9000))  # 尝试连接服务器
ret = sk.recv(1024).decode(‘utf-8‘)  # 陷入阻塞，客户端接收消息，并解码 1024--最大接收1024个字节
print(ret)
sk.send(‘hahahaha‘.encode(‘utf-8‘))  # 客户端发送消息
sk.close()  #关闭客户端套接字

2- 异常处理 -- 端口被占用

# 异常描述
#     sk.bind((‘127.0.0.1‘, 9000))  # 把地址绑定到套接字
# OSError: [WinError 10048] 通常每个套接字地址(协议/网络地址/端口)只允许使用一次。
# 解决方法：
# 加入一条socket配置，重用ip和端口
import socket
from socket import SOL_SOCKET,SO_REUSEADDR

# sk = socket.socket(socket.AF_INET, socket.SOCK_STREAM)
sk = socket.socket()  # 拿到一个socket实例化对象，默认是基于网络类型的套接字家族，类型是TCP
sk.setsockopt(SOL_SOCKET,SO_REUSEADDR,1) ####### 就是它，在bind前加
sk.bind((‘127.0.0.1‘, 9000))  # 把地址绑定到套接字
sk.listen()  # 监听链接
conn, addr = sk.accept()  # 接收客户端链接
print(addr) # (‘127.0.0.1‘, 51625) 客户端的地址
conn.send(‘haha‘.encode(‘utf-8‘))  # 向客户端发送消息，消息是bytes类型
ret = conn.recv(1024).decode(‘utf-8‘)  # 接收客户端消息，需要解码
print(ret)  # 打印客户端消息
conn.close()  # 关闭客户端套接字
sk.close()  # 关闭服务器套接字

3- 单间循环版TCP通信

server端

import socket
from socket import SOL_SOCKET,SO_REUSEADDR

sk = socket.socket()
sk.bind((‘127.0.0.1‘, 9000))
sk.listen()
conn, addr = sk.accept()
print(‘%s正在与你通信‘%addr[0])
while True:
    msg = input(‘>>> ‘)
    conn.send(msg.encode(‘utf-8‘))
    ret = conn.recv(1024).decode(‘utf-8‘)
    print(ret)
conn.close()
sk.close()

client端

import socket

sk = socket.socket()
sk.connect((‘127.0.0.1‘, 9000))
while True:
    ret = sk.recv(1024).decode(‘utf-8‘)
    print(ret)
    msg = input(‘>>> ‘)
    sk.send(msg.encode(‘utf-8‘))
sk.close()

4- 带退出的循环版TCP通信

server端

import socket
from socket import SOL_SOCKET,SO_REUSEADDR

sk = socket.socket()
sk.bind((‘127.0.0.1‘, 9000))
sk.listen()
conn, addr = sk.accept()
print(‘%s正在与你通信‘%addr[0])
while True:
    msg = input(‘>>> ‘)
    conn.send(msg.encode(‘utf-8‘))
    if msg == ‘q‘:break
    ret = conn.recv(1024).decode(‘utf-8‘)
    print(ret)
    if ret == ‘q‘:break
conn.close()
sk.close()

client端

import socket

sk = socket.socket()
sk.connect((‘127.0.0.1‘, 9000))
while True:
    ret = sk.recv(1024).decode(‘utf-8‘)
    print(ret)
    if ret == ‘q‘:break
    msg = input(‘>>> ‘)
    sk.send(msg.encode(‘utf-8‘))
    if msg == ‘q‘:break
sk.close()

5- 一个服务端对应多个客户端，但一次只能与一个客户端通信，当这个客户端断开连接了，依次与后面的客户端进行通信

server端

import socket
from socket import SOL_SOCKET,SO_REUSEADDR

sk = socket.socket()
sk.bind((‘127.0.0.1‘, 9000))
sk.listen()
while True:
    conn, addr = sk.accept()
    print(‘%s正在与你通信‘%addr[0])
    while True:
        msg = input(‘>>> ‘)
        conn.send(msg.encode(‘utf-8‘))
        if msg == ‘q‘:break
        ret = conn.recv(1024).decode(‘utf-8‘)
        print(ret)
        if ret == ‘q‘:break
    conn.close()
sk.close()

client端

import socket

sk = socket.socket()
sk.connect((‘127.0.0.1‘, 9000))
while True:
    ret = sk.recv(1024).decode(‘utf-8‘)
    print(ret)
    if ret == ‘q‘:break
    msg = input(‘>>> ‘)
    sk.send(msg.encode(‘utf-8‘))
    if msg == ‘q‘:break
sk.close()

4.2基于UDP协议的socket

特点：没有建立链接的过程，可以同时接受多个客户端的链接

1- 简单版UDP通信

server端

import socket

sk = socket.socket(type=socket.SOCK_DGRAM) # ******-******必须添加协议类型
sk.bind((‘127.0.0.1‘, 9000))  # 绑定服务器套接字
msg, addr = sk.recvfrom(1024)
print(msg.decode(‘utf-8‘))
sk.sendto(b‘byebye‘, addr) # 需要添加客户端的地址
sk.close()

client端

import socket

sk = socket.socket(type=socket.SOCK_DGRAM) # ******-******必须添加协议类型
sk.sendto(b‘hello‘, (‘127.0.0.1‘, 9000))
msg,addr = sk.recvfrom(1024)
print(msg.decode(‘utf-8‘))
sk.close()

2- 循环版支持多个客户端UDP通信

server端

import socket

sk = socket.socket(type=socket.SOCK_DGRAM) # 必须添加协议类型
sk.bind((‘127.0.0.1‘, 9000))  # 绑定服务器套接字
while True:
    msg, addr = sk.recvfrom(1024)
    print(addr,‘:‘,msg.decode(‘utf-8‘))
    inp = input(‘>>> ‘)
    sk.sendto(inp.encode(‘utf-8‘), addr) # 需要添加客户端的地址
sk.close()

client端

import socket

sk = socket.socket(type=socket.SOCK_DGRAM) # 必须添加协议类型
inp = input(‘>>> ‘)
sk.sendto(inp.encode(‘utf-8‘), (‘127.0.0.1‘, 9000))
msg,addr = sk.recvfrom(1024)
print(msg.decode(‘utf-8‘))
sk.close()

演示

# server：
(‘127.0.0.1‘, 59120) : 你好
>>> 不好
(‘127.0.0.1‘, 53072) : 好不好
>>> 不太好
# client1：
>>> 你好
不好
# client2：
>>> 好不好
不太好

3- 并发循环版UDP通信

server端

import socket

sk = socket.socket(type=socket.SOCK_DGRAM) # 必须添加协议类型
sk.bind((‘127.0.0.1‘, 9000))  # 绑定服务器套接字
while True:
    msg, addr = sk.recvfrom(1024)
    print(addr,‘:‘,msg.decode(‘utf-8‘))
    inp = input(‘>>> ‘)
    sk.sendto(inp.encode(‘utf-8‘), addr) # 需要添加客户端的地址
sk.close()

client端

import socket

sk = socket.socket(type=socket.SOCK_DGRAM) # 必须添加协议类型
while True:
    inp = input(‘>>> ‘)
    sk.sendto(inp.encode(‘utf-8‘), (‘127.0.0.1‘, 9000))
    msg,addr = sk.recvfrom(1024)
    print(msg.decode(‘utf-8‘))
sk.close()

演示

# server：
(‘127.0.0.1‘, 55844) : 哈哈哈
>>> 不哈
(‘127.0.0.1‘, 59756) : 2哈2哈
>>> 不2哈
# client1：
>>> 哈哈哈
不哈
>>>
# client2：
>>> 2哈2哈
不2哈
>>>

备注

4.3socket参数的详解

socket.socket(family=AF_INET,type=SOCK_STREAM,proto=0,fileno=None)

  family   
地址系列应为AF_INET(默认值),AF_INET6,AF_UNIX,AF_CAN或AF_RDS。（AF_UNIX 域实际上是使用本地 socket 文件来通信）
type   
套接字类型应为SOCK_STREAM(默认值),SOCK_DGRAM,SOCK_RAW或其他SOCK_常量之一。SOCK_STREAM 是基于TCP的，有保障的（即能保证数据正确传送到对方）面向连接的SOCKET，多用于资料传送。SOCK_DGRAM 是基于UDP的，无保障的面向消息的socket，多用于在网络上发广播信息。
 
proto  
协议号通常为零,可以省略,或者在地址族为AF_CAN的情况下,协议应为CAN_RAW或CAN_BCM之一。
 
fileno  
如果指定了fileno,则其他参数将被忽略,导致带有指定文件描述符的套接字返回。与socket.fromfd()不同,fileno将返回相同的套接字,而不是重复的。这可能有助于使用socket.close()关闭一个独立的插座。

5.粘包

说明：同时执行多条命令之后，得到的结果很可能只有一部分，在执行其他命令的时候又接收到之前执行的另外一部分结果，这种显现就是粘包。

1- 发送方的缓存机制

server端

import socket
sk = socket.socket()
sk.bind((‘127.0.0.1‘, 9000))
sk.listen()

conn,addr = sk.accept()
data1 = conn.recv(15).decode(‘utf-8‘)
data2 = conn.recv(15).decode(‘utf-8‘)
print(‘--->1: ‘,data1)
print(‘--->2: ‘,data2)
conn.close()
sk.close()

client端

import socket
sk = socket.socket()
sk.connect((‘127.0.0.1‘, 9000))
sk.send(‘hello‘.encode(‘utf-8‘))
sk.send(‘alex‘.encode(‘utf-8‘))
sk.close()

运行结果

# server
--->1:  helloalex
--->2:

粘包只会发生在tcp协议中，在连续send的过程中就容易发生粘包

2- 接收方的缓存机制

server端

import socket
sk = socket.socket()
sk.bind((‘127.0.0.1‘, 9000))
sk.listen()

conn,addr = sk.accept()
data1 = conn.recv(2).decode(‘utf-8‘)
data2 = conn.recv(15).decode(‘utf-8‘)
print(‘--->1: ‘,data1)
print(‘--->2: ‘,data2)
conn.close()
sk.close()

client端

import socket
sk = socket.socket()
sk.connect((‘127.0.0.1‘, 9000))
sk.send(‘hello‘.encode(‘utf-8‘))
sk.send(‘alex‘.encode(‘utf-8‘))
sk.close()

运行结果

# server
--->1:  he
--->2:  lloalex

总结：

粘包现象只发生在tcp协议中：

1.从表面上看，黏包问题主要是因为发送方和接收方的缓存机制、tcp协议面向流通信的特点。

2.实际上，主要还是因为接收方不知道消息之间的界限，不知道一次性提取多少字节的数据所造成的

6.粘包的解决

原理：提前计算要发送数据的长度，相关模块struct

import struct
ret = struct.pack(‘i‘, 111111)
print(ret, len(ret))

# b‘\x07\xb2\x01\x00‘ 4
# 说明：‘i‘ 表示 int数据类型
# 返回一个4个字节的bytes字符串
# struct.error: ‘i‘ format requires -2147483648 <= number <= 2147483647 #这个是范围

res = struct.unpack(‘i‘, ret)
print(res)
# (111111,) # 只有一个元素的元组

粘包问题的解决

server端

import socket
import struct
sk = socket.socket()
sk.bind((‘127.0.0.1‘, 9000))
sk.listen()

conn,addr = sk.accept()
inp = input(‘>>>> ‘).encode(‘utf-8‘)
inp_len = len(inp)
bytes_msg = struct.pack(‘i‘, inp_len)
conn.send(bytes_msg)
conn.send(inp)
conn.close()
sk.close()

client端

import socket
import struct
sk = socket.socket()
sk.connect((‘127.0.0.1‘, 9000))
msg_len = struct.unpack(‘i‘,sk.recv(4))[0]
print(sk.recv(msg_len).decode(‘utf-8‘))
sk.close()

运行结果

# server
>>>> 哈哈哈哈哈
# client
哈哈哈哈哈

原文地址：https://www.cnblogs.com/gnaix/p/9154928.html

时间： 2024-08-19 09:57:09

第十四章 网络编程的相关文章

Python基础教程（第十四章 网络编程）

本文内容全部出自<Python基础教程>第二版,在此分享自己的学习之路. ______欢迎转载:http://www.cnblogs.com/Marlowes/p/5538341.html______ Created on Marlowes 本章将会给读者展示一些例子,这些例子会使用多种Python的方法编写一个将网络(比如因特网)作为重要组成部分的程序.Python是一个很强大的网络编程工具,这么说有很多原因,首先,Python内有很多针对常见网络协议的库,在库顶部可以获得抽象层,这样就可以

Java笔记二十四.TCP网络编程

 TCP网络编程 转载请表明出处:http://blog.csdn.net/u012637501(嵌入式_小J的天空) 从上面一节内容可以知道,利用UDP通信的两个程序是平等的,无主次之分,两个程序代码可以完全一样.但利用TCP协议进行通信的两个应用程序,是有主从之分的,一个称为服务器程序,另外一个称为客户机程序.Java中提供了ServerSocket类用于创建服务器端的socket,Socket类用于创建客户端socket. 一.APIs简介 java.net.ServerSocket (1

第十二章-网络编程

1 TCP/IP IP协议赋值吧数据从一台计算机通过网络发送到另一台计算机. 数据是被分割成一个个小块, 然后通过IP包发送出去的. 其中如何在负载的网络链路中传送的是通过路由器进行转发达到最终的目的地 TCP协议是建立在IP协议之上的, TCP协议负责在两台计算机之间建立可靠连接, 而且保证数据包按照顺序到达, 主要是依靠握手协议和对数据包进行编号, 确保数据被对方收到 应用成的HTTP和SMTP等协议都是基于TCP协议的 IP包的组成: 源IP地址, 目的IP地址, 源端口, 目的端口, 数

android学习二十四（网络编程的最佳实践）

前面的博客已经讲解了HttpURLConnection和HttpClient的用法,知道了如何发起HTTP请求,以及解析服务器返回 的数据.但是可能你发现了,因为一个应用程序很多地方都可能使用网络功能,而发送HTTP请求的代码基本相同,如果每次我们都去编写一遍发送HTTP请求的代码,这显然不太好. 通常情况下我们都应该将这些通用的网络操作提取到一个公共的类里,并提供一个静态方法,当想要发起网络请求的时候只需简单地调用一下这个方法即可.比如下面的写法: package com.jack.netwo

第十四章 网络操作系统安全管理

1.网络中存在的安全问题有那些? 答:(1)物理安全(2)逻辑安全(3)操作系统安全(4)网络传输安全 2.简述WIndows  SErver 2008系统中提供了那些安全管理功能. 答:启动安全配置向导,基于角色的服务配置,网络安全配置,注册表设置, 启用审核策略,保存安全策略. 3.以一台提供Web服务的Linux 主机为例,说明服务器的搭建过程中应从那些方面提供安全保障. 答:数据包过滤防火墙:IP  Filtering 或Net Filter 第2层防火墙:TCP  Wrappers 服

java 面向对象编程--第十四章 多线程编程

1.  多任务处理有两种类型:基于进程和基于线程. 2.  进程是指一种“自包容”的运行程序,由操作系统直接管理,直接运行,有自己的地址空间,每个进程一开启都会消耗内存. 3.  线程是进程内部单一的顺序控制流.一个进程拥有多个线程.多个线程共享一个进程的内存空间. 4.  基于进程的特点是允许计算机同时运行两个或更多的程序. 5.  基于线程的多任务处理环境中,线程是最小的处理单位. 6.  基于进程所需的开销更少:每个进程都需要操作系统为其分配独立的内存空间:同意进程中的所有线程都在同意内存

Java-第十四章-代参的方法(二)-编程实现,输入班里10名学生的身高,获得身高最高的学生要求对象数组类型方法

package com.ww.yzpA; public class Students { int No; int Height; } package com.ww.yzpA; public class Height { public Students getMaxHeigth(Students[] str) { Students A = new Students(); for (int i = 0; i < str.length; i++) { if (str[i].Height > A.He

MiS603开发板 第十四章 UDP协议网络传输

作者:MiS603开发团队 日期:20150911 公司:南京米联电子科技有限公司 论坛:www.osrc.cn 网址:www.milinker.com 网店:http://osrc.taobao.com EAT博客:http://blog.chinaaet.com/whilebreak 博客园:http://www.cnblogs.com/milinker/ MiS603开发板 第十四章 UDP协议网络传输 本实验将实现FPGA 芯片和PC 之间进行千兆以太网数据通信, 通信协议采用Ether

《OpenCL异构并行编程实战》补充笔记散点，第十二至十四章

? 第十二章,在其他语言中使用 OpenCL ● JOCL(Java Building for OpenCL),PyOpenCL ● 一个 PyOpenCL 的例子代码,需要 pyopencl 包 1 import pyopencl as cl 2 import numpy as np 3 import numpy.linalg as la 4 5 a = np.random.rand(50000).astype(np.float32) 6 b = np.random.rand(50000).a