V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
moxiaowei
V2EX  ›  Python

websocket 服务器端接收大文件时的疑问

  •  
  •   moxiaowei · 2019-07-20 13:54:53 +08:00 · 2367 次点击
    这是一个创建于 1714 天前的主题,其中的信息可能已经有所发展或是发生改变。

    接收部分代码如下,粘包我已经做了处理,但是,发送的如果是文件,不论是任何文件,都会出现问题!

        def recvMessage(self, sockHandle):#读取来自客户端的数据
            print("请求开始")
            strings = b""
            resDict = {}
            client = self.dictSocketHandle[sockHandle]
            if not self.dictSocketShakeHandStatus[sockHandle]:#如果没有握手完成,我用 1024 个字节去接收数据是完全够用的
                data = client.recv(1024)  # 这儿如果没有拿够 1024 个字节的数据,那么会循环回来拿,但是,如果发现没有数据能拿到,socket 会自动中止,扔出一个异常,代码就结束执行,所以需要 try 一下。
                if len(data) == 0:  # 通道断开或者 close 之后,就会一直收到空字符串。 而不是所谓的-1 或者报异常。这个跟 C 和 java 等其他语言很不一样。
                    self.epollHandle.modify(sockHandle, select.EPOLLHUP | select.EPOLLET)
                strings = data
                optCode = -5
            else: #如果已经握手完成了,那么先要去完成一次通讯由客户端告知服务端,下一次要发送的数据大小
                data_head = client.recv(1)
                data_head = struct.unpack("B", data_head)[0]
                optCode = self.parseHeadData(data_head)
                if optCode == 0:#客户端要求退出,其余这儿不处理
                    self.closeConnect(client.fileno())
                    return
                print("操作码为:", optCode)
                byteData = client.recv(1)
                byteData = struct.unpack("B", byteData)
                payload_len = byteData[0] & 127
                print("payloadLen", payload_len)
    
                if payload_len == 126:
                    extend_payload_len = client.recv(2)  # 数据头部延伸的长度
                    dataLength = struct.unpack("H", extend_payload_len)[0]
                    mask = client.recv(4)  # 加密的 4 个字节
                elif payload_len == 127:
                    extend_payload_len = client.recv(8)
                    dataLength = struct.unpack("Q", extend_payload_len)[0]
                    mask = client.recv(4)
                else:
                    dataLength = payload_len
                    mask = client.recv(4)
                print("接收到的数据长度为:", dataLength)
    
                bytes_list = bytearray('', encoding='utf-8')
                recvLen = 0
                while recvLen < dataLength:
                    try:
                        data = client.recv(1024)
                        print("一次取到数据长度", len(data))
                        for i in range(len(data)):
                            chunk = data[i] ^ mask[i % 4]
                            bytes_list.append(chunk)
                        recvLen = recvLen + len(data)
                        print("目前接收数据总长度", recvLen)
                    except IOError as e:
                        if e.errno == 11:
                            continue
                strings = bytes_list
            resDict["string"] = strings
            resDict["type"] = optCode
    
            return resDict
    

    上面的代码,如果上传文件会有如下的效果,不知道为啥!!!求大神帮我!!

    请求开始
    Binary frames 二进制帧上传文件
    操作码为:5
    payloadLen 126
    接收到的数据长度为:15530
    一次取到数据长度 1024
    目前接收数据总长度 1024
    一次取到数据长度 1024
    目前接收数据总长度 2048
    一次取到数据长度 1024
    目前接收数据总长度 3072
    一次取到数据长度 1024
    目前接收数据总长度 4096
    一次取到数据长度 1024
    目前接收数据总长度 5120
    一次取到数据长度 1024
    目前接收数据总长度 6144
    一次取到数据长度 1024
    目前接收数据总长度 7168
    一次取到数据长度 1024
    目前接收数据总长度 8192
    一次取到数据长度 1024
    目前接收数据总长度 9216
    一次取到数据长度 1024
    目前接收数据总长度 10240
    一次取到数据长度 1024
    目前接收数据总长度 11264
    一次取到数据长度 1024
    目前接收数据总长度 12288
    一次取到数据长度 1024
    目前接收数据总长度 13312
    一次取到数据长度 1024
    目前接收数据总长度 14336
    一次取到数据长度 1024
    目前接收数据总长度 15360
    一次取到数据长度 1024
    目前接收数据总长度 16384
    请求开始
    Unknown opcode %#x.6
    操作码为:4
    payloadLen 3
    接收到的数据长度为:3
    一次取到数据长度 1024
    目前接收数据总长度 1024
    请求开始
    pong frames are not supported.
    操作码为:4
    payloadLen 91
    接收到的数据长度为:91
    一次取到数据长度 1024
    目前接收数据总长度 1024
    请求开始
    Continuation frames are not supported.
    操作码为:4
    payloadLen 14
    接收到的数据长度为:14
    一次取到数据长度 1024
    目前接收数据总长度 1024
    

    注意 我只请求了一次上传文件,但是 会 有多个 ”请求开始“ 证明就是 recv 了多次,难道说 websocket 的 js 端会自动切片上传?

    2 条回复    2019-07-20 23:44:26 +08:00
    mason961125
        1
    mason961125  
       2019-07-20 19:35:07 +08:00 via iPhone
    行吧,粘包,
    momocraft
        2
    momocraft  
       2019-07-20 23:44:26 +08:00
    不建议还在使用“粘包”概念的人自己写通讯协议
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2764 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 12:18 · PVG 20:18 · LAX 05:18 · JFK 08:18
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.