python中的JPG编码通过套接字发送到C#并解码

Question

我想将处理后的图像从 python 后端发送到 C# 前端。 所以我使用JPG编码器对其进行编码并发送。

当我收到它并在 C# 中使用 jpegdecoder 对其进行解码时，它会抛出异常。其中接收字节的大小等于编码后发送的字节。

谁能指导我如何解码这张图片并显示它。

Python 服务器端编码图像 JPG 中的代码

while True:
    conn, addr = s.accept()
    print ('connected to : ' + addr[0] +" :"+ str(addr[1])) 

    vidcap = cv2.VideoCapture(videoPath)
    total_frames = int(vidcap.get(cv2.CAP_PROP_FRAME_COUNT))
    conn.setblocking(0)
    for mm in range(0,total_frames ,1):
       try:
           dataClient = str(conn.recv(4096).decode('UTF-8'))
           conn.send(str.encode(dataClient))   
           conn.close()
           kk=2
           break
       except socket.error:

           ret,img= vidcap.read()
           image = cv2.resize(img, (640, 480)) 
           #############################################
           encode_param=[int(cv2.IMWRITE_JPEG_QUALITY),100]
           result,enData=cv2.imencode('.jpg',image,encode_param)
           conn.send(enData)
           #############################################

C# 客户端解码图像 JPG 中的代码

            const int PORT_NO = 6666;
            //const string SERVER_IP = "210.107.232.138"; // 210.107.232.138          127.0.0.1
            string SERVER_IP = IpAddress.Text;
            client = new TcpClient(SERVER_IP, PORT_NO);
            nwStream = client.GetStream();
            bytesToRead = new byte[client.ReceiveBufferSize];
            bytesRead = nwStream.Read(bytesToRead, 0, client.ReceiveBufferSize);
            /////////////////////////////////////
            MemoryStream ms = new MemoryStream(bytesRead);
            JpegBitmapDecoder decoder = new JpegBitmapDecoder(ms, BitmapCreateOptions.PreservePixelFormat, BitmapCacheOption.Default); //line 129
            BitmapSource bitmapSource = decoder.Frames[0];
            ///////////////////////////////////// 
            var src = new System.Windows.Media.Imaging.FormatConvertedBitmap();
            src.BeginInit();
            src.Source = bitmapSource;
            src.DestinationFormat = System.Windows.Media.PixelFormats.Bgra32;
            src.EndInit();

            //copy to bitmap
            Bitmap bitmap = new Bitmap(src.PixelWidth, src.PixelHeight, System.Drawing.Imaging.PixelFormat.Format32bppArgb);
            var data = bitmap.LockBits(new Rectangle(Point.Empty, bitmap.Size), System.Drawing.Imaging.ImageLockMode.WriteOnly, System.Drawing.Imaging.PixelFormat.Format32bppArgb);
            src.CopyPixels(System.Windows.Int32Rect.Empty, data.Scan0, data.Height * data.Stride, data.Stride);
            bitmap.UnlockBits(data);

            pictureBox2.Image = bitmap;

Answer 1

TcpClient.ReceiveBufferSize 有一个default value 8KB。如果您的 jpeg 数据的字节数比这多，由于您的 c# 代码只读取缓冲区一次，您将不会收到整个数据。

您可能希望在您的 c# 代码中使用循环来读取直到到达 tcp 流的末尾。

试试这个：

var ms = new MemoryStream();
var buff = new byte[client.ReceiveBufferSize];
while (true) {
    var len = nwStream.Read(buff, 0, buff.Length);
    if (len <= 0) { break; }
    ms.Write(buff, 0, len);
}
ms.Seek(0, SeekOrigin.Begin);

希望有所帮助。

Answer 2

MemoryStream ms = new MemoryStream(bytesRead); // bytesRead = int, number of bytes received

此行创建一个初始容量为bytesRead 字节的空 MemoryStream。见MemoryStream(int)

您需要使用另一个构造函数来填充接收到的数据：

MemoryStream ms = new MemoryStream(bytesToRead); // byte[], received data

见MemoryStream(Byte[])

---

还请注意 john 对您的接收代码的评论：

无法保证您将在单个接收事件中接收到完整的数据缓冲区。