【发布时间】:2017-04-07 11:17:04
【问题描述】:
感谢您的阅读,并为我的英语不好提前道歉。
我正在使用 OpenCV 进行网络摄像头流式传输。 我的最终目标是制作一个类似 Skype 的应用程序。 所以我先尝试基本的 1:1 TCP 模型。
关于 TCP 1:1 模型,
连接后,客户端发送其实时网络摄像头帧,服务器接收并显示在其 jpanel 上。
到目前为止,我确实收到了一张图片并将其显示在 jpanel 上。
我正在尝试接收连续的帧。
起初,问题是服务器端套接字似乎一直在等待来自客户端的输入完成,即它永远不会停止,因为实时帧是连续发送的。
所以我在发送帧之前发送了每个帧大小以逃避不可阻挡的等待。
但效果不好。客户端一直在发送帧,但服务器没有很好地接收它。
例如,如果客户端发送大约 25k 字节大小的帧,即使缓冲区大小为 512,服务器每次读取也只能接收 1 到 3 个字节。
ClientThread.java
package client;
import java.io.ByteArrayInputStream;
import java.io.ByteArrayOutputStream;
import java.io.DataInputStream;
import java.io.DataOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.io.OutputStream;
import java.net.Socket;
import javax.imageio.ImageIO;
import video.VideoCap;
public class ClientThread extends Thread
{
String serverIp;
int serverPort;
Socket socket;
VideoCap videoCap;
public ClientThread(Socket socket, String serverIp, int serverPort, VideoCap videoCap)
{
this.socket = socket;
this.serverIp = serverIp;
this.serverPort = serverPort;
this.videoCap = videoCap;
}
public void run()
{
while (ClientUI.calling)
{
try
{
InputStream in = socket.getInputStream();
DataInputStream dis = new DataInputStream(in);
OutputStream out = socket.getOutputStream();
DataOutputStream dos = new DataOutputStream(out);
// receive
int bufSize = dis.readInt();
while (ClientUI.calling)
{
ByteArrayOutputStream baos = new ByteArrayOutputStream();
ImageIO.write(videoCap.getOneFrame(), "jpg", baos);
InputStream inputImage = new ByteArrayInputStream(baos.toByteArray());
// frame size
dos.writeInt(baos.size());
out(inputImage, baos, bufSize);
Thread.sleep(5000);
}
}
catch (IOException | InterruptedException e)
{
e.printStackTrace();
}
}
}
void out(InputStream in, OutputStream out, int bufSize)
{
long size = 0;
try
{
byte[] buf = new byte[bufSize];
int n;
while ((n = in.read(buf)) > 0)
{
out.write(buf, 0, n);
size += n;
System.out.println("size: " + size);
}
}
catch (IOException e)
{
e.printStackTrace();
}
finally
{
System.out.println(getClass().getName() + " :: out >>> sent size: " + size);
}
}
}
ServerThread.java
package server;
import java.awt.image.BufferedImage;
import java.io.ByteArrayInputStream;
import java.io.ByteArrayOutputStream;
import java.io.DataInputStream;
import java.io.DataOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.io.OutputStream;
import java.net.ServerSocket;
import java.net.Socket;
import javax.imageio.ImageIO;
import javax.swing.JPanel;
public class ServerThread extends Thread
{
ServerSocket serverSocket;
Socket socket;
JPanel panel;
byte[] buf;
public ServerThread(ServerSocket serverSocket, JPanel panel, int bufSize)
{
this.serverSocket = serverSocket;
this.panel = panel;
buf = new byte[bufSize];
}
public void run()
{
try
{
System.out.println("waiting for client");
socket = serverSocket.accept();
System.out.println("client accepted");
InputStream in = socket.getInputStream();
DataInputStream dis = new DataInputStream(in);
OutputStream out = socket.getOutputStream();
DataOutputStream dos = new DataOutputStream(out);
dos.writeInt(buf.length);
while (ServerUI.calling)
{
int frameSize = dis.readInt();
ByteArrayOutputStream outImage = new ByteArrayOutputStream();
long size = 0;
int n;
while (frameSize >= size)
{
n = dis.read(buf);
if (n == -1)
break;
outImage.write(buf, 0, n);
size += n;
System.out.println(n);
}
InputStream inputImage = new ByteArrayInputStream(outImage.toByteArray());
BufferedImage bufferedImage = ImageIO.read(inputImage);
panel.getGraphics().drawImage(bufferedImage, 0, 0, null);
}
}
catch (IOException e)
{
e.printStackTrace();
}
}
}
【问题讨论】:
-
为什么服务器要向客户端发送bufsize?
-
@SteveSmith 我想如果缓冲区的大小相同,那么接收和发送的数据量就会相同。