来自 Android 设备摄像头的视频流

Question

我正在尝试在 Android 上构建一个应用程序，将视频从设备摄像头流式传输到流媒体服务器。

我查看了不同的帖子和解决方案，这是我当前的状态，在（我使用 Sipdroid、jboss-netty 和在wireshark 上分析数据包）的帮助下，

1. 我构建了 RTSP 堆栈并成功连接到服务器
   2.理论上我能够创建一个rtp数据包并将其发送到 服务器

我的问题是捕获帧并发送 RTP 数据包中的数据。 我有 2 个方向：

1-使用相机和 AuidoRecorder 捕获原始媒体数据并使用 rtp 发送它，问题是该数据是否应该根据 RTSP 的 ANNOUNCE 中的 .sdp 文件描述进行编码？？？据我了解，来自相机和麦克风的数据将是未编码的原始数据 另一件事是如何正确地在 RTP 数据包中表达这些原始数据。

2-媒体记录器已经对数据进行了编码，我可以按照 .sdp 文件中定义的方式设置编码。我尝试找到一种从输出文件中读取的方法，但这需要我转换 .mp4 文件数据流数据这似乎是一项复杂的任务。

我的问题是我是否使事情变得过于复杂，是否足以以 RTP 数据包发送视频和音频的原始数据，而流媒体服务器将处理其余部分？？？ 请在这方面提供任何帮助和指导，我将不胜感激。

谢谢

Answer 1

首先，您必须按照 .sdp 文件的描述对数据进行编码。您想尝试 MediaRecorder 而不是 AuidoRecord 吗？ MediaRecorder 允许您设置将获得的数据的编码。

此外，我建议您通过套接字创建一个FileDescriptor，以便可以通过套接字流而不是静态文件传输数据。
代码可能是这样的：

Socket socket = new Socket(serverAddr, serverPort);
socket.setTcpNoDelay(true);
ParcelFileDescriptor pfd = ParcelFileDescriptor.fromSocket(socket);
Camera camera = Camera.open();
camera.unlock();
MediaRecorder recorder = new MediaRecorder();
recorder.setCamera(camera);
recorder.setVideoSource(MediaRecorder.VideoSource.CAMERA);
recorder.setOutputFormat(MediaRecorder.OutputFormat.THREE_GPP);
recorder.setVideoEncoder(MediaRecorder.VideoEncoder.H263);
recorder.setOutputFile(pfd.getFileDescriptor());
recorder.setPreviewDisplay(surfaceView.getHolder().getSurface());
recorder.setVideoFrameRate(15);
recorder.setVideoSize(480, 320);
recorder.prepare();
recorder.start();

RTP 中的传输方法正是现在困扰我的问题。