试图开发一个使用h264编码器的视频聊天应用程序

Question

我想开发一个视频聊天应用程序使用h264编码器的视频和MediaCodec库。视频应显示在客户端和服务器上。现在我需要一个教程来了解它。这意味着如何在我的设备上显示我的相机视频以及如何将此视频发送到IP（点对点聊天）？

感谢

Answer 1

，你可以尝试使用标准的API相机上显示的SurfaveView框架，并从摄像头获取的帧，编码它们的发送到网络。你可以在计算器找到有关它的所有细节，以下是主要观点

打开相机：

 c = Camera.open(index); 

设置参数相机设置表面在屏幕上显示通过量surfaceholder：

 /* 
     init paramerers firstly, like fps, framerate range, color format 
    */ 

    surfaceHolder = surfaceView.getHolder(); 
    surfaceHolder.setType(SurfaceHolder.SURFACE_TYPE_PUSH_BUFFERS); 
    surfaceHolder.addCallback(this);  

    c.setPreviewDisplay(surfaceHolder); 

从相机接收帧：

private Camera.PreviewCallback previewListener = new Camera.PreviewCallback() 
    { 
     @Override 
     public void onPreviewFrame(byte[] data, Camera camera) 
     {    
      //put **data** to encoder 
     }; 
    } 

将数据写入编码器，如http://developer.android.com/reference/android/media/MediaCodec.html

使用ffmpeg进行流式传输。 INIT RTSP连接，并发送编码的帧到ffmpeg的复用器\流光

/* 
      outputBufferIndex is a buffer encoder prepared for output 
    */ 
    ByteBuffer outputBuffer = outputBuffers[outputBufferIndex]; 
    byte[] outData = new byte[bufferInfo.size]; 
    outputBuffer.get(outData); 

    //something what sends data to ffmeg muxer\network   
    writeVideoFrame(outData, outData.length, bufferInfo.presentationTimeUs);  

所述一个棘手的事情是建立FFMPEG Android和创建JNI电平从Java级别和对应的电平发送数据。我记得有一些针对android的预构建的ffmpeg二进制文件，还有如何构建它的说明。