windows java 视频处理_Java+Windows+ffmpeg实现视频转换

最近由于项目需要,研究了一下如何用Java实现视频转换,“着实”废了点心思,整理整理,写出给自己备忘下。

思路

由于之前没有没法过相关功能的经验,一开始来真不知道从哪里入手。当然,这个解决,google一下立马就发现了ffmpeg,网上讲解用Java+ffmpeg来进行视频转换的文章也不在少数,我主要参考的这篇文章。

上文提到的这篇文章,基本已经把开发流程什么的讲的很清楚了,这里总结下:

1)核心是利用ffmpeg进行视频转换,我们自己并不写转换视频的代码,只是调用ffmpeg,它会帮我们完成视频的转换。ffmpeg支持的类型有:asx,asf,mpg,wmv,3gp,mp4,mov,avi,flv等,这些类型,可以利用ffmpeg进行直接转换。ffmpeg不支持的类型有:wmv9,rm,rmvb等,这些类型需要先用别的工具(mencoder)转换为avi(ffmpeg能解析的)格式。

2)了解Java如何调用外部程序,这会是最困难的,也会是坑最多的地方。

3)根据我们的需求设置ffmpeg的参数。(这类文章网上已经有很多了,我也不用复制黏贴了,见这里)

代码

上文中提到的那篇文章中的代码其实已经写的很友好了,基本拿来就能用,不过仍然存在许多问题,接下来会讲到,下面是文中的代码:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 import java.io.File;

2 import java.util.ArrayList;

3 import java.util.Calendar;

4 import java.util.List;

5

6 public class ConvertVideo {

7

8 private final static String PATH = "c:\\ffmpeg\\input\\c.mp4";

9

10 public static void main(String[] args) {

11 if (!checkfile(PATH)) {

12 System.out.println(PATH + " is not file");

13 return;

14 }

15 if (process()) {

16 System.out.println("ok");

17 }

18 }

19

20 private static boolean process() {

21 int type = checkContentType();

22 boolean status = false;

23 if (type == 0) {

24 System.out.println("直接将文件转为flv文件");

25 status = processFLV(PATH);// 直接将文件转为flv文件

26 } else if (type == 1) {

27 String avifilepath = processAVI(type);

28 if (avifilepath == null)

29 return false;// avi文件没有得到

30 status = processFLV(avifilepath);// 将avi转为flv

31 }

32 return status;

33 }

34

35 private static int checkContentType() {

36 String type = PATH.substring(PATH.lastIndexOf(".") + 1, PATH.length())

37 .toLowerCase();

38 // ffmpeg能解析的格式:(asx,asf,mpg,wmv,3gp,mp4,mov,avi,flv等)

39 if (type.equals("avi")) {

40 return 0;

41 } else if (type.equals("mpg")) {

42 return 0;

43 } else if (type.equals("wmv")) {

44 return 0;

45 } else if (type.equals("3gp")) {

46 return 0;

47 } else if (type.equals("mov")) {

48 return 0;

49 } else if (type.equals("mp4")) {

50 return 0;

51 } else if (type.equals("asf")) {

52 return 0;

53 } else if (type.equals("asx")) {

54 return 0;

55 } else if (type.equals("flv")) {

56 return 0;

57 }

58 // 对ffmpeg无法解析的文件格式(wmv9,rm,rmvb等),

59 // 可以先用别的工具(mencoder)转换为avi(ffmpeg能解析的)格式.

60 else if (type.equals("wmv9")) {

61 return 1;

62 } else if (type.equals("rm")) {

63 return 1;

64 } else if (type.equals("rmvb")) {

65 return 1;

66 }

67 return 9;

68 }

69

70 private static boolean checkfile(String path) {

71 File file = new File(path);

72 if (!file.isFile()) {

73 return false;

74 }

75 return true;

76 }

77

78 // 对ffmpeg无法解析的文件格式(wmv9,rm,rmvb等), 可以先用别的工具(mencoder)转换为avi(ffmpeg能解析的)格式.

79 private static String processAVI(int type) {

80 List commend = new ArrayList();

81 commend.add("c:\\ffmpeg\\mencoder");

82 commend.add(PATH);

83 commend.add("-oac");

84 commend.add("lavc");

85 commend.add("-lavcopts");

86 commend.add("acodec=mp3:abitrate=64");

87 commend.add("-ovc");

88 commend.add("xvid");

89 commend.add("-xvidencopts");

90 commend.add("bitrate=600");

91 commend.add("-of");

92 commend.add("avi");

93 commend.add("-o");

94 commend.add("c:\\ffmpeg\\output\\a.avi");

95 try {

96 ProcessBuilder builder = new ProcessBuilder();

97 builder.command(commend);

98 builder.start();

99 return "c:\\ffmpeg\\output\\a.avi";

100 } catch (Exception e) {

101 e.printStackTrace();

102 return null;

103 }

104 }

105

106 // ffmpeg能解析的格式:(asx,asf,mpg,wmv,3gp,mp4,mov,avi,flv等)

107 private static boolean processFLV(String oldfilepath) {

108

109 if (!checkfile(PATH)) {

110 System.out.println(oldfilepath + " is not file");

111 return false;

112 }

113

114 // 文件命名

115 Calendar c = Calendar.getInstance();

116 String savename = String.valueOf(c.getTimeInMillis())+ Math.round(Math.random() * 100000);

117 List commend = new ArrayList();

118 commend.add("c:\\ffmpeg\\ffmpeg");

119 commend.add("-i");

120 commend.add(oldfilepath);

121 commend.add("-ab");

122 commend.add("56");

123 commend.add("-ar");

124 commend.add("22050");

125 commend.add("-qscale");

126 commend.add("8");

127 commend.add("-r");

128 commend.add("15");

129 commend.add("-s");

130 commend.add("600x500");

131 commend.add("c:\\ffmpeg\\output\\a.flv");

132

133 try {

134 Runtime runtime = Runtime.getRuntime();

135 Process proce = null;

136 String cmd = "";

137 String cut = " c:\\ffmpeg\\ffmpeg.exe -i "

138 + oldfilepath

139 + " -y -f image2 -ss 8 -t 0.001 -s 600x500 c:\\ffmpeg\\output\\"

140 + "a.jpg";

141 String cutCmd = cmd + cut;

142 proce = runtime.exec(cutCmd);

143 ProcessBuilder builder = new ProcessBuilder(commend);

144 builder.command(commend);

145 builder.start();

146

147 return true;

148 } catch (Exception e) {

149 e.printStackTrace();

150 return false;

151 }

152 }

153 }

48304ba5e6f9fe08f3fa1abda7d326ab.png

接下来是我自己经过修改后的代码:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 import java.io.File;

2 import java.io.IOException;

3 import java.util.ArrayList;

4 import java.util.Calendar;

5 import java.util.List;

6 public class ConvertVideo {

7

8 private static String inputPath = "";

9

10 private static String outputPath = "";

11

12 private static String ffmpegPath = "";

13

14 public static void main(String args[]) throws IOException {

15

16 getPath();

17

18 if (!checkfile(inputPath)) {

19 System.out.println(inputPath + " is not file");

20 return;

21 }

22 if (process()) {

23 System.out.println("ok");

24 }

25 }

26

27 private static void getPath() { // 先获取当前项目路径,在获得源文件、目标文件、转换器的路径

28 File diretory = new File("");

29 try {

30 String currPath = diretory.getAbsolutePath();

31 inputPath = currPath + "\\input\\test.wmv";

32 outputPath = currPath + "\\output\\";

33 ffmpegPath = currPath + "\\ffmpeg\\";

34 System.out.println(currPath);

35 }

36 catch (Exception e) {

37 System.out.println("getPath出错");

38 }

39 }

40

41 private static boolean process() {

42 int type = checkContentType();

43 boolean status = false;

44 if (type == 0) {

45 System.out.println("直接转成flv格式");

46 status = processFLV(inputPath);// 直接转成flv格式

47 } else if (type == 1) {

48 String avifilepath = processAVI(type);

49 if (avifilepath == null)

50 return false;// 没有得到avi格式

51 status = processFLV(avifilepath);// 将avi转成flv格式

52 }

53 return status;

54 }

55

56 private static int checkContentType() {

57 String type = inputPath.substring(inputPath.lastIndexOf(".") + 1, inputPath.length())

58 .toLowerCase();

59 // ffmpeg能解析的格式:(asx,asf,mpg,wmv,3gp,mp4,mov,avi,flv等)

60 if (type.equals("avi")) {

61 return 0;

62 } else if (type.equals("mpg")) {

63 return 0;

64 } else if (type.equals("wmv")) {

65 return 0;

66 } else if (type.equals("3gp")) {

67 return 0;

68 } else if (type.equals("mov")) {

69 return 0;

70 } else if (type.equals("mp4")) {

71 return 0;

72 } else if (type.equals("asf")) {

73 return 0;

74 } else if (type.equals("asx")) {

75 return 0;

76 } else if (type.equals("flv")) {

77 return 0;

78 }

79 // 对ffmpeg无法解析的文件格式(wmv9,rm,rmvb等),

80 // 可以先用别的工具(mencoder)转换为avi(ffmpeg能解析的)格式.

81 else if (type.equals("wmv9")) {

82 return 1;

83 } else if (type.equals("rm")) {

84 return 1;

85 } else if (type.equals("rmvb")) {

86 return 1;

87 }

88 return 9;

89 }

90

91 private static boolean checkfile(String path) {

92 File file = new File(path);

93 if (!file.isFile()) {

94 return false;

95 }

96 return true;

97 }

98

99 // 对ffmpeg无法解析的文件格式(wmv9,rm,rmvb等), 可以先用别的工具(mencoder)转换为avi(ffmpeg能解析的)格式.

100 private static String processAVI(int type) {

101 List commend = new ArrayList();

102 commend.add(ffmpegPath + "mencoder");

103 commend.add(inputPath);

104 commend.add("-oac");

105 commend.add("lavc");

106 commend.add("-lavcopts");

107 commend.add("acodec=mp3:abitrate=64");

108 commend.add("-ovc");

109 commend.add("xvid");

110 commend.add("-xvidencopts");

111 commend.add("bitrate=600");

112 commend.add("-of");

113 commend.add("avi");

114 commend.add("-o");

115 commend.add(outputPath + "a.avi");

116 try {

117 ProcessBuilder builder = new ProcessBuilder();

118 Process process = builder.command(commend).redirectErrorStream(true).start();

119 new PrintStream(process.getInputStream());

120 new PrintStream(process.getErrorStream());

121 process.waitFor();

122 return outputPath + "a.avi";

123 } catch (Exception e) {

124 e.printStackTrace();

125 return null;

126 }

127 }

128

129 // ffmpeg能解析的格式:(asx,asf,mpg,wmv,3gp,mp4,mov,avi,flv等)

130 private static boolean processFLV(String oldfilepath) {

131

132 if (!checkfile(inputPath)) {

133 System.out.println(oldfilepath + " is not file");

134 return false;

135 }

136

137 List command = new ArrayList();

138 command.add(ffmpegPath + "ffmpeg");

139 command.add("-i");

140 command.add(oldfilepath);

141 command.add("-ab");

142 command.add("56");

143 command.add("-ar");

144 command.add("22050");

145 command.add("-qscale");

146 command.add("8");

147 command.add("-r");

148 command.add("15");

149 command.add("-s");

150 command.add("600x500");

151 command.add(outputPath + "a.flv");

152

153 try {

154

155 // 方案1

156 // Process videoProcess = Runtime.getRuntime().exec(ffmpegPath + "ffmpeg -i " + oldfilepath

157 // + " -ab 56 -ar 22050 -qscale 8 -r 15 -s 600x500 "

158 // + outputPath + "a.flv");

159

160 // 方案2

161 Process videoProcess = new ProcessBuilder(command).redirectErrorStream(true).start();

162

163 new PrintStream(videoProcess.getErrorStream()).start();

164

165 new PrintStream(videoProcess.getInputStream()).start();

166

167 videoProcess.waitFor();

168

169 return true;

170 } catch (Exception e) {

171 e.printStackTrace();

172 return false;

173 }

174 }

175 }

176

177 class PrintStream extends Thread

178 {

179 java.io.InputStream __is = null;

180 public PrintStream(java.io.InputStream is)

181 {

182 __is = is;

183 }

184

185 public void run()

186 {

187 try

188 {

189 while(this != null)

190 {

191 int _ch = __is.read();

192 if(_ch != -1)

193 System.out.print((char)_ch);

194 else break;

195 }

196 }

197 catch (Exception e)

198 {

199 e.printStackTrace();

200 }

201 }

202 }

48304ba5e6f9fe08f3fa1abda7d326ab.png

问题

原文的代码中有一个很大的问题,便是不知道视频转换到底什么时候结束。看原文中的这两处代码:

98行处

1 builder.command(commend);

2 builder.start();

3 return "c:\\ffmpeg\\output\\a.avi";

145行处

1 builder.start();

2

3 return true;

在进程开始之后,直接就返回结果了。要知道,这样的写法,是不会阻塞当前进程的,也就是说,当然程序返回的时候,转码程序(ffmpeg和mencoder)还在执行。如果需要mencoder进行中间转码,那原文中的写法会造成在avi文件还未转换完成时,程序就调用了ffmpeg进行转换。而对于最终的flv文件,我们也无法知道到底是什么时候转换好的,这显然是无法满足我们的业务需求的 。

解决方案

最先想到的办法自然就是阻塞当前进程(主进程),实例代码:

1 Process process = new ProcessBuilder(command).start();

2 process.waitFor();

3 return true;

采用这种的方案运行程序,发现视频转到十几秒的时候就不转了,但是程序还没返回,打开进程管理器一开,ffmpeg进程还在,内存还占着,但是CPU为0,如图:

6a385ad4f8a8bad5eb2945f8b4245427.png

当时不知道什么原因,在网上查了半天,才明白这是死锁了,但是不知道是什么原因造成的。当时就一直觉得死锁是waitFor()函数造成了,看来用它来判断子进程是否结果是不行了,所以又在网上查了半天其他判断子进程结束的办法(这里其实就已经走弯路了)。有人说可以用exitValue(),于是就有了下面的代码:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 Process process = new ProcessBuilder(command).start();

2 while (true) {

3 try {

4 if (process.exitValue() == 0)

5 break;

6 }

7 catch (IllegalThreadStateException e) {

8 continue;

9 }

10 }

11 return true;

48304ba5e6f9fe08f3fa1abda7d326ab.png

当子进程没有结束的时候,如果执行exitValue()就会抛出异常,我采用的办法是捕获这个异常然后不去理他,直到程序结束exitValue()返回0为止。但是,还是失败了,出现的情况和用waitFor()方式时的一模一样,我才觉得可能是另外的原因,在去google,发现可能是是由于JVM只提供有限缓存空间,当外部程序(子进程)的输出流超出了这个有限空间而父进程又不读出这些数据,子进程会被阻塞waitFor()永远都不会返回,就会造成死锁。

官方解释:

Because some native platforms only provide limited buffer size for standard input and output streams, failure to promptly write the input stream or read the output stream of the subprocess may cause the subprocess to block, and even deadlock.

知道问题了就要对症下药(其实当时我也不知道这是不是就是我遇到的问题,只能各种打散弹了,打中了算)。关于如何读出子进程的输出流,如何解决这个死锁,网上的办法都大同小异,写的比较好的可以看这个地址。

于是程序被改成这样:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 Process process = new ProcessBuilder(command).start();

2

3 new PrintStream(process.getInputStream()).start();

4

5 process.waitFor();

48304ba5e6f9fe08f3fa1abda7d326ab.png

PrintStream类如下:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 class PrintStream extends Thread

2 {

3 java.io.InputStream __is = null;

4 public PrintStream(java.io.InputStream is)

5 {

6 __is = is;

7 }

8

9 public void run()

10 {

11 try

12 {

13 while(this != null)

14 {

15 int _ch = __is.read();

16 if(_ch != -1)

17 System.out.print((char)_ch);

18 else break;

19 }

20 }

21 catch (Exception e)

22 {

23 e.printStackTrace();

24 }

25 }

26 }

48304ba5e6f9fe08f3fa1abda7d326ab.png

运行,发现还是不对,症状和之前的一模一样,我还以为是不是输出流太多了,一个线程读的不够快(好吧,真的很傻很天真,人被逼急了真的什么想法都有),于是我就再开了几个一模一样的线程,结果还是一样。

就在我快要放弃的时候,在百度知道上,看了个无关痛痒的例子,于是做了个小修改,在进程启动之前,重定向了下错误输出流,如下:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 Process videoProcess = new ProcessBuilder(command).redirectErrorStream(true).start();

2

3 new PrintStream(videoProcess.getInputStream()).start();

4

5 videoProcess.waitFor();

6

7 return true;

48304ba5e6f9fe08f3fa1abda7d326ab.png

然后,然后,然后就可以了,凌乱。。。

结论

其实有两种写法可以解决这个问题,这种事像我上面那样写,还有一种如下:

48304ba5e6f9fe08f3fa1abda7d326ab.png

1 Process videoProcess = new ProcessBuilder(command).start();

2

3 new PrintStream(videoProcess.getErrorStream()).start();

4

5 new PrintStream(videoProcess.getInputStream()).start();

6

7 videoProcess.waitFor();

8

9 return true;

48304ba5e6f9fe08f3fa1abda7d326ab.png

其实道理还是一样的,就是读出ffmpeg的输出流,避免ffmpeg的输出流塞满缓存造成死锁。但是不知道为什么,ffmpeg的输出信息是在错误输出流里面的,我看了下控制台打印结果,发现只是一些当前转换状态的信息,并没有错误,令人费解。

在Process类中,getInputStream用来获取进程的输出流,getOutputStream用来获取进程的输入流,getErrorStream用来获取进程的错误信息流。为了保险起见,在读出的时候,最好把子进程的输出流和错误流都读出来,这样可以保证清空缓存区。

其实,我深刻地感觉到,这些解决的问题的经历是标准的散弹式编程,打到哪算哪,以后引以为戒。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
你可以通过以下步骤来实现Java与RTSP、FFmpeg、HTML和Nginx的结合来实现视频实时播放的监控系统: 1. 首先,你需要使用Java来创建一个监控系统的后端服务。你可以使用Java的网络编程库来监听RTSP流并将其解码。可以使用开源的库,例如JRTSP或者Xuggler来处理RTSP流,并将其转换为可供播放的视频流。 2. 接下来,你需要使用FFmpeg处理视频流。FFmpeg是一个强大的多媒体处理工具,可以用于码、解码、编码等操作。你可以使用FFmpeg来解码RTSP流,并将其转换为HTML5支持的视频格式,例如HLS(HTTP Live Streaming)或者MPEG-DASH(Dynamic Adaptive Streaming over HTTP)。 3. 在前端方面,你可以使用HTML和JavaScript来创建一个简单的视频播放器。你可以使用HTML5的<video>标签来嵌入视频,并使用JavaScript来控制视频的播放、暂停等操作。你可以使用一些开源的视频播放器库,例如video.js或者plyr来简化开发过程。 4. 最后,你可以使用Nginx作为反向代理服务器来提供视频流的分发和缓存功能。Nginx可以将视频流从后端服务器发给前端浏览器,并且可以缓存视频文件以提高性能和可靠性。你可以配置Nginx来支持HLS或者MPEG-DASH协议,并且可以使用Nginx的HTTP模块来进行性能优化和安全加固。 综上所述,通过将Java、RTSP、FFmpeg、HTML和Nginx结合起来,你可以实现一个监控视频的实时播放系统。这个系统可以从RTSP流中提取视频数据,经过FFmpeg处理后,通过HTML和JavaScript在浏览器中进行播放,并且可以使用Nginx提供性能优化和缓存支持。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值