运用ffmpeg生成MP4文件

朱雀 2022-09-23 15:42 307阅读 0赞

生成的MP4文件，用播放器看见的视频如下，同时你可以听到一种呼叫的音频声音

![1344175541_3632.JPG][]

生成的MP4文件音频为(aac)、视频为H264  
由于生成的H264需要依赖x264开源库【因为需要将普通的原始数据编码成H264，而ffmpeg默认是按x264进行编码】，在生产x264库过程中，一般我们默认生成静态库即可。

编译ffmpeg并安装

代码如下：

**\[cpp\]**  [view plain][]   [copy][view plain]

1.  \#include <stdlib.h>  
2.  \#include <stdio.h>  
3.  \#include <string.h>  
4.  \#include <math.h>  
5.    
6.  \#include "libavutil/mathematics.h"  
7.  \#include "libavformat/avformat.h"  
8.  \#include "libswscale/swscale.h"  
9.    
10. \#undef exit  
11.   
12. /\* 5 seconds stream duration \*/  
13. \#define STREAM\_DURATION   200.0  
14. \#define STREAM\_FRAME\_RATE 25 /\* 25 images/s \*/  
15. \#define STREAM\_NB\_FRAMES  ((int)(STREAM\_DURATION \* STREAM\_FRAME\_RATE))  
16. \#define STREAM\_PIX\_FMT PIX\_FMT\_YUV420P /\* default pix\_fmt \*/  
17.   
18. **static** **int** sws\_flags = SWS\_BICUBIC;  
19.   
20. /\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*/  
21. /\* audio output \*/  
22.   
23. **static** **float** t, tincr, tincr2;  
24. **static** int16\_t \*samples;  
25. **static** uint8\_t \*audio\_outbuf;  
26. **static** **int** audio\_outbuf\_size;  
27. **static** **int** audio\_input\_frame\_size;  
28.   
29. /\* 
30.  \* add an audio output stream 
31.  \*/  
32. **static** AVStream \*add\_audio\_stream(AVFormatContext \*oc, **enum** CodecID codec\_id)  
33. \{  
34.     AVCodecContext \*c;  
35.     AVStream \*st;  
36.   
37.     st = avformat\_new\_stream(oc, NULL);  
38.     **if** (!st) \{  
39.         fprintf(stderr, "Could not alloc stream\\n");  
40.         exit(1);  
41.     \}  
42.     st->id = 1;  
43.   
44.     c = st->codec;  
45.     c->codec\_id = codec\_id;  
46.     c->codec\_type = AVMEDIA\_TYPE\_AUDIO;  
47.   
48.     /\* put sample parameters \*/  
49.     c->sample\_fmt = AV\_SAMPLE\_FMT\_S16;  
50.     c->bit\_rate = 64000;  
51.     c->sample\_rate = 44100;  
52.     c->channels = 2;  
53.   
54.     // some formats want stream headers to be separate  
55.     **if** (oc->oformat->flags & AVFMT\_GLOBALHEADER)  
56.         c->flags |= CODEC\_FLAG\_GLOBAL\_HEADER;  
57.   
58.     **return** st;  
59. \}  
60.   
61. **static** **void** open\_audio(AVFormatContext \*oc, AVStream \*st)  
62. \{  
63.     AVCodecContext \*c;  
64.     AVCodec \*codec;  
65.   
66.     c = st->codec;  
67.   
68.     /\* find the audio encoder \*/  
69.     codec = avcodec\_find\_encoder(c->codec\_id);  
70.     **if** (!codec) \{  
71.         fprintf(stderr, "codec not found\\n");  
72.         exit(1);  
73.     \}  
74.   
75.     /\* open it \*/  
76.     **if** (avcodec\_open(c, codec) < 0) \{  
77.         fprintf(stderr, "could not open codec\\n");  
78.         exit(1);  
79.     \}  
80.   
81.     /\* init signal generator \*/  
82.     t = 0;  
83.     tincr = 2 \* M\_PI \* 110.0 / c->sample\_rate;  
84.     /\* increment frequency by 110 Hz per second \*/  
85.     tincr2 = 2 \* M\_PI \* 110.0 / c->sample\_rate / c->sample\_rate;  
86.   
87.     audio\_outbuf\_size = 10000;  
88.     audio\_outbuf = av\_malloc(audio\_outbuf\_size);  
89.   
90.   
91.     **if** (c->frame\_size <= 1) \{  
92.         audio\_input\_frame\_size = audio\_outbuf\_size / c->channels;  
93.         **switch**(st->codec->codec\_id) \{  
94.         **case** CODEC\_ID\_PCM\_S16LE:  
95.         **case** CODEC\_ID\_PCM\_S16BE:  
96.         **case** CODEC\_ID\_PCM\_U16LE:  
97.         **case** CODEC\_ID\_PCM\_U16BE:  
98.             audio\_input\_frame\_size >>= 1;  
99.             **break**;  
100.         **default**:  
101.             **break**;  
102.         \}  
103.     \} **else** \{  
104.         audio\_input\_frame\_size = c->frame\_size;  
105.     \}  
106.     samples = av\_malloc(audio\_input\_frame\_size \* 2 \* c->channels);  
107. \}  
108.   
109.   
110. **static** **void** get\_audio\_frame(int16\_t \*samples, **int** frame\_size, **int** nb\_channels)  
111. \{  
112.     **int** j, i, v;  
113.     int16\_t \*q;  
114.   
115.     q = samples;  
116.     **for** (j = 0; j < frame\_size; j++) \{  
117.         v = (**int**)(sin(t) \* 10000);  
118.         **for**(i = 0; i < nb\_channels; i++)  
119.             \*q++ = v;  
120.         t += tincr;  
121.         tincr += tincr2;  
122.     \}  
123. \}  
124.   
125. **static** **void** write\_audio\_frame(AVFormatContext \*oc, AVStream \*st)  
126. \{  
127.     AVCodecContext \*c;  
128.     AVPacket pkt;  
129.     av\_init\_packet(&pkt);  
130.   
131.     c = st->codec;  
132.   
133.     get\_audio\_frame(samples, audio\_input\_frame\_size, c->channels);  
134.   
135.     pkt.size = avcodec\_encode\_audio(c, audio\_outbuf, audio\_outbuf\_size, samples);  
136.   
137.     **if** (c->coded\_frame && c->coded\_frame->pts != AV\_NOPTS\_VALUE)  
138.         pkt.pts= av\_rescale\_q(c->coded\_frame->pts, c->time\_base, st->time\_base);  
139.     pkt.flags |= AV\_PKT\_FLAG\_KEY;  
140.     pkt.stream\_index = st->index;  
141.     pkt.data = audio\_outbuf;  
142.   
143.     /\* write the compressed frame in the media file \*/  
144.     **if** (av\_interleaved\_write\_frame(oc, &pkt) != 0) \{  
145.         fprintf(stderr, "Error while writing audio frame\\n");  
146.         exit(1);  
147.     \}  
148. \}  
149.   
150. **static** **void** close\_audio(AVFormatContext \*oc, AVStream \*st)  
151. \{  
152.     avcodec\_close(st->codec);  
153.   
154.     av\_free(samples);  
155.     av\_free(audio\_outbuf);  
156. \}  
157.   
158. /\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*/  
159. /\* video output \*/  
160.   
161. **static** AVFrame \*picture, \*tmp\_picture;  
162. **static** uint8\_t \*video\_outbuf;  
163. **static** **int** frame\_count, video\_outbuf\_size;  
164.   
165. /\* add a video output stream \*/  
166. **static** AVStream \*add\_video\_stream(AVFormatContext \*oc, **enum** CodecID codec\_id)  
167. \{  
168.     AVCodecContext \*c;  
169.     AVStream \*st;  
170.     AVCodec \*codec;  
171.   
172.     st = avformat\_new\_stream(oc, NULL);  
173.     **if** (!st) \{  
174.         fprintf(stderr, "Could not alloc stream\\n");  
175.         exit(1);  
176.     \}  
177.   
178.     c = st->codec;  
179.   
180.     /\* find the video encoder \*/  
181.     codec = avcodec\_find\_encoder(codec\_id);  
182.     **if** (!codec) \{  
183.         fprintf(stderr, "codec not found\\n");  
184.         exit(1);  
185.     \}  
186.     avcodec\_get\_context\_defaults3(c, codec);  
187.   
188.     c->codec\_id = codec\_id;  
189.   
190.     /\* put sample parameters \*/  
191.     c->bit\_rate = 400000;  
192.     /\* resolution must be a multiple of two \*/  
193.     c->width = 352;  
194.     c->height = 288;  
195.     /\* time base: this is the fundamental unit of time (in seconds) in terms 
196.        of which frame timestamps are represented. for fixed-fps content, 
197.        timebase should be 1/framerate and timestamp increments should be 
198.        identically 1. \*/  
199.     c->time\_base.den = STREAM\_FRAME\_RATE;  
200.     c->time\_base.num = 1;  
201.     c->gop\_size = 12; /\* emit one intra frame every twelve frames at most \*/  
202.     c->pix\_fmt = STREAM\_PIX\_FMT;  
203.     **if** (c->codec\_id == CODEC\_ID\_MPEG2VIDEO) \{  
204.         /\* just for testing, we also add B frames \*/  
205.         c->max\_b\_frames = 2;  
206.     \}  
207.     **if** (c->codec\_id == CODEC\_ID\_MPEG1VIDEO)\{  
208.         /\* Needed to avoid using macroblocks in which some coeffs overflow. 
209.            This does not happen with normal video, it just happens here as 
210.            the motion of the chroma plane does not match the luma plane. \*/  
211.         c->mb\_decision=2;  
212.     \}  
213.     // some formats want stream headers to be separate  
214.     **if** (oc->oformat->flags & AVFMT\_GLOBALHEADER)  
215.         c->flags |= CODEC\_FLAG\_GLOBAL\_HEADER;  
216.   
217.     **return** st;  
218. \}  
219.   
220. **static** AVFrame \*alloc\_picture(**enum** PixelFormat pix\_fmt, **int** width, **int** height)  
221. \{  
222.     AVFrame \*picture;  
223.     uint8\_t \*picture\_buf;  
224.     **int** size;  
225.   
226.     picture = avcodec\_alloc\_frame();  
227.     **if** (!picture)  
228.         **return** NULL;  
229.     size = avpicture\_get\_size(pix\_fmt, width, height);  
230.     picture\_buf = av\_malloc(size);  
231.     **if** (!picture\_buf) \{  
232.         av\_free(picture);  
233.         **return** NULL;  
234.     \}  
235.     avpicture\_fill((AVPicture \*)picture, picture\_buf,  
236.                    pix\_fmt, width, height);  
237.     **return** picture;  
238. \}  
239.   
240. **static** **void** open\_video(AVFormatContext \*oc, AVStream \*st)  
241. \{  
242.     AVCodec \*codec;  
243.     AVCodecContext \*c;  
244.   
245.     c = st->codec;  
246.   
247.     /\* find the video encoder \*/  
248.     codec = avcodec\_find\_encoder(c->codec\_id);  
249.     **if** (!codec) \{  
250.         fprintf(stderr, "codec not found\\n");  
251.         exit(1);  
252.     \}  
253.   
254.     /\* open the codec \*/  
255.     **if** (avcodec\_open(c, codec) < 0) \{  
256.         fprintf(stderr, "could not open codec\\n");  
257.         exit(1);  
258.     \}  
259.   
260.     video\_outbuf = NULL;  
261.     **if** (!(oc->oformat->flags & AVFMT\_RAWPICTURE)) \{  
262.         video\_outbuf\_size = 200000;  
263.         video\_outbuf = av\_malloc(video\_outbuf\_size);  
264.     \}  
265.   
266.     /\* allocate the encoded raw picture \*/  
267.     picture = alloc\_picture(c->pix\_fmt, c->width, c->height);  
268.     **if** (!picture) \{  
269.         fprintf(stderr, "Could not allocate picture\\n");  
270.         exit(1);  
271.     \}  
272.   
273.     /\* if the output format is not YUV420P, then a temporary YUV420P 
274.        picture is needed too. It is then converted to the required 
275.        output format \*/  
276.     tmp\_picture = NULL;  
277.     **if** (c->pix\_fmt != PIX\_FMT\_YUV420P) \{  
278.         tmp\_picture = alloc\_picture(PIX\_FMT\_YUV420P, c->width, c->height);  
279.         **if** (!tmp\_picture) \{  
280.             fprintf(stderr, "Could not allocate temporary picture\\n");  
281.             exit(1);  
282.         \}  
283.     \}  
284. \}  
285.   
286. /\* prepare a dummy image \*/  
287. **static** **void** fill\_yuv\_image(AVFrame \*pict, **int** frame\_index, **int** width, **int** height)  
288. \{  
289.     **int** x, y, i;  
290.   
291.     i = frame\_index;  
292.   
293.     /\* Y \*/  
294.     **for** (y = 0; y < height; y++) \{  
295.         **for** (x = 0; x < width; x++) \{  
296.             pict->data\[0\]\[y \* pict->linesize\[0\] + x\] = x + y + i \* 3;  
297.         \}  
298.     \}  
299.   
300.     /\* Cb and Cr \*/  
301.     **for** (y = 0; y < height/2; y++) \{  
302.         **for** (x = 0; x < width/2; x++) \{  
303.             pict->data\[1\]\[y \* pict->linesize\[1\] + x\] = 128 + y + i \* 2;  
304.             pict->data\[2\]\[y \* pict->linesize\[2\] + x\] = 64 + x + i \* 5;  
305.         \}  
306.     \}  
307. \}  
308.   
309. **static** **void** write\_video\_frame(AVFormatContext \*oc, AVStream \*st)  
310. \{  
311.     **int** out\_size, ret;  
312.     AVCodecContext \*c;  
313.     **static** **struct** SwsContext \*img\_convert\_ctx;  
314.   
315.     c = st->codec;  
316.   
317.     **if** (frame\_count >= STREAM\_NB\_FRAMES) \{  
318.         /\* no more frame to compress. The codec has a latency of a few 
319.            frames if using B frames, so we get the last frames by 
320.            passing the same picture again \*/  
321.     \} **else** \{  
322.         **if** (c->pix\_fmt != PIX\_FMT\_YUV420P) \{  
323.             /\* as we only generate a YUV420P picture, we must convert it 
324.                to the codec pixel format if needed \*/  
325.             **if** (img\_convert\_ctx == NULL) \{  
326.                 img\_convert\_ctx = sws\_getContext(c->width, c->height,  
327.                                                  PIX\_FMT\_YUV420P,  
328.                                                  c->width, c->height,  
329.                                                  c->pix\_fmt,  
330.                                                  sws\_flags, NULL, NULL, NULL);  
331.                 **if** (img\_convert\_ctx == NULL) \{  
332.                     fprintf(stderr, "Cannot initialize the conversion context\\n");  
333.                     exit(1);  
334.                 \}  
335.             \}  
336.             fill\_yuv\_image(tmp\_picture, frame\_count, c->width, c->height);  
337.             sws\_scale(img\_convert\_ctx, tmp\_picture->data, tmp\_picture->linesize,  
338.                       0, c->height, picture->data, picture->linesize);  
339.         \} **else** \{  
340.             fill\_yuv\_image(picture, frame\_count, c->width, c->height);  
341.         \}  
342.     \}  
343.   
344.   
345.     **if** (oc->oformat->flags & AVFMT\_RAWPICTURE) \{  
346.         /\* raw video case. The API will change slightly in the near 
347.            future for that. \*/  
348.         AVPacket pkt;  
349.         av\_init\_packet(&pkt);  
350.   
351.         pkt.flags |= AV\_PKT\_FLAG\_KEY;  
352.         pkt.stream\_index = st->index;  
353.         pkt.data = (uint8\_t \*)picture;  
354.         pkt.size = **sizeof**(AVPicture);  
355.   
356.         ret = av\_interleaved\_write\_frame(oc, &pkt);  
357.     \} **else** \{  
358.         /\* encode the image \*/  
359.         out\_size = avcodec\_encode\_video(c, video\_outbuf, video\_outbuf\_size, picture);  
360.         /\* if zero size, it means the image was buffered \*/  
361.         **if** (out\_size > 0) \{  
362.             AVPacket pkt;  
363.             av\_init\_packet(&pkt);  
364.   
365.             **if** (c->coded\_frame->pts != AV\_NOPTS\_VALUE)  
366.                 pkt.pts= av\_rescale\_q(c->coded\_frame->pts, c->time\_base, st->time\_base);  
367.             **if**(c->coded\_frame->key\_frame)  
368.                 pkt.flags |= AV\_PKT\_FLAG\_KEY;  
369.             pkt.stream\_index = st->index;  
370.             pkt.data = video\_outbuf;  
371.             pkt.size = out\_size;  
372.   
373.             /\* write the compressed frame in the media file \*/  
374.             ret = av\_interleaved\_write\_frame(oc, &pkt);  
375.         \} **else** \{  
376.             ret = 0;  
377.         \}  
378.     \}  
379.     **if** (ret != 0) \{  
380.         fprintf(stderr, "Error while writing video frame\\n");  
381.         exit(1);  
382.     \}  
383.     frame\_count++;  
384. \}  
385.   
386. **static** **void** close\_video(AVFormatContext \*oc, AVStream \*st)  
387. \{  
388.     avcodec\_close(st->codec);  
389.     av\_free(picture->data\[0\]);  
390.     av\_free(picture);  
391.     **if** (tmp\_picture) \{  
392.         av\_free(tmp\_picture->data\[0\]);  
393.         av\_free(tmp\_picture);  
394.     \}  
395.     av\_free(video\_outbuf);  
396. \}  
397.   
398. /\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*\*/  
399. /\* media file output \*/  
400.   
401. **int** main(**int** argc, **char** \*\*argv)  
402. \{  
403.     **const** **char** \*filename;  
404.     AVOutputFormat \*fmt;  
405.     AVFormatContext \*oc;  
406.     AVStream \*audio\_st, \*video\_st;  
407.     **double** audio\_pts, video\_pts;  
408.     **int** i;  
409.   
410.     /\* initialize libavcodec, and register all codecs and formats \*/  
411.     av\_register\_all();  
412.   
413.     **if** (argc != 2) \{  
414.         printf("usage: %s output\_file\\n"  
415.                "API example program to output a media file with libavformat.\\n"  
416.                "The output format is automatically guessed according to the file extension.\\n"  
417.                "Raw images can also be output by using '%%d' in the filename\\n"  
418.                "\\n", argv\[0\]);  
419.         **return** 1;  
420.     \}  
421.   
422.     filename = argv\[1\];  
423.   
424.     /\* allocate the output media context \*/  
425.     avformat\_alloc\_output\_context2(&oc, NULL, NULL, filename);  
426.     **if** (!oc) \{  
427.         printf("Could not deduce output format from file extension: using MPEG.\\n");  
428.         avformat\_alloc\_output\_context2(&oc, NULL, "mpeg", filename);  
429.     \}  
430.     **if** (!oc) \{  
431.         **return** 1;  
432.     \}  
433.     fmt = oc->oformat;  
434.   
435.     /\* add the audio and video streams using the default format codecs 
436.        and initialize the codecs \*/  
437.     video\_st = NULL;  
438.     audio\_st = NULL;  
439.     **if** (fmt->video\_codec != CODEC\_ID\_NONE) \{  
440.         video\_st = add\_video\_stream(oc, fmt->video\_codec);  
441.     \}  
442.     **if** (fmt->audio\_codec != CODEC\_ID\_NONE) \{  
443.         audio\_st = add\_audio\_stream(oc, fmt->audio\_codec);  
444.     \}  
445.   
446.     av\_dump\_format(oc, 0, filename, 1);  
447.   
448.     /\* now that all the parameters are set, we can open the audio and 
449.        video codecs and allocate the necessary encode buffers \*/  
450.     **if** (video\_st)  
451.         open\_video(oc, video\_st);  
452.     **if** (audio\_st)  
453.         open\_audio(oc, audio\_st);  
454.   
455.     /\* open the output file, if needed \*/  
456.     **if** (!(fmt->flags & AVFMT\_NOFILE)) \{  
457.         **if** (avio\_open(&oc->pb, filename, AVIO\_FLAG\_WRITE) < 0) \{  
458.             fprintf(stderr, "Could not open '%s'\\n", filename);  
459.             **return** 1;  
460.         \}  
461.     \}  
462.   
463.     /\* write the stream header, if any \*/  
464.     av\_write\_header(oc);  
465.     picture->pts = 0;  
466.     **for**(;;) \{  
467.         /\* compute current audio and video time \*/  
468.         **if** (audio\_st)  
469.             audio\_pts = (**double**)audio\_st->pts.val \* audio\_st->time\_base.num / audio\_st->time\_base.den;  
470.         **else**  
471.             audio\_pts = 0.0;  
472.   
473.         **if** (video\_st)  
474.             video\_pts = (**double**)video\_st->pts.val \* video\_st->time\_base.num / video\_st->time\_base.den;  
475.         **else**  
476.             video\_pts = 0.0;  
477.   
478.         **if** ((!audio\_st || audio\_pts >= STREAM\_DURATION) &&  
479.             (!video\_st || video\_pts >= STREAM\_DURATION))  
480.             **break**;  
481.   
482.         /\* write interleaved audio and video frames \*/  
483.         **if** (!video\_st || (video\_st && audio\_st && audio\_pts < video\_pts)) \{  
484.             write\_audio\_frame(oc, audio\_st);  
485.         \} **else** \{  
486.             write\_video\_frame(oc, video\_st);  
487.             picture->pts++;  
488.         \}  
489.     \}  
490.   
491.   
492.     av\_write\_trailer(oc);  
493.   
494.     /\* close each codec \*/  
495.     **if** (video\_st)  
496.         close\_video(oc, video\_st);  
497.     **if** (audio\_st)  
498.         close\_audio(oc, audio\_st);  
499.   
500.     /\* free the streams \*/  
501.     **for**(i = 0; i < oc->nb\_streams; i++) \{  
502.         av\_freep(&oc->streams\[i\]->codec);  
503.         av\_freep(&oc->streams\[i\]);  
504.     \}  
505.   
506.     **if** (!(fmt->flags & AVFMT\_NOFILE)) \{  
507.         /\* close the output file \*/  
508.         avio\_close(oc->pb);  
509.     \}  
510.   
511.     /\* free the stream \*/  
512.     av\_free(oc);  
513.   
514.     **return** 0;  
515. \}  
516.

[1344175541_3632.JPG]: https://img-my.csdn.net/uploads/201208/05/1344175541_3632.JPG
[view plain]: http://blog.csdn.net/jefry_xdz/article/details/7833247#