ios – 在视频文件上应用过滤器

我想在视频播放时对视频文件应用过滤器(效果).

我正在使用@BradLarson(伟大的)GPUImage框架来做到这一点,这里的问题是框架不支持播放视频时的音频播放.

所以我有两个选择：

1)深入GPUImage代码并改变GPUImageMovie,因此它也将处理音频缓冲区.这需要知道同步音频和视频帧,不幸的是我没有.我看到一些黑客试图用AVAudioPlayer播放音频,但是有很多同步问题.

2)使用CoreImage框架而不是GPUImage.

所以我想看看使用本机iOS CoreImage和CIFilter来完成这个工作的第二个选项.

问题是,我没有找到任何关于CIFilter如何执行此操作的示例,如何对文件的视频应用过滤器？

我必须使用AVAssetReader来读取视频并处理每个帧吗？如果是这样,我回到了我第一个同步音频和音频的问题.视频.
还是有办法直接在视频或预览图层上应用过滤器链？

欣赏任何帮助:)

解决方法

仅使用您正在使用的GPUImage框架…
那是迄今为止最好的视频过滤器框架.通过框架 https://github.com/BradLarson/GPUImage的文档滚动页面,您将找到可用的过滤器的详细信息…

这个过滤器被应用在视频上并写入你必须使用GPUImageMovieWriter类的视频…它自动处理音频..

你不必维护它…使用GPUImageMovieWriter的shouldPassThroughAudio属性,它将自己管理音频.

使用本教程帮助http://www.sunsetlakesoftware.com/2012/02/12/introducing-gpuimage-framework

这里是我使用GPUImage框架裁剪视频的代码,编辑后存储不被删除.

NSURL * videoUrl = [selectedAsset defaultRepresentation] .url;

GPUImageMovie *movieUrl = [[GPUImageMovie alloc] initWithURL:videoUrl];

self.cropFilter = [[GPUImageCropFilter alloc] initWithCropRegion:videoArea];
movieUrl.runBenchmark = YES;
movieUrl.playAtActualSpeed = YES;
[movieUrl addTarget:self.cropFilter];

//Setting path for temporary storing the video in document directory
NSArray *paths = NSSearchPathForDirectoriesInDomains(NSDocumentDirectory,NSUserDomainMask,YES);
NSString *documentsDirectory = [paths objectAtIndex:0];
NSString *myPathDocs =  [documentsDirectory stringByAppendingPathComponent:
                         [NSString stringWithFormat:@"CroppedVideo-%d.mov",arc4random() % 1000]];
NSURL *movieURL = [NSURL fileURLWithPath:myPathDocs];

AVURLAsset *asset = [AVURLAsset URLAssetWithURL:videoUrl options:nil];
AVAssetTrack *videoAssetTrack = [[asset tracksWithMediaType:AVMediaTypeVideo] objectAtIndex:0];
CGAffineTransform videoTransform = videoAssetTrack.preferredTransform;

movieWriter = [[GPUImageMovieWriter alloc] initWithMovieURL:movieURL size:CGSizeMake(videoAssetTrack.naturalSize.width,videoAssetTrack.naturalSize.height)];

[_cropFilter addTarget:movieWriter];
movieWriter.shouldPassthroughAudio = YES;

movieUrl.audioEncodingTarget = movieWriter;

[movieUrl enableSynchronizedEncodingUsingMovieWriter:movieWriter];

[self.movieWriter startRecordingInOrientation:videoTransform];
[self.movieWriter startRecording];

[movieUrl startProcessing];
__block BOOL completeRec = NO;
__unsafe_unretained typeof(self) weakSelf = self;
[self.movieWriter setCompletionBlock:^{

    [weakSelf.cropFilter removeTarget:weakSelf.movieWriter];
    [weakSelf.movieWriter finishRecording];
    [movieUrl removeTarget:weakSelf.cropFilter];
    if (!completeRec)
    {
        [weakSelf videoCropDoneUrl:movieURL];
        completeRec = YES;
    }
}];