HarmonyOS 鸿蒙Next中如何实现将图片转为视频

HarmonyOS 鸿蒙Next中如何实现将图片转为视频 是否有可直接使用的的API可支持指定图片生成视频？

或者是编解码相关的API，相关的使用方式介绍。

5 回复

目前@sj/ffmpeg已经适配了鸿蒙，可以使用三方库@sjffmpeg将图片合成视频

【背景知识】

  • FFmpeg是一套用于处理音视频内容及相关元数据的跨平台的开源工具库，提供了录制、转换、以及后期处理的完整解决方案，可以实现多种视频格式之间的互相转换，并且具有非常高的质量和可移植性。可划分为以下功能模块：
模块 介绍 常用命令
ffmpeg FFmpeg源代码编译后生成的一个可执行程序，可以作为命令工具集使用。主要用于音视频数据的解封装、编解码 ffmpeg -i output1.mp4 -vcodec flv -b:v 200k -r 15 -an output2.flv // 进行转码操作，可以通过设置AVCodec与AVFormat的操作参数来进行封装与编码的操作。
ffprobe FFmpeg编译后生成的可执行程序，可以从媒体文件或者媒体流中获得相应的媒体信息。用于分析媒体容器中的音频和视频是什么编码格式媒体的总时长、复合码率等信息 ffprobe -show_packets output.flv // 查看多媒体数据包信息
ffserver 用于音视频服务器搭建
ffplay 提供了音视频显示和播放相关的图像信息、音频的波形信息等。使用FFmpeg的AVCodec与AVFormat，可以播放各种媒体文件或者流 ffplay -window_title "Hello, world" output.flv // 指定播放视频的标题
  • @sj/ffmpeg是一个OpenHarmony开源的音视频处理三方库，目前移植了fftools/ffmpeg和fftools/ffprobe，可以在App中执行ffmpeg及ffprobe相关的脚本命令，支持并发。

【解决方案】

更多关于HarmonyOS 鸿蒙Next中如何实现将图片转为视频的实战系列教程也可以访问 https://www.itying.com/category-93-b0.html


感谢回复，

基本信息

  • 姓名: 张三
  • 年龄: 28
  • 职位: 软件工程师

技能

  • Python
  • Java
  • C++

项目经验

  • 项目一
    • 描述: 开发了一个自动化测试工具
    • 技术: Python, Selenium
  • 项目二
    • 描述: 参与开发公司内部管理系统
    • 技术: Java, Spring Boot

感觉得靠大模型实现：

  • 将图片传给后端，
  • 后端去调相关大模型的api生成，
  • 最后将视频url返回给客户端。

在HarmonyOS Next中，可以使用媒体服务(mediaLibrary)和AVRecorder实现图片转视频。具体步骤：

  1. 创建AVRecorder实例并配置视频参数：
let avRecorder = await media.createAVRecorder();
avRecorder.prepare({
  fileFormat: media.ContainerFormatType.CFT_MPEG_4,
  videoBitrate: 1000000,
  videoCodec: media.CodecMimeType.VIDEO_MPEG4,
  videoFrameWidth: 1080,
  videoFrameHeight: 1920,
  videoFrameRate: 30
});
  1. 将图片序列编码为视频帧：
avRecorder.start();
for (let image of imageList) {
  let frame = await image.getPixelMap();
  await avRecorder.appendVideoFrame(frame, timestamp);
  timestamp += frameInterval;
}
avRecorder.stop();
avRecorder.release();

需要获取媒体读写权限，图片需先转为PixelMap对象。

在HarmonyOS Next中，可以通过媒体编解码能力实现图片转视频功能。主要使用以下API：

  1. 使用AVRecorder进行视频录制：
  • 创建AVRecorder实例并配置视频输出参数
  • 通过appendImageBuffer()方法逐帧添加图片数据
  • 最终生成MP4等格式的视频文件
  1. 使用Image和PixelMap处理图片：
  • 通过ImageSource创建PixelMap对象
  • 将图片数据转换为视频帧所需的YUV/RGB格式

关键代码片段示例：

// 创建AVRecorder
let avRecorder = await media.createAVRecorder();
let config = {
  videoSourceType: media.VideoSourceType.VIDEO_SOURCE_TYPE_SURFACE_YUV,
  profile: {
    fileFormat: media.ContainerFormatType.CFT_MPEG_4,
    videoBitrate: 2000000,
    videoCodec: media.CodecMimeType.VIDEO_MPEG4,
    videoFrameWidth: 640,
    videoFrameHeight: 480,
    videoFrameRate: 30
  }
};
await avRecorder.prepare(config);

// 添加图片帧
let pixelMap = ... // 获取图片PixelMap
let imageBuffer = await pixelMap.getImageBuffer();
await avRecorder.appendImageBuffer(imageBuffer);

需要注意图片尺寸需与视频配置一致，建议使用后台任务处理耗时操作。

回到顶部