腾讯特效SDK美颜特效小程序拍摄实践_音视频解决方案_同尘科技

腾讯特效SDK 1年前 (2023-08-29) 浏览 67

准备工作

小程序开发入门请参见 微信小程序文档。请阅读 Web 美颜特效 SDK 接入指南,熟悉 SDK 基本用法。

开始使用

步骤1:小程序后台配置域名白名单

SDK 内部会请求后台进行鉴权和资源加载,因此小程序创建完后,需要在小程序后台配置域名白名单。1. 打开 小程序后台,进入 开发 > 开发管理 > 开发设置 > 服务器域名。2. 单击修改,配置以下域名并保存。请求域名:

https://webar.qcloud.com;https://webar-static.tencent-cloud.com;https://aegis.qq.com;以及鉴权签名接口(get-ar-sign)的地址

downloadFile 域名:

https://webar-static.tencent-cloud.com

步骤2:安装并构建 npm

小程序 npm 相关请参见 小程序使用 npm。1. 安装:

npm install tencentcloud-webar

2. 构建:
打开小程序开发者工具,顶部菜单选择 工具 > 构建 npm。3. 在 app.json 中配置 workers 路径:

"workers": "miniprogram_npm/tencentcloud-webar/worker"

步骤3:引入文件

// 0.3.0之前版本引用方式(1个文件)// import "../../miniprogram_npm/tencentcloud-webar/lib.js";// 0.3.0及之后版本引用方式(2个文件 + 按需初始化3d模块)import '../../miniprogram_npm/tencentcloud-webar/lib.js';import '../../miniprogram_npm/tencentcloud-webar/core.js';// 按需初始化3d插件,如果不需要3d则可以不引用import '../../miniprogram_npm/tencentcloud-webar/lib-3d.js';import { plugin3d } from '../../miniprogram_npm/tencentcloud-webar/plugin-3d'// 导入 ArSdkimport { ArSdk } from "../../miniprogram_npm/tencentcloud-webar/index.js";

注意小程序有单文件不超过 500kb 的限制,因此 SDK 分为两个 js 文件提供。0.3.0版本之后,对 SDK 进行了进一步的拆分,新增3D支持,针对3D模块提供按需加载方式,导入前请确认当前使用的 SDK 版本信息,选择对应的导入方式。

步骤4:初始化 SDK

注意小程序初始化 SDK 前须在控制台配置小程序 APPID,请参见 快速上手。需在页面中插入 camera 标签来打开相机,然后设置 camera 参数,参数配置详情请参见 接入指南。小程序不支持 getOutput,需要自行传入一个在屏的 webgl canvas,SDK 直接输出画面到此 canvas 上。示例代码如下:

// wxml//打开相机,通过position使相机不展示//sdk 将处理完的画面实时输出到此 canvas 上//拍照将 ImageData 对象绘制到此 canvas 上// js/** ----- 鉴权配置 ----- */
/** * 腾讯云账号 APPID * * 进入[腾讯云账号中心](https://console.cloud.tencent.com/developer) 即可查看 APPID */const APPID = ''; // 此处请填写您自己的参数
/** * Web LicenseKey * * 登录音视频终端 SDK 控制台的[Web License 管理](https://console.cloud.tencent.com/vcube/web),创建项目即可获得 LicenseKey */const LICENSE_KEY = ''; // 此处请填写您自己的参数
/** * 计算签名用的密钥 Token * * 注意:此处仅用于 DEMO 调试,正式环境中请将 Token 保管在服务端,签名方法迁移到服务端实现,通过接口提供,前端调用拉取签名,参考 * [签名方法](https://cloud.tencent.com/document/product/616/71370#.E7.AD.BE.E5.90.8D.E6.96.B9.E6.B3.95) */const token = ''; // 此处请填写您自己的参数
Component({ data: { makeupList: [], stickerList: [], filterList: [], recording: false }, methods: { async getCanvasNode(id) { return new Promise((resolve) => { this.createSelectorQuery() .select(`#${id}`) .node() .exec((res) => { const canvasNode = res[0].node; resolve(canvasNode); }); }); }, getSignature() { const timestamp = Math.round(new Date().getTime() / 1000); const signature = sha256(timestamp + token + APPID + timestamp).toUpperCase(); return { signature, timestamp }; }, // 初始化相机类型 async initSdkCamera() { // 获取在屏的 canvas,sdk 会将处理完的画面实时输出到 canvas 上 const outputCanvas = await this.getCanvasNode("main-canvas"); // 获取鉴权参数 const auth = { licenseKey: LICENSE_KEY, appId: APP_ID, authFunc: this.getSignature }; // 构造SDK初始化参数 const config = { auth, camera: { width:720, height:1280, }, output: outputCanvas, // 初始美颜效果(可选) beautify: { whiten: 0.1, // 美白 0-1 dermabrasion: 0.3, // 磨皮 0-1 lift: 0, // 瘦脸 0-1 shave: 0, // 削脸 0-1 eye: 0.2, // 大眼 0-1 chin: 0, // 下巴 0-1 }, plugin3d: plugin3d // 0.3.0之后版本写法,按需初始化3d模块,如不需要3d模块,可以省略此参数。 }; const ar = new ArSdk(config); // created回调里可以开始获取内置特效与滤镜列表 ar.on('created', () => { // 获取内置美妆、贴纸列表 ar.getEffectList({ Type: 'Preset' }).then((res) => { const list = res.map(item => ({ name: item.Name, id: item.EffectId, cover: item.CoverUrl, url: item.Url, label: item.Label, type: item.PresetType, })); const makeupList = list.filter(item=>item.label.indexOf('美妆')>=0) const stickerList = list.filter(item=>item.label.indexOf('贴纸')>=0) // 渲染特效列表 this.setData({ makeupList, stickerList }); }).catch((e) => { console.log(e); }); // 内置滤镜 ar.getCommonFilter().then((res) => { const list = res.map(item => ({ name: item.Name, id: item.EffectId, cover: item.CoverUrl, url: item.Url, label: item.Label, type: item.PresetType, })); // 渲染滤镜列表 this.setData({ filterList: list }); }).catch((e) => { console.log(e); }); }); // ready 回调中可以设置美颜、滤镜、特效效果 ar.on('ready', (e) => { this._sdkReady = true });
ar.on('error', (e) => { console.log(e); });
this.ar = ar }, // 改变美颜参数,需要确保sdk ready onChangeBeauty(val){ if(!this._sdkReady) return // 可以通过setBeautify设置美颜效果,支持6种属性,详见SDK接入指南 this.ar.setBeautify({ dermabrasion: val.dermabrasion, // 磨皮 0-1 }); }, // 改变美妆,需要确保sdk ready onChangeMakeup(id, intensity){ if(!this._sdkReady) return // 使用setEffect设置特效,setEffect的输入参数支持三种格式,详见SDK接入指南 this.ar.setEffect([{id, intensity}]); }, // 改变贴纸,需要确保sdk ready onChangeSticker(id, intensity){ if(!this._sdkReady) return // 使用setEffect设置特效,setEffect的输入参数支持三种格式,详见SDK接入指南 this.ar.setEffect([{id, intensity}]); }, // 改变滤镜,需要确保sdk ready onChangeFilter(id, intensity){ if(!this._sdkReady) return // 使用setFilter设置滤镜,第二个参数表示滤镜强度(范围0-1) this.ar.setFilter(id, 1); } }})

步骤5:拍照和录像功能实现

示例代码如下:拍照录像SDK 会返回包含宽高和 buffer 数据的对象,用户可以通过自己页面内预设的 2d canvas(上述代码中id为photo-canvas)绘制此数据并导出为图片文件。

async takePhoto() {    const {uint8ArrayData, width, height} = this.ar.takePhoto(); // takePhoto 方法返回当前画面的 buffer 数据    const photoCanvasNode = await this.getCanvasNode('photo-canvas');    photoCanvasNode.width = parseInt(width);    photoCanvasNode.height = parseInt(height);    const ctx = photoCanvasNode.getContext('2d');    // 用 sdk 返回的数据创建 ImageData 对象    const imageData = photoCanvasNode.createImageData(uint8ArrayData, width, height);    // 将 ImageData 对象绘制到 canvas 上    ctx.putImageData(imageData,0,0,0,0,width,height);    // 将 canvas 保存为本地图片    wx.canvasToTempFilePath({        canvas: photoCanvasNode,        x: 0,        y: 0,        width: width,        height: height,        destWidth: width,        destHeight: height,        success: (res) => {            // 保存照片到本地            wx.saveImageToPhotosAlbum({                filePath: res.tempFilePath            });        }    })}
Component({    methods: {        // 开始录像        startRecord() {            this.setData({                recording: true            });            this.ar.startRecord()        }        // 结束录像        async stopRecord() {            const res = await this.ar.stopRecord();            // 保存录像到本地            wx.saveVideoToPhotosAlbum({                filePath: res.tempFilePath            });            this.setData({                recording: false            });        }    }})

当小程序切换后台或检测到手机锁屏时,需要调用 stopRecord 停止录像,再次回到页面时重新开启SDK即可。

onShow() {    this.ar && this.ar.start();},onHide() {    this.ar && this.ar.stop();},async onUnload() {    try {        this.ar && this.ar.stop();        if (this.data.recording) {            await this.ar.stopRecord({                destroy: true,            });        }    } catch (e) {    }    this.ar && this.ar.destroy();}

代码示例

您可以下载 示例代码 解压后查看 ar-miniprogram 代码目录。

对音视频的解决方案有疑惑?想了解解决方案收费? 联系解决方案专家

腾讯云限时活动1折起,即将结束: 马上收藏

同尘科技为腾讯云授权服务中心,购买腾讯云享受折上折,更有现金返利:同意关联,立享优惠

阿里云解决方案也看看?: 点击对比阿里云的解决方案

- 0人点赞 -

发表点评 (0条)

not found

暂无评论,你要说点什么吗?