使用手机实时视频流编写/调试代码-凯发k8国际娱乐官网入口
新建技能开发项目,或打开已有的技能项目后,您就可以在hilens studio中通过编辑和调试技能逻辑代码,开发自己的技能。
当前技能项目已提供技能模板,可根据技能模板开发自己的技能代码,详情请见编辑逻辑代码。
编辑完技能逻辑代码后,hilens studio提供使用手机实时视频流调试代码的功能,以手机摄像头实时的视频流作为技能输入,查看技能输出,详情请见使用手机实时视频流调试代码。
另外,您也可以使用预置视频流调试代码,详情请见使用预置视频流调试代码。
项目文件说明
在hilens studio界面单击左上角,左侧将展示开发项目的文件目录。打开项目源代码文件“src”,详细代码内容将呈现在hilens studio界面的编辑区,您可以直接编辑项目逻辑代码。
文件目录的详细说明如下所示:
开发项目名/ |── .hilens ├── rtmp_source 生成的uuid,用于构成技能rtmp手机推流临时地址。 ├── rtmp.txt 生成的uuid,用于构成技能rtmp推流临时地址。 ├── skill_info.json 项目的元信息。 |── .theia ├── launch.json 项目启动配置。 ├── tasks.json 任务配置。 ├── setting.json c/c 配置。目前配置了cpp编译路径,是c 代码跳转非常重要的部分。 |── build ├── cmakelists.txt 文件。 ├── kit_package_install.sh 技能部署至hilens kit打包脚本,此脚本可支持自定义,定制化部署技能至hilens kit。 ├── build.sh 项目编译脚本。 ├── clean.sh 项目清理脚本。 ├── prebuild.sh 项目启动预处理脚本。 ├── postbuild.sh 项目运行结束后处理脚本。 ├── output 编译产物。 ├── kit hilens kit编译产物。 ├── studio hilens studio编译产物。 ├── lib c 项目第三方库。 ├── data 工程需要使用的数据。 ├── model 模型文件。 ├── src 项目源代码。 ├── test 测试数据。 ├── cameras0.mp4 hilens studio中video capture 默认读取的视频文件。
项目文件操作
操作 |
说明 |
---|---|
new file |
新建文件。 |
new folder |
新建文件夹。 |
open |
打开当前文件。 |
find in folder |
在当前文件搜索/替换关键词。 |
copy download link |
复制下载当前文件的链接。 |
upload files |
上传本地文件至当前文件夹下。 |
ultra download |
下载当前文件/文件夹至本地。也可以备份技能项目,详情请见备份技能项目。
说明:
|
delete |
删除当前文件/文件夹。 |
duplicate |
复制当前文件/文件夹。 |
rename |
重命名当前文件/文件夹。 |
备份技能项目
- 登录华为hilens管理控制台,在左侧导航栏中选择“技能开发>hilens studio”。
进入hilens studio页面。
- 在hilens studio界面单击左上角“file”,在下拉框中选择“backup project(s) to obs”。
图1 备份技能至obs
- 在对话框中选中“back up all projects to obs”,单击“ok”。
耐心等待项目备份到obs,待项目备份完成后,右下角会提示“tasks are finished......”。
如果项目备份失败,可以选择把项目下载至本地,右键单击鼠标选择“download”,将项目下载至本地。
图2 back up all projects to obs
编辑逻辑代码
打开项目源代码文件“src”,在hilens studio 界面的编辑区可直接编辑技能的逻辑代码。
华为hilens提供了一套hilens framework,hilens framework通过封装底层接口、实现常用的管理功能,让开发者可以方便的开发skill,发展ai生态。详细指导和api介绍可参见。
使用手机实时视频流调试代码
hilens studio的调试器允许使用断点、单步调试等,与编辑器配合使用。在调试代码的过程中,可以使用手机登录hilens studio,以手机摄像头实时的视频流作为技能输入,查看技能输出。
- 步骤一:绑定手机与hilens studio帐号
- 在hilens studio界面右上角单击用户名,选择“接入手机摄像头(beta)”。
弹出“接入手机摄像头(beta)”对话框。
图4 手机登录hilens studio
- 按照“接入手机摄像头(beta)”对话框的指引,打开手机微信,扫描对话框中的二维码。
手机微信进入“ei体验空间”小程序。
图5 扫描小程序二维码
- 在手机微信小程序中,选择“hilens studio”。
进入hilens studio手机小程序界面。
图6 hilens studio小程序
- 单击hilens studio界面“接入手机摄像头(beta)”对话框的“下一步”。
对话框显示摄像头推流二维码。
图7 摄像头推流二维码
- 在hilens studio手机小程序界面勾选“用户协议”,然后单击“扫一扫”,用手机扫描步骤4中的二维码。
进入手机调试界面,功能介绍如表2所示。此时手机与hilens studio帐号绑定,可以使用手机摄像头在线调试技能。
图8 手机调试界面
表2 手机调试功能说明 序号
说明
1
当前手机摄像头调试的技能名称以及实时输入的视频流。
单击技能名称,可切换技能,在手机弹出的新界面选择新的技能,然后单击“确定”,即可切换技能。
2
当前调试的技能输出视频流。
3
操作列,可进行如下操作:
- 前置摄像头:切换手机摄像头为前置摄像头。
- 后置摄像头:切换手机摄像头为后置摄像头。
- 暂停:暂停当前技能的调试或运行。
- 返回:退出当前手机调试技能界面,返回至hilens studio手机小程序界面。
- 在hilens studio界面右上角单击用户名,选择“接入手机摄像头(beta)”。
- 步骤二:调试和运行技能代码
- 在hilens studio编辑区代码左侧单击鼠标,出现断点。
图9 设置断点
- 调试代码。
单击hilens studio界面上方导航栏的,选择“read stream from mobile phone”。
图10 实时推流调试代码
在hilens studio界面下方“debug console” 查看代码调试信息。图11 debug console
- 运行代码
代码调试完成后,可运行代码,查看技能输出。
单击hilens studio界面上方导航栏的运行按钮。
hdmi技能在运行完技能代码后,可在hilens studio小程序界面查看技能输出。
图12 手机调试界面-27
同时,也可在hilens studio界面右侧单击,在“video output”区查看技能输出。图13 技能输出
- 在hilens studio编辑区代码左侧单击鼠标,出现断点。
使用预置视频流调试代码
hilens studio的调试器允许使用断点、单步调试等,与编辑器配合使用。
- 在hilens studio编辑区代码左侧单击鼠标,出现断点。
图14 设置断点-28
- 调试代码。
方式一:单击hilens studio界面上方导航栏的,选择“read stream from file”。
图15 预置视频流调试代码
方式二:单击hilens studio界面左侧的,弹出“debug”区,单击开始调试代码。
图16 调试区
方式三:快捷键“f5”,开始调试代码。
在hilens studio界面下方“debug console” 查看代码调试信息。
图17 debug console-29
- 运行代码
代码调试完成后,可运行代码,查看技能输出。
单击hilens studio界面上方导航栏的。
hdmi技能在运行完技能代码后,可在hilens studio界面右侧单击,在“video output”区查看技能输出。
如果视频流获取失败,可在“video output”区右上角单击刷新按钮重新获取。
图18 技能输出-30
下载技能项目
hilens studio支持下载当前技能项目。
在hilens studio界面单击左上角,左侧将展示开发项目的文件目录。
右键单击文件目录空白处,选择“ultra download”,即可下载整个技能项目至本地。
后续操作
技能代码编辑和调试成功后,您可以把调试好的技能安装至端侧设备,详情请见。
意见反馈
文档内容是否对您有帮助?
如您有其它疑问,您也可以通过华为云社区问答频道来与我们联系探讨