• Home
  • Line#
  • Scopes#
  • Navigate#
  • Raw
  • Download
1# 目标跟踪(KCF)
2
3## 1.概述
4
5* 基于SDK sample的KCF算子实现对汽车的跟踪,示例代码参考在device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/svp/ive/sample路径下的sample_ive_kcf.c,如下图所示:
6
7![](./figures/hispark_taurus_color_space_convert_sample/001sample_ive_kcf.c.png)
8
9* 运行的主入口在device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/svp/ivesample_ive_main.c文件中,如下图所示:
10
11![](./figures/hispark_taurus_color_space_convert_sample/003SAMPLE_IVE_KCF.png)
12
13* 关于KCF算子的其他细节,自行查阅device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/svp/ive/sample/sample_ive_kcf.c代码即可
14
15## 2.代码修改适配Sensor
16
17在编译sample_ive_main.c之前,需确保OpenHarmony 小型系统的主干代码已经整编通过,**且已经按照《[修改源码及配置文件适配Taurus开发板](2.2.1.%E4%BF%AE%E6%94%B9%E6%BA%90%E7%A0%81%E5%8F%8A%E9%85%8D%E7%BD%AE%E6%96%87%E4%BB%B6%E9%80%82%E9%85%8DTaurus%E5%BC%80%E5%8F%91%E6%9D%BF.md)》的内容进行修改**。由于sample_ive_kcf.c适配的sensor是vpss0 chn0输出1080P,chn1 输出PIC_CIF分辨率,但是我们的摄像头是IMX335_4M,当使用4M或5M时序时,会因为规格限制出现报错,所以我们需要修改vpss0 chn1输出输出1080P,chn12输出PIC_CIF,就可以正常输出图像。
18
19以下截图可在device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/svp/ive/sample/sample_ive_kcf.c文件中找到
20
21* 步骤1:修改SAMPLE_IVE_Rfcn_Detect()函数中HI_MPI_VPSS_ReleaseChnFrame()接口。
22
23```c
24s32Ret = HI_MPI_VPSS_ReleaseChnFrame(s32VpssGrp, 2, &stExtFrmInfo); // 第1682行,将第二个参数修改为2
25```
26
27![](./figures/hispark_taurus_color_space_convert_sample/%E4%BF%AE%E6%94%B9SAMPLE_IVE_RFCN_DETECT.png)
28
29* 步骤2:修改SAMPLE_IVE_GetFrame()函数中的HI_MPI_VPSS_GetChnFrame()和HI_MPI_VPSS_ReleaseChnFrame()接口。
30
31```c++
32s32Ret = HI_MPI_VPSS_GetChnFrame(0, 1, &astVideoFrame[0], s32MilliSec); // 第1704行,将第二个参数改为1
33
34s32Ret = HI_MPI_VPSS_GetChnFrame(0, 2, &astVideoFrame[1], s32MilliSec); // 第1721行,将第二个参数改为2
35
36s32Ret = HI_MPI_VPSS_ReleaseChnFrame(0, 1, &astVideoFrame[0]); // 第1737行,将第二个参数改为1
37```
38
39![](./figures/hispark_taurus_color_space_convert_sample/%E4%BF%AE%E6%94%B9SAMPLE_IVE_GETFRAME.png)
40
41* 步骤3:修改SAMPLE_IVE_KcfTracking()函数中的HI_MPI_VPSS_ReleaseChnFrame()接口。
42
43```c++
44(HI_VOID)HI_MPI_VPSS_ReleaseChnFrame(0, 1, &pstQueueNode->stFrameInfo); // 第2047行,将第二个参数改为1
45```
46
47![](./figures/hispark_taurus_color_space_convert_sample/%E4%BF%AE%E6%94%B9SAMPLE_IVE_KCFTRACKIng.png)
48
49* 步骤4:修改SAMPLE_IVE_KcfDeInit()函数中的HI_MPI_VPSS_ReleaseChnFrame()接口。
50
51```c++
52(HI_VOID)HI_MPI_VPSS_ReleaseChnFrame(0, 2, &pstIveKcfInfo->astFrameInfo[1]); // 第2059行,将第二个参数改为2
53
54(HI_VOID)HI_MPI_VPSS_ReleaseChnFrame(0, 1, &pstQueueNode->stFrameInfo); // 第2074行,将第二个参数改为1
55```
56
57![](./figures/hispark_taurus_color_space_convert_sample/%E4%BF%AE%E6%94%B9SAMPLE_IVE_KCFDEINIT.png)
58
59* 步骤5:修改SAMPLE_IVE_Kcf()函数中的2345-2347行,如下所示
60
61```c
62# 将SAMPLE_IVE_Kcf()函数中的2345-2347行,从
63for (i = 0; i < SAMPLE_IVE_KCF_VPSS_MAX_CHN; i++) {
64    astVpssChnAttr[i].u32Width = astSize[i + 1].u32Width;
65    astVpssChnAttr[i].u32Height = astSize[i + 1].u32Height;
66
67# 改成
68for (i = 1; i < SAMPLE_IVE_KCF_VPSS_MAX_CHN + 1; i++) {
69    astVpssChnAttr[i].u32Width = astSize[i].u32Width;
70    astVpssChnAttr[i].u32Height = astSize[i].u32Height;
71```
72
73![](./figures/hispark_taurus_color_space_convert_sample/%E4%BF%AE%E6%94%B9SAMPLE_IVE_KCF.png)
74
75由于我的显示器是只支持1080P60帧,所以需要修改device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/common/sample_comm_vo.c文件中SAMPLE_COMM_VO_GetDefConfig()函数的VO 输出配置,这个请根据自己的显示器支持的参数进行配置。
76
77```c++
78pstVoConfig->enIntfSync = VO_OUTPUT_1080P60; // 第483行的VO_OUTPUT_1080P30; 改成 VO_OUTPUT_1080P60;
79```
80
81![](./figures/hispark_taurus_color_space_convert_sample/037%E4%BF%AE%E6%94%B9KCF%E7%9A%84HDMI%E8%BE%93%E5%87%BA.png)
82
83## 3.编译
84
85在单编sample_ive_main.c前,需修改目录下的一处依赖,进入//device/soc/hisilicon/hi3516dv300/sdk_linux目录下,通过修改BUILD.gn,在deps下面新增target,``"sample/platform/svp/ive:hi3516dv300_ive_sample"``,如下图所示:
86
87![](./figures/hispark_taurus_color_space_convert_sample/067%E4%BF%AE%E6%94%B9buildgn.png)
88
89* 点击Deveco Device Tool工具的Build按键进行编译,具体的编译过程这里不再赘述,编译成功后,如下图所示:
90
91![](./figures/hispark_taurus_helloworld_sample/0002-build%20success.png)
92
93* 编译成功后,即可在out/hispark_taurus/ipcamera_hispark_taurus_linux/rootfs/bin目录下,生成 ohos_ive_demo可执行文件,如下图所示:
94
95![](./figures/hispark_taurus_color_space_convert_sample/069%E5%BE%97%E5%88%B0%E5%8F%AF%E6%89%A7%E8%A1%8C%E6%96%87%E4%BB%B6.png)
96
97## 4. 拷贝可执行程序和依赖文件至开发板的mnt目录下
98
99**方式一:使用SD卡进行资料文件的拷贝**
100
101* 首先需要自己准备一张SD卡
102* 步骤1:将编译后生成的可执行文件拷贝到SD卡中。
103* 步骤2:将device\soc\hisilicon\hi3516dv300\sdk_linux\out\lib\目录下的**libvb_server.solibmpp_vbs.so**拷贝至SD卡中
104* 步骤3:将device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/svp/ive/目录下的 data文件拷贝至SD卡中。(前提是按照《[获取sample依赖的资源文件到本地](6.2.%E8%8E%B7%E5%8F%96sample%E4%BE%9D%E8%B5%96%E7%9A%84%E8%B5%84%E6%BA%90%E6%96%87%E4%BB%B6%E5%88%B0%E6%9C%AC%E5%9C%B0.md)》文档获取了资源文件)
105
106![](./figures/hispark_taurus_color_space_convert_sample/071%E5%B0%86ive%E4%BE%9D%E8%B5%96%E7%9A%84%E6%96%87%E4%BB%B6%E6%8B%B7%E8%B4%9D%E8%87%B3SD%E5%8D%A1%E4%B8%AD.png)
107
108* 步骤4:可执行文件拷贝成功后,将内存卡插入开发板的SD卡槽中,可通过挂载的方式挂载到板端,可选择SD卡 mount指令进行挂载。
109
110```shell
111mount -t vfat /dev/mmcblk1p1 /mnt
112# 其中/dev/mmcblk1p1需要根据实际块设备号修改
113```
114
115* 挂载成功后,如下图所示:
116
117![](./figures/hispark_taurus_color_space_convert_sample/072%E6%8C%82%E8%BD%BDSD%E5%8D%A1%E8%87%B3%E5%BC%80%E5%8F%91%E6%9D%BFmnt%E7%9B%AE%E5%BD%95%E4%B8%8B.png)
118
119**方式二:使用NFS挂载的方式进行资料文件的拷贝**
120
121* 首先需要自己准备一根网线
122* 步骤1:参考[博客链接](https://blog.csdn.net/Wu_GuiMing/article/details/115872995?spm=1001.2014.3001.5501)中的内容,进行nfs的环境搭建
123* 步骤2:将编译后生成的可执行文件拷贝到Windows的nfs共享路径下
124* 步骤3:将device\soc\hisilicon\hi3516dv300\sdk_linux\out\lib\目录下的**libvb_server.solibmpp_vbs.so**拷贝至Windows的nfs共享路径下
125* 步骤4:将device/soc/hisilicon/hi3516dv300/sdk_linux/sample/platform/svp/ive/目录下的 data文件拷贝至Windows的nfs共享路径下。(前提是按照《[获取sample依赖的资源文件到本地](6.2.%E8%8E%B7%E5%8F%96sample%E4%BE%9D%E8%B5%96%E7%9A%84%E8%B5%84%E6%BA%90%E6%96%87%E4%BB%B6%E5%88%B0%E6%9C%AC%E5%9C%B0.md)》文档获取了资源文件)
126
127![](./figures/hispark_taurus_color_space_convert_sample/070%E5%B0%86ive%E4%BE%9D%E8%B5%96%E7%9A%84%E6%96%87%E4%BB%B6%E6%8B%B7%E8%B4%9D%E8%87%B3nfs.png)
128
129* 步骤5:执行下面的命令,将Windows的nfs共享路径挂载至开发板的mnt目录下
130
131```
132mount -o nolock,addr=192.168.200.1 -t nfs 192.168.200.1:/d/nfs /mnt
133```
134
135## 5.拷贝mnt目录下的文件至正确的目录下
136
137* 执行下面的命令,拷贝mnt目录下面的ohos_ive_demo和data至userdata目录,拷贝mnt目录下面的libvb_server.solibmpp_vbs.so/usr/lib/目录下,
138
139```
140cp /mnt/ohos_ive_demo  /userdata
141cp /mnt/data /userdata -rf
142cp /mnt/*.so /usr/lib/
143```
144
145![](./figures/hispark_taurus_color_space_convert_sample/073%E6%8B%B7%E8%B4%9Dmnt%E4%B8%AD%E7%9A%84%E8%B5%84%E6%BA%90%E6%96%87%E4%BB%B6%E8%87%B3userdata%E7%9B%AE%E5%BD%95.png)
146
147* 执行下面的命令,给ohos_ive_demo文件可执行权限
148
149```
150chmod 777 /userdata/ohos_ive_demo
151```
152
153## 6. 功能验证
154
155* 上述步骤完成后,需要将mini HDMI线一端接口Tauru套件的HDMI口(mini HDMI线没有提供,需要开发者自行购买),另一端接显示器,接下来执行下面的命令,启动可执行文件
156
157```
158cd /userdata
159
160./ohos_ive_demo 7
161```
162
163![](./figures/hispark_taurus_color_space_convert_sample/074%E6%89%A7%E8%A1%8C%E5%8F%AF%E6%89%A7%E8%A1%8C%E7%A8%8B%E5%BA%8F.png)
164
165* 如果需要退出程序,就敲两下回车,等待一段时间,程序就会退出运行
166
167![](./figures/hispark_taurus_color_space_convert_sample/075%E6%95%B2%E4%B8%A4%E4%B8%8B%E5%9B%9E%E8%BD%A6%E9%80%80%E5%87%BA%E7%A8%8B%E5%BA%8F.png)
168
169