海思方案 HI3518E平台ISP调试环境搭建

海思HI35XX之视频处理单元各通道间的关系最近在折腾HI3518C的芯片，应用到IPCamera上，最终获取多路不同分辨率的视频流供不同需求的预览切换。

此处简单记录一下视频前处理元VPSS（Video Process Sub-System）的多通道间的关系以及使用心得。

HI3518C的视频子系统包括：视频系统初始化模块（MPP_SYS_CONF_S）、视频输入模块（VI）、视频前处理模块（VPSS）、视频编码模块（VENC）和视频输出模块（VO）组成。

HI3518C的VPSS是视频数据编码前的预处理单元，主要完成对一幅输入图像的统一预处理，如去噪、去隔行等，然后再对各通道分别进行缩放、锐化等处理（如：PreScale、De-ring/De-block、NR、IE、DIE、Sharpen 等，具体可参见VPSS_GRP_ATTR_S结构体），最后输出多种不同分辨率的图像。

其中，HI3518C对用提供GROUP的概念来管理VPSS，最多支持128个GROUP（我目前只使用了一个组：GROUP0）。

VPSS的GROUP又包含多个通道（CHANNEL），对于不同规格的芯片，每个组包含的通道数也不相同，规格文档上都有详细说明。

HI3518C的各个GROUP包含8个CHANNEL，其中2个物理通道（PHY CHN）、一个直通通道(Bypass)和5个扩展通道(EXT CHN)。

物理通道是由硬件提供的，各物理通道的功能和限制各不相同；直通通道具备CROP功能，可以把不需要作预处理的一幅幅图像直接透传给接收者；扩展通道具备缩放功能，当它绑定到物理通道后，可以把从物理通道获取到的图像缩小或放大成用户所需要的不同分辨率的图像。

Hi3518C 提供 5 路扩展通道以提供更好的灵活性，扩展通道具备缩放和帧率控制功能，不经过其他硬件算法单元处理。

用户在使用的时候，需要首先创建VPSS GROUP，然后设置好GROUP属性并启用VPSS GROUP之后，再把VI作为源通道，把VPSS作为目标通道，通过调用 HI_MPI_SYS_Bind 绑定VI到VPSS，就可以建立视频输入到视频预处理间的通路，使得前端采集到的视频数据经由此通路到达VPSS单元。

Hi3516dv300搭建开发环境——编译osdrv（7）-mtd-utils2.0.2的。

%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%注意1：如果你要安装automake1.15.1，建议你的安装顺序为：M4 -> autoconf -> automake（⼀定要安照这个顺序，不然会出现很多错误，建议从下⾯的3)开始看），这关于这⼏个包以及相关下载地址会在下⾯有⽂字或图⽚解释.有⼀个问题：我指定安装⽬录的时候⽐如安装m4和autoconf的时候为什么在/usr/local/建⽴名为m4⽂件夹，当m4安装到这个⽂件后为什么安装运⾏./configure --prefix=/usr/local/autoconf就⼀直提⽰要你安装m4,但是你都将他们安装在/usr/local/这同⼀⽬录下就不会出现该问题，我想是不是因为安装在不同⽬录系统是不是识别不了才出现这个问题，注意2：下⾯的⼀、⼆、三、四的安装顺序是我按照说明⽂档的安装顺序，亲测这个顺序是有问题的，在其中我插⼊了遇到的⼀些问题，以及对问题的解决%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%%1、本⽂的autoconf的安装过程可以参考：https:///xlwang1995/p/10604104.html 注意：只参考它的autoconf安装即可，不要按照它的顺序2、本⽂automake1.15.1的安装与autoconf的安装类似3、本⽂安装顺序参考⾃：https:///ubuntucc/article/details/9264165⼀、mtd-utils2.0.2依赖以下⼏个库，以ubuntu为例，安装⽅式请参考下⾯命令：sudo apt-get install zlib1g-dev liblzo2-dev uuid-dev pkg-config⼆、由于mtd-utils2.0.2通过pkg-config⼯具检查各个库是否正常安装，因此请参考如下⽅式设置pkg-config⼯具搜索路径：export PKG_CONFIG_PATH="$PKG_CONFIG_PATH:/usr/lib/x86_64-linux-gnu/pkgconfig"注：这⼀步可参考链接：https:///weixin_41041772/article/details/102767759理解：输⼊指令：pkg-config --variable pc_path pkg-config出现问题：pkg-config命令未发现，可以安装这个包，安装这个包后重新输⼊该指令，发现这个路径/usr/lib/x86_64-linux-gnu/pkgconfig有了，故可进⾏下⼀步三、mtd-utils2.0.2依赖于automake1.15.1版本，请参考如下⽅式安装automake1.15.1版本：1、删除原有automake版本sudo apt-get autoremove automake2、下载1.15.1版本1）Windows系统中使⽤浏览器访问automake⼯程url并下载对应源码包：https:///archive/html/info-gnu/2017-06/msg00007.html2）linux系统中可以使⽤下⾯命令下载：wget ftp:///gnu/automake/automake-1.15.1.tar.gz3、编译安装automake1.15.1tar zxvf automake-1.15.1.tar.gzcd automake-1.15.1/./configure注：安装到这⼀步出错了，原因是autoconf版本太低了，输⼊指令下载autoconf2.65,(我下载的为2.68)，1）输⼊下载的指令为：wget ftp:///gnu/autoconf/autoconf-2.68.tar.gz2）解压到指定⽬录（我解压到root⽬录下），-C为指定路径命令3）出现提⽰需要下载另⼀个包m4,同样⽤wget⽅法4)这次解压⽤绝对路径，（绝对路径是不是为在prefix前⾯加两个减号）指定解压位置：指定安装路径：最后安装编译：4.1)执⾏到这⼀步出现三个错误：4.2)第⼀个错误为：c:83:3:error:#error please port gnulib freadahead.c to your platf orm!Look at the..........解决办法：在在该⽬录下的终端（就是从终端进⼊m4-1.4.14⽬录也⾏）输⼊指令：sed -i 's/IO_ftrylockfile/IO_EOF_SEEN/' lib/*.cecho "#define _IO_IN_BACKUP 0x100" >> lib/stdio-impl.h注意：这指令⾥⾯的IO中的I为⼤写的i, lib/stdio-impl.h这⾥⾯的l位⼩写字母l此步参考链接为：第⼆个为：error：get undeclared here (not in a function);did you mean......出现这个问题，参考链接：https:///weixin_34168880/article/details/91842744按照这个⽅法处理后，竟然⼜出现了两个错误4.3)第三个为：/m4-1.4.14/src/path.c:118: undefined reference to `S_ISDIR'的错误参考链接：https:///ubuntucc/article/details/9264165⾮常感谢这个链接的博主，通过这个⽂章我知道我掉坑⾥去了，知道了正确的安装顺序为：M4 -> autoconf -> automake （很重要！！！！）你要是按照osdrv/tools/jffs2_tool/readme_cn.txt⾥⾯的安装步骤你就会以⼀个相反的安装顺序安装并会出现我上⾯所有的问题，⼀个软件还没安装完问题就出现了，⼜解决这个问题解决问题中⼜出现问题到最后⼀个软件也没安装上。

海思hi3512平台SDK安装1、解压SDK包在linux服务器上或者一台装有linux的PC上，进入选择安装SDK 的目录，并将Hi3511_VSSDK_V1.1.2.3.tar.gz拷贝到该目录下面，使用命令：tar -zxf Hi3511_VSSDK_V1.1.2.3.tar.gz解压Hi3511_VSSDK_V1.1.2.3.tar.gz，在安装SDK目录下可以得到一个Hi3511_VSSDK_V1.1.2.3目录。

2、在linux服务器上安装交叉编译工具进入Hi3511_VSSDK_V1.1.2.3/tools/toolchains，运行下面命令：chmod +x cross.install增加cross.install运行权限（+x为增加运行权限），然后使用下面命令运行cross.install：./cross.install注意需要sudo权限或者root权限。

执行下面命令使交叉编译器的脚本配置的环境变量生效。

source /etc/profile3、展开SDK包的其他内容返回SDK目录，运行：./sdk.unpack将会展开SDK包打包压缩存放的其他内容，按照提示完成操作，注意一定要输入：Yes //安装SDK需要SDK安装的时候，有提示输入Yes，请一定要输入Yes，不能输入yes或者YES，否则不能完全安装。

如果需要中转拷贝SDK包，则运行：./sdk.cleanup收起SDK包的内容，拷贝到新的目录后再展开。

4、SDK目录介绍Hi3511_VSSSDK_VX.X.X.X 目录结构如下：|-- pub| |-- images # 可供FLASH烧写的映像文件，如内核、jffs2文件系统| |-- include # 应用程序需要的头文件| |-- kbuild # 内核头文件，内核模块使用该目录来进行编译| |-- lib # 应用程序需要的库文件| |-- resource # 构成rootfs的各种组件，一般不需要关心| |-- standee # 各模块的原始安装文件，如需要mmz.ko就可以在这里找到，同时也包含组件所需的调试信息| `-- tarball # SDK各模块的打包备份文件|-- rootfs # 根文件系统，可以直接作为NFS|-- scripts # 存放相关脚本的目录|-- sdk.cleanup # SDK清理脚本|-- sdk.unpack # SDK展开脚本|-- source # 放置所有源代码的目录| |-- app # 应用程序类源代码| |-- drv # 驱动类源代码| |-- lib # Lib类源代码| `-- os # OS相关源代码，如内核|-- tools # 工具类| |-- bin # 可执行程序，如mkfs.cramfs| `-- toolchains # 交叉工具链，展开SDK时已自动安装|`---mpp # Hi3511的媒体处理平台发布的头文件、库以及内核模块|-- lib.rel # 音频库,MPP发布的release版本库，音频库|-- lib.dbg # MPP发布的debug版本库，音频库|-- lib.lessrel # MPP发布的less release版本库，音频库|-- ko.rel # MPP发布的发布的release内核模块，包括FB,TDE|-- ko.dbg # MPP发布的发布的debug内核模块，包括FB,TDE|-- ko.lessrel # MPP发布的发布的less release内核模块，包括FB,TDE|-- include # MPP发布的发布的对外头文件，包括FB,TDE`-- sample # MPP的sample代码，进入各个子目录，可以直接编译运行。

海思SDK学习：000-海思HI35xx平台软件开发快速⼊门之背景知识背景参考⾃：《HiMPP V3.0 媒体处理软件开发参考.pdf》由于在⾳视频处理领域，海思芯⽚占有全球市场的很⼤份额。

当我们选择使⽤海思芯⽚开发时，程序开发模型主要是围绕HIMPP（Hisi Media Process Platform）提供的API进⾏。

这⾥围绕主⾓HIMPP详细介绍与它相关的专业词汇与背景知识，对HIMPP有充分了解之后，我们就可以利⽤它实现⾳视频编解码等业务逻辑。

本⽂主要讲述HIMPP平台处理流程，以快速⼊门海思HI35xx平台⾳视频编解码编程。

HIMPP平台架构简介海思提供的媒体处理软件平台（Hisi Media Process Platform，简称HIMPP），可⽀持软件快速开发。

该平台对应⽤软件屏蔽了芯⽚相关复杂的底层原理，并对应⽤软件直接提供MPI（MPPProgram Interface）接⼝完成相应功能。

该平台⽀持应⽤软件快速开发以下功能：输⼊视频捕获、H.264/MJPEG/JPEG/MPEG4编码、H.264/MJPEG/JPEG/MPEG4解码、视频输出显⽰、视频图像前处理（包括去燥、增强、锐化、Deinterlace）、编码码流叠加OSD、视频侦测分析、智能分析、⾳频捕获及输出、⾳频编解码等功能。

HIMPP平台典型架构分层HIMPP平台主要是衔接了操作系统层与应⽤层，典型软件架构体系⽰意图如下：应⽤层媒体软件处理平其他驱动操作系统层硬件层1、硬件层硬件层由Hi35xx芯⽚加上必要的外围器件构成。

外围器件包括Flash、DDR（Double Data-Rate）、视频Sensor或AD、⾳频AD等。

2、操作系统层基于Linux的操作系统。

系统版本号芯⽚Linux 3.10.y Hi3536/Hi3521A/Hi3520DV300/Hi3531ALinux 3.18.y Hi3536CV100/Hi3531DV100/Hi3521DV100Linux 4.9.y Hi3536DV1003、媒体处理平台层基于操作系统层，控制芯⽚完成相应的媒体处理功能。

安防IPC怎么选芯片方案？来源：中安网安防人都知道，询问视频监控产品时一般都会问上这么一句：“你家这产品用的是谁家的方案?”由此，芯片方案对产品市场的影响可见一斑，尤其是IPC。

可眼下，很多企业在选择芯片方案时，却容易犯尴尬症。

目前，国内IPC 生产厂家虽然不少，但有自主研发能力的却不多。

这也导致，上游的研发生产厂商在IPC芯片上做什么样的选择就在一定程度上决定了下游的IPC将具备怎样的基因、能力和市场。

模拟索尼时代当然已成为过去时。

而在过去的几年，编解码芯片方案上，厂商可选择美国德州仪器(TI)、华为海思、安霸、台湾智原等芯片供应商。

“洋芯片”曾长期占据市场主导地位，成为制约产业进一步发展的瓶颈。

安防江湖瞬息万变，你能翻手为云，他也能覆手为雨。

到如今，芯片市场格局早已是另一番景象。

目前国内生产资源非常丰富，同时工业化、标准化及第三方的介入给芯片设计业者提供了快速进入市场的可能，从而推动了芯片国产化和产业化的逐步升级。

安防行业的蓬勃发展，让国产芯片厂商看到了希望，以海思、国科、中星微、安凯为代表的一批致力于国产芯片研发生产的企业，将目光聚焦在安防芯片上，试图在安防行业一展拳脚，发挥最大的价值。

IPC品牌厂商的尴尬症也是缘于，一旦选择某个芯片，将会投入企业大量的人力物力财力，进行产品开发、渠道培育、市场推广等等。

在这个应该以挣钱为己任的残酷市场中，现在的IPC到底该怎么选芯片?慧中君认为，先要看看现在市场几大芯片供应商的走势、市场反馈和定位：即将退出安防市场——TITI创办于1930年，悠久的历史让这个老牌的芯片设计者在视频监控芯片行业曾独霸天下。

此前，在标清和模拟市场，TI的达芬奇系列一直占据摄像机的主要市场份额。

但是从06年开始，TI的日子不太好过，一直被海思穷追猛打。

行业人士认为，未来TI可能会退出这个市场，因为安防只是人家的一个小芝麻。

高端市场标杆，逐渐式微——安霸IPC研发制造厂商谈到海思和TI的时候，还一定会提到另外一个SoC品牌——安霸。

一、编译内核：1、先手动配置内核cd osdrv/kernel/linux-3.0.ycp arch/arm/configs/hi3518e_full_deconfig .configmake ARCH=arm CROSS_COMPILE=arm-hisiv100nptl-linux- menuconfig选择General setup——》Cross-compiler tool prefix 输入arm-hisiv100nptl-linux- 退出〃保存2、进入/osdrv/Makefile文件中：将规则hirootfs_build：pushd $(OSDRV_DIR)/pub/$(PUB_ROOTFS)/lib/;$(OSDRV_CROSS)-strip *;popd这一行的注释去掉〃为了生成精简版的文件系统。

3、执行make OSDRV_CROSS=arm-hisiv100nptl-linux CHIP=hi3518e all生成的内核镜像和文件系统放在/osdrv/pub目录中〃将uImage和后面生成的文件镜像拷贝到安装tftp服务时创建的目录下面（以下有说明）可能出现以下问题：1、pushd 命令找不到！ll /bin/sh ——查看/bin/sh的指向〃如果结果是dash,修改为bashln -s /bin/bash /bin/sh -f二、制作文件系统：1、首先将~/mpp2/ko/pinmux_hi3518.sh文件的两行注释掉：net_mii_mode函数中的:himm 0x200f005c 0x1和himm 0x200f0070 0x1这两行。

2、拷贝该ko文件到～/osdrv/pub/rootfs_uclibc文件下。

3、把～/osdrv/pub/rootfs_uclibc文件夹打包成镜像的命令：mkfs.jffs2 -d 文件系统的路径-l -e 0x10000 -o 文件镜像的目标位置/文件镜像名称；如：mkfs.jffs2 -d ~/lenglihong/HiSi3518/Hi3518_SDK_V1.0.9.0/osdrv/pub/rootfs_uclibc -l -e 0x10000 -o ~/lenglihong/HiSi3518/Hi3518_SDK_V1.0.9.0/osdrv/pub/rootfs_64k_ko.jffs2三、烧录过程在WINDOW 7下的烧录：（1）、工具SecureCTR、tftpd32（2）、具体步骤1、安装usb转串口的驱动在～/usb驱动/WIN7驱动2/Prolific_DriverInstaller_v110.exe目录下安装后到设备管理器中查看是否安装成功。