Line 1: |
Line 1: |
| [[VEYE CS Camera for Jetson TX2|English]] | | [[VEYE CS Camera for Jetson TX2|English]] |
| | | |
− | '''<big>如何在英伟达Jetsno Nano,TX2,AGX Xavier和Xavier NX平台使用VEYE系列和CS系列摄像头模组</big>''' | + | '''<big>如何在英伟达Jetsno Nano,TX2,Xavier和Orin平台使用VEYE系列和CS系列摄像头模组</big>''' |
| | | |
| ===概述=== | | ===概述=== |
− | 本文讲述怎样将VEYE系列和CS系列模组接入到英伟达公司的Jetson Nano,Jetson TX2和AGX Xavier开发板,Xavier NX Devkit以及我们兼容的其他TX2主板上。采用的软件版本为 | + | 本文讲述怎样将VEYE系列和CS系列模组接入到英伟达公司的Jetson Nano,Jetson Nano 2GB,Jetson TX2,TX2 NX和AGX Xavier开发板,Xavier NX Devkit以及我们兼容的其他主板上。采用的软件版本为 |
| | | |
| *Jetpack4.2.2,L4T版本r32.2.1 | | *Jetpack4.2.2,L4T版本r32.2.1 |
| *Jetpack4.3,L4T版本r32.3.1 | | *Jetpack4.3,L4T版本r32.3.1 |
| *Jetpack4.4,L4T版本r32.4.3 | | *Jetpack4.4,L4T版本r32.4.3 |
| + | *Jetpack4.4.1,L4T版本r32.4.4 |
| + | *Jetpack4.5,L4T版本r32.5 |
| + | *Jetpack4.5.1,L4T版本r32.5.1 |
| + | *Jetpack4.6,L4T版本r32.6.1 |
| + | *Jetpack4.6.1,L4T版本r32.7.1 |
| + | *Jetpack4.6.3,L4T版本r32.7.3 |
| + | *Jetpack4.6.2,L4T版本r32.7.2 |
| + | *Jetpack4.6.4,L4T版本r32.7.4 |
| + | *Jetpack5.0.1DP,L4T版本r34.1.1 |
| + | *Jetpack5.0.2,L4T版本r35.1 |
| + | *Jetpack5.1,L4T版本r35.2.1 |
| + | *Jetpack5.1.1,L4T版本r35.3.1 |
| + | *Jetpack5.1.2,L4T版本r35.4.1 |
| | | |
| 我们提供了编译好的固件和源代码两种方式来方便用户的使用。 | | 我们提供了编译好的固件和源代码两种方式来方便用户的使用。 |
| | | |
− | VEYE-MIPI-327/CS-MIPI-IMX307是内置ISP的摄像头模组,输出为MIPI-CSI2接口UYVY流模式。对于图像效果参数,我们并没有采用V4L2接口实现,而是采用了DRA(Directly Register Access)模式,我们提供了一组Shell脚本直接控制摄像头模组。 | + | VEYE系列和CS系列摄像头是内置ISP的摄像头模组,输出为MIPI-CSI2接口UYVY流模式。对于图像效果参数,我们并没有采用V4L2接口实现,而是采用了DRA(Directly Register Access)模式,我们提供了一组Shell脚本直接控制摄像头模组。 |
| + | ====支持的模组:==== |
| + | {| class="wikitable" |
| + | |+模组型号支持表 |
| + | !系列 |
| + | !型号 |
| + | !状态 |
| + | |- |
| + | |VEYE系列 |
| + | |VEYE-MIPI-IMX327S |
| + | |完成 |
| + | |- |
| + | |VEYE系列 |
| + | |VEYE-MIPI-IMX385 |
| + | |完成 |
| + | |- |
| + | |VEYE系列 |
| + | |VEYE-MIPI-IMX462 |
| + | |完成 |
| + | |- |
| + | |VEYE系列 |
| + | |VEYE-MIPI-IMX335 |
| + | |完成 |
| + | |- |
| + | |CS系列 |
| + | |CS-MIPI-IMX307 |
| + | |完成 |
| + | |- |
| + | |CS系列 |
| + | |CS-MIPI-SC132 |
| + | |完成 |
| + | |- |
| + | |套装系列 |
| + | |CS-TX2-XAVIER-'''''n'''''CAM |
| + | |完成 |
| + | |}VEYE系列和CS系列MIPI摄像头模组是内置ISP的,输出为MIPI-CSI2接口。 |
| + | ====怎样查看当前L4T版本==== |
| | | |
− | ===硬件准备及安装=== | + | ===== 方法1 ===== |
− | 我们设计了专用的转接板,支持6路摄像头,兼容TX2 Devkit和Xavier。
| + | 在jetson板子上,查看当前L4T版本,尽量使用同一版本进行替换。 |
− | [[File:ADP-N1-6CAM YT0.95-4I.jpg|center|thumb|800x800px|6cam interposer board connected with 6 cameras]] | + | |
| + | <code>cat /etc/nv_tegra_release</code> |
| + | |
| + | 如显示: |
| + | |
| + | <code># R32 (release), REVISION: 4.3......</code> |
| + | |
| + | 则表示当前L4T版本为32.4.3。 |
| + | |
| + | ===== 方法2 ===== |
| + | 参考这个[https://pypi.org/project/jetson-stats/ 链接],安装jetson-stats: |
| | | |
| + | <code>jtop</code> |
| | | |
| + | ===硬件准备及安装=== |
| + | 我们设计了专用的转接板,支持6路摄像头,兼容TX2 Devkit,Xavier和Orin。 |
| + | {| class="wikitable" |
| + | !ADP-N1连接图 |
| + | !ADP-N1 V2.0连接图 |
| + | |- |
| + | |[[File:ADP-N1-6CAM YT0.95-4I.jpg|center|thumb|600x600px|6cam interposer board connected with 6 cameras|alt=]] |
| + | |[[File:ADP-N1-V2.0 6CAM-VEYE-MIPI-327.jpg|alt=|center|thumb|600x600px|6cam interposer board connected with 6 cameras]] |
| + | |} |
| + | '''<big><big>特别的,VEYE-MIPI-IMX335由于功耗较高,必须使用12V DC端子提供辅助供电。参考[[ADP-N1-V2.0 Adapter Board Data Sheet#Adapter Board Pinlist.EF.BC.88.E6.8E.A5.E5.8F.A3.E5.92.8C.E5.BC.95.E8.84.9A.E8.AF.B4.E6.98.8E.EF.BC.89|ADP-N1的J11]]。</big></big>''' |
| ====英伟达TX2 Developer Kit==== | | ====英伟达TX2 Developer Kit==== |
| | | |
| | | |
| [[File:TX2 Devkit 6cam.jpg|center|thumb|800x800px|'''TX2 Devkit 6 cameras connection''']] | | [[File:TX2 Devkit 6cam.jpg|center|thumb|800x800px|'''TX2 Devkit 6 cameras connection''']] |
− | <br /> | + | <br />'''注意,使用中请务必用螺丝将ADP转接板固定到底板上面,以保证转接板安装平正。''' |
| | | |
− | ====英伟达AGX Xavier==== | + | ====英伟达AGX Xavier(AGX Orin与此相同)==== |
| 转接板是兼容TX2转接板的,连接方式如图: | | 转接板是兼容TX2转接板的,连接方式如图: |
− | [[File:AGX XAVIER 6cam.jpg|center|thumb|800x800px|Connect VEYE cameras to AGX Xavier(绿色版本托板为临时版本,正式版本是黑色的) ]] | + | [[File:ADP-N1-V2.0 XAVIER 6CAM.jpg|alt=Connect VEYE cameras to AGX Xavier|center|thumb|800x800px|Connect VEYE cameras to AGX Xavier]] |
− | | + | <br />'''注意,使用中请务必用螺丝将ADP转接板固定到底板上面,以保证转接板安装平正。''' |
− | ====英伟达Nano 和 Xavier NX Devkit==== | + | ====英伟达Nano 、 Xavier NX Devkit和TX2 NX==== |
| Xavier NX 的接口是兼容树莓派和Jetson Nano的。 连接方式如图: | | Xavier NX 的接口是兼容树莓派和Jetson Nano的。 连接方式如图: |
| [[File:Xavier NX connection with VEYE-MIPI-327.jpg|alt=Xavier NX connection with VEYE-MIPI-327|center|thumb|800x800px|'''Xavier NX connection with VEYE-MIPI-327''']] | | [[File:Xavier NX connection with VEYE-MIPI-327.jpg|alt=Xavier NX connection with VEYE-MIPI-327|center|thumb|800x800px|'''Xavier NX connection with VEYE-MIPI-327''']] |
| [[File:Xavier NX connection with CS-MIPI-IMX307.jpg|alt=Xavier NX connection with CS-MIPI-IMX307|center|thumb|800x800px|Xavier NX connection with CS-MIPI-IMX307(3.3V供电)]] | | [[File:Xavier NX connection with CS-MIPI-IMX307.jpg|alt=Xavier NX connection with CS-MIPI-IMX307|center|thumb|800x800px|Xavier NX connection with CS-MIPI-IMX307(3.3V供电)]] |
| [[File:Jetson nano to Veye327.jpg|alt=Jetson Nano A02 与VEYE模组连接|center|thumb|800x800px|Jetson Nano A02 与VEYE模组连接]] | | [[File:Jetson nano to Veye327.jpg|alt=Jetson Nano A02 与VEYE模组连接|center|thumb|800x800px|Jetson Nano A02 与VEYE模组连接]] |
| + | [[File:VEYE camera connection with Orin Nano and Orin NX.jpg|center|thumb|800x800px|VEYE camera connection with Orin Nano and Orin NX]] |
| <br /> | | <br /> |
− | ===更新Jetson Nano, Jetson TX2,AGX Xavier和Xavier NX系统=== | + | |
| + | ===更新Jetson Nano,TX2,Xavier和Orin系统=== |
| | | |
| ====概述==== | | ====概述==== |
− | 本章节描述怎样更新Jetson系统以支持我们的摄像头模组。要支持我们的摄像头模组,需要更新Jetson系统的L4T(Linux for Tegra)的两个部分,Image和DTB。
| + | 本章节描述怎样更新Jetson系统以支持我们的摄像头模组。 |
| | | |
− | Image部分,我们增加了摄像头驱动,DTB部分则指明了使用的摄像头型号。一般情况下,只需使用我们已编译好的Image和DTB,非必要情况下,无需根据代码进行编译。
| + | * Jetpack4.x版本 |
| | | |
− | 特别的,对于Jetson Nano 和 Xavier NX,我们提供了TF卡的烧写镜像。
| + | 要支持我们的摄像头模组,需要更新Jetson系统的L4T(Linux for Tegra)的两个部分,Image和dtb。 |
| | | |
− | ====整体烧写Jetson Nano 和 Xavier NX Devkit====
| + | Image部分,我们增加了摄像头驱动,dtb部分则指明了使用的摄像头型号。一般情况下,只需使用我们已编译好的Image和dtb,非必要情况下,无需根据代码进行编译。 |
− | '''''此方法不再推荐,因为这种模式下,在某些情况下,DTB分区会恢复成默认值。推荐采用使用预编译好Image和DTB这种方式来进行驱动升级。'''''
| |
| | | |
− | 客户可选择直接使用我们编译好的镜像进行系统更新,以支持我司摄像头模组。
| + | * Jetpack5.0以后的版本 |
| | | |
− | *镜像下载路径:
| + | 驱动不再编译进Image,而是以独立module的形式加载到系统中。dtb我们现在依然是采用整体编译到一起的方式以方便进行替换。 |
| | | |
− | baiduyun链接:https://pan.baidu.com/s/1sWrcfEOivjuQ7T7P5bVcng
| + | dtb也可以以overlay形式动态加载,详情参考nVidia官方的NVIDIA® Jetson™ Linux开发者指南。 |
| | | |
− | google driver:https://drive.google.com/drive/folders/1KHSMTdyw-ZczR1yJPj-5y9eIv7izbgt3?usp=sharing
| + | * MV系列模组 |
| | | |
− | 下载后请先解压后烧写。
| + | MV系列模组,为了支持扩展数据类型和外触发模式,我们在Image中增加了相关功能。因此无论Jetpack版本如何,都需要更新Image。是否需要更新modules,取决于Jetpack版本。 |
− | | |
− | 如百度云盘下载过慢,可以单独联系我公司客服xumm@csoneplus.com索取。
| |
− | | |
− | *烧写方法<code><nowiki/></code>
| |
− | | |
− | 参考[https://developer.nvidia.com/embedded/learn/get-started-jetson-xavier-nx-devkit#write 官方链接]
| |
| | | |
| ====BSP包介绍:==== | | ====BSP包介绍:==== |
| | | |
| =====路径===== | | =====路径===== |
− | [https://github.com/veyeimaging/nvidia_jetson_veye_bsp/tree/master/kernel_image https://github.com/veyeimaging/nvidia_jetson_veye_bsp]
| + | https://github.com/veyeimaging/nvidia_jetson_veye_bsp |
| | | |
| =====bsp包包括以下主要内容:===== | | =====bsp包包括以下主要内容:===== |
| | | |
− | *预编译好的linux kernel:Image
| |
| *预编译好的不同平台下的dtb | | *预编译好的不同平台下的dtb |
| *driver源码 | | *driver源码 |
Line 76: |
Line 140: |
| *i2c通信工具集 | | *i2c通信工具集 |
| | | |
− | ====Jetson Nano和Xavier NX无需HOST PC升级方法==== | + | 在项目release包中还包括: |
| + | |
| + | * 预编译好的linux kernel:Image |
| + | * 预编译好的摄像机驱动 |
| + | |
| + | ==== DTB文件名称与板卡对应关系 ==== |
| + | |
| + | =====Nano A02===== |
| + | <code>tegra210-p3448-0000-p3449-0000-a02.dtb</code> |
| + | |
| + | ===== Nano B01 Devkit ===== |
| + | <code>tegra210-p3448-0000-p3449-0000-b00.dtb</code> |
| + | |
| + | ===== Nano B01 4G emmc ===== |
| + | <code>tegra210-p3448-0002-p3449-0000-b00.dtb</code> |
| + | |
| + | ===== Nano 2GB ===== |
| + | <code>tegra210-p3448-0003-p3542-0000.dtb</code> |
| + | =====TX2 Devkit===== |
| + | <code>tegra186-quill-p3310-1000-c03-00-base.dtb</code> |
| + | |
| + | ===== TX2 NX(p3509-0000 carrier board) ===== |
| + | use the same carrier board with XAVIER NX Devkit |
| + | |
| + | <code>tegra186-p3636-0001-p3509-0000-a01.dtb</code> |
| + | =====AGX XAVIER ===== |
| + | <code>tegra194-p2888-0001-p2822-0000.dtb</code> |
| + | =====XAVIER NX Devkit===== |
| + | <code>tegra194-p3668-all-p3509-0000.dtb</code> |
| + | |
| + | 特别的,对于Jetpack5.x: |
| + | |
| + | * Jetson Xavier NX (P3668-0000) For developer kit only: |
| + | |
| + | <code>tegra194-p3668-0000-p3509-0000.dtb</code> |
| + | |
| + | * Jetson Xavier NX (P3668-0001) Commercial module: |
| | | |
− | =====查看当前L4T版本===== | + | <code>tegra194-p3668-0001-p3509-0000.dtb</code> |
− | 首先查看当前L4T版本,尽量使用同一版本进行替换。
| + | =====AGX Orin ===== |
| + | <code>tegra234-p3701-0000-p3737-0000.dtb</code> |
| + | =====Orin NX ===== |
| + | |
| + | *Jetson Orin NX 16G(P3767-0000): |
| + | |
| + | <code>tegra234-p3767-0000-p3768-0000-a0.dtb</code> |
| + | |
| + | * Jetson Orin NX 8G (P3767-0001): |
| + | |
| + | <code>tegra234-p3767-0001-p3768-0000-a0.dtb</code> |
| + | =====Orin Nano ===== |
| + | |
| + | *Jetson Orin Nano 8G(P3767-0003) and Jetson Orin Nano Devkit(P3767-0005): |
| + | |
| + | <code>tegra234-p3767-0003-p3768-0000-a0.dtb</code> |
| | | |
− | <code>cat /etc/nv_tegra_release</code>
| + | * Jetson Orin Nano 4G (P3767-0004): |
| | | |
− | 如显示:
| + | <code>tegra234-p3767-0004-p3768-0000-a0.dtb</code> |
| + | ==== DTB文件名称与摄像头对应关系 ==== |
| + | 每个主板的dtb目录下,存放了对应摄像头型号的目录,一般可以直接通过目录名称知道对应的摄像头型号。 |
| | | |
− | <code># R32 (release), REVISION: 4.3......</code>
| + | 特别的: |
| | | |
− | 则表示当前版本为32.4.3。
| + | 1、VEYE-MIPI-CAM2M 是新版本的VEYE系列dtb,支持所有VEYE 200W系列产品,包括VEYE-MIPI-327E、VEYE-MIPI-IMX327S、VEYE-MIPI-IMX462、VEYE-MIPI-IMX385。 |
| | | |
− | =====下载bsp包到Jetson板子=====
| + | 2、以fpdlink为后缀的,对应fpdlink同轴型号模组。 |
− | 在Jetson Nano或者Xavier NX上面,执行:
| |
| | | |
− | <code>git clone <nowiki>https://github.com/veyeimaging/nvidia_jetson_veye_bsp.git</nowiki></code>
| + | 3、MV-MIPI-MVCAM是所有MV系列和RAW系列摄像机通用的dtb(RAW-MIPI-AR0234M和RAW-MIPI-IMX462M除外)。 |
| | | |
− | =====升级Image===== | + | ====Jetson板上直接升级的方法==== |
− | 首先在bsp包目录下,找到对应版本的Image压缩包,解压后执行:
| + | 适用型号:Jetson Nano、Xavier和Orin。 |
| | | |
− | <code>sudo cp <path to your Image dir>/Image /boot/Image -f</code>
| + | 注:AGX Xavier在Jetpack4.4以后的版本,建议可以使用此方法。以前版本我们未作验证,不建议使用。 |
| | | |
− | =====升级dtb===== | + | =====查看当前L4T版本===== |
− | 在bsp包目录下,找到您对应的摄像头模组型号和L4T版本号的dtb文件。
| + | 首先查看当前L4T版本,尽量使用同一版本进行替换。 |
| | | |
− | <code>sudo cp <path to your dtb dir>/<DTB file name> /boot/ -f</code> | + | <code>cat /etc/nv_tegra_release</code> |
| | | |
− | 然后,编辑 /boot/extlinux/extlinux.conf文件,增加如下一行。
| + | 如显示: |
| | | |
− | <code>FDT /boot/<DTB file name></code> | + | <code># R32 (release), REVISION: 4.3......</code> |
| | | |
− | ====通过HOST PC升级方法====
| + | 则表示当前L4T版本为32.4.3。 |
| | | |
− | =====HOST开发环境准备===== | + | ===== 关于L4T 32.7.2的说明 ===== |
| + | L4T32.7.2版本的Image和dts与L4T32.7.1版本完全一致,所以直接使用L4T32.7.1相关目录下内容即可。 |
| | | |
− | *编译工具链
| + | 此外,升级需要更新cboot,请参考常见问题章节。 |
| | | |
− | 请参考[https://docs.nvidia.com/jetson/l4t/index.html#page/Tegra%2520Linux%2520Driver%2520Package%2520Development%2520Guide%2Fxavier_toolchain.html%23wwpID0ESHA 这个链接]安装编译工具链。
| + | =====下载bsp包到Jetson板子===== |
| + | 在Jetson 板子上面,执行: |
| | | |
− | *L4T源码和Rootfs
| + | <code>wget <nowiki>https://github.com/veyeimaging/nvidia_jetson_veye_bsp/releases/latest/download/nvidia_jetson_veye_bsp.tar.gz</nowiki></code> |
| | | |
− | 可以通过SDK Manager或者[https://developer.nvidia.com/embedded/downloads 直接下载]两种方式来获得源码。具体参考官方文档,此处不再赘述。
| + | 或者在浏览器地址栏中输入<code><nowiki>https://github.com/veyeimaging/nvidia_jetson_veye_bsp/releases/latest/</nowiki></code> |
| | | |
− | 使用SDK Manager时同步代码采用如下指令:
| + | 下载发布版本。 |
| | | |
− | ''- Jetpack4.2.2''
| + | <code>tar -xzvf nvidia_jetson_veye_bsp.tar.gz</code> |
| | | |
− | <code>./source_sync.sh -t tegra-l4t-r32.2.1</code>
| + | =====升级Image(适用于Jetpack4.x以及MV系列摄像头的应用)===== |
| + | 备份原来的Image |
| | | |
− | ''- Jetpack4.3''
| + | <code>cp /boot/Image /boot/Image.backup</code> |
| | | |
− | <code>./source_sync.sh -t tegra-l4t-r32.3.1</code> | + | <code>cp /boot/Image.sig /boot/Image.sig.backup</code> |
| | | |
− | ''- Jetpack4.4''
| + | 在bsp包目录下,找到对应版本的Image压缩包,解压,然后执行: |
| | | |
− | <code>./source_sync.sh -t tegra-l4t-r32.4.3</code> | + | <code>sudo cp <path to your Image dir>/Image /boot/Image -f</code> |
| | | |
− | *配置开发环境 | + | 特别的,对于xavier需要使用签名后的文件(比如Image_l4t_r32.*.*_veyecam_signed_4_xavier目录下),把新的Image和Image.sig拷贝的XAVIER的/boot/目录下。 |
| | | |
− | 以下步骤假设SDK安装目录为<TOPDIR>,源代码在$L4T_DIR/sources目录。
| + | <code>sudo cp <path to your Image dir>/Image* /boot/-f</code> |
| | | |
− | ''- Nano@Jetpack4.2.2''
| + | 重启后生效。 |
| | | |
− | <code>export TOP_DIR=<absolute path to top dir;in my case is /home/xumm/nvidia/nvidia_sdk/JetPack_4.2.2_Linux_GA_P3448/></code>
| + | ===== 安装modules(适用于Jetpack5.x) ===== |
| + | 查看系统linux版本 |
| | | |
− | ''- Nano@Jetpack4.3''
| + | <code>uname -r</code> |
| | | |
− | <code>export TOP_DIR=<absolute path to top dir;in my case is /home/xumm/nvidia/nvidia_sdk/JetPack_4.3_Linux_JETSON_NANO_DEVKIT/></code> | + | 在<code>nvidia_jetson_veye_bsp/ko</code>目录下找到对应的驱动版本目录, |
| | | |
− | ''- Nano@Jetpack4.4''
| + | <code>sudo cp nvidia_jetson_veye_bsp/ko/$(uname -r)/* /lib/modules/$(uname -r)/kernel/drivers/media/i2c/ -f</code> |
| | | |
− | <code>export TOP_DIR=<absolute path to top dir;in my case is /home/xumm/nvidia/nvidia_sdk/JetPack_4.4_Linux_JETSON_NANO_DEVKIT/></code>
| + | '''特别的,对于Jetpack5.1版本:''' |
| | | |
− | ''- TX2@Jetpack4.2.2''
| + | <code>sudo cp nvidia_jetson_veye_bsp/ko/5.10.104-tegra-l4t35.2.1/* /lib/modules/$(uname -r)/kernel/drivers/media/i2c/ -f</code> |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/nvidia_sdk/JetPack_4.2.2_Linux_GA_P3310/</code>
| + | '''特别的,对于Jetpack5.1.1版本:''' |
| | | |
− | ''- TX2@Jetpack4.3''
| + | <code>sudo cp nvidia_jetson_veye_bsp/ko/5.10.104-tegra-l4t35.3.1/* /lib/modules/$(uname -r)/kernel/drivers/media/i2c/ -f</code> |
| + | ====== 一般情况 ====== |
| + | 执行如下命令,将modules注册到系统: |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/nvidia_sdk/JetPack_4.3_Linux_P3310/</code> | + | <code>sudo depmod</code> |
| | | |
− | ''- TX2@Jetpack4.4''
| + | ====== 特别的 ====== |
| + | 如果使用fpdlink接口的摄像机模组。必须手动控制加载顺序,保证ds90ub954.ko的加载早于摄像头驱动的加载。 |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/JetPack_4.4_Linux_JETSON_TX2/</code>
| + | 系统启动后,手动按照顺序插入驱动,如: |
| | | |
− | ''- AGX XavierJetpack4.2.2''
| + | <code>sudo insmod ds90ub954.ko</code> |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/nvidia_sdk/JetPack_4.2.2_Linux_GA_P2888/</code> | + | <code>sudo insmod cs_imx307.ko</code> |
| | | |
− | ''- AGX XavierJetpack4.3''
| + | 可将驱动加载的命令添加到启动脚本中。 |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/nvidia_sdk/JetPack_4.3_Linux_P2888/</code>
| + | =====升级dtb===== |
| + | 在bsp包目录下,找到您对应的摄像头模组型号和L4T版本号的dtb文件。 |
| | | |
− | ''- AGX XavierJetpack4.4''
| + | 将新的dtb拷贝的系统目录 |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/nvidia_sdk/JetPack_4.4_Linux_JETSON_AGX_XAVIER/</code> | + | <code>sudo mkdir /boot/veyecam/</code> |
| | | |
− | - ''Xavier NX Jetpack4.4'' | + | <code>sudo cp <path to your dtb dir>/<DTB file name> /boot/veyecam -f</code> |
| | | |
− | <code>export TOP_DIR=/home/xumm/nvidia/nvidia_sdk/JetPack_4.4_Linux_JETSON_XAVIER_NX_DEVKIT</code>
| + | 备份extlinux.conf文件。 |
| | | |
− | - 通用部分
| + | <code>cp /boot/extlinux/extlinux.conf /boot/extlinux/extlinux.conf.back</code> |
| | | |
− | <code>export L4T_DIR=$TOP_DIR/Linux_for_Tegra</code>
| + | 然后,编辑 /boot/extlinux/extlinux.conf文件,在最下面增加如下一行。 |
| | | |
− | <code>export LOCALVERSION=-tegra</code> | + | <code>FDT /boot/veyecam/<DTB file name></code> |
| | | |
− | <code>export LDK_ROOTFS_DIR=$TOP_DIR/Linux_for_Tegra/rootfs</code> | + | 注意:<DTB file name>应当替换为主板对应的dtb名称,确保FDT一行所指明的文件确实正确存在。 |
| | | |
− | <code>export ARCH=arm64</code>
| + | 重启后生效。 |
| | | |
− | <code>export CROSS_COMPILE=aarch64-linux-gnu-</code>
| + | ====通过HOST PC烧写Jetson主板进行升级的方法==== |
| + | 本节提供第二种升级系统的方法。这个方法与上一节的方法的目标相同,二选一即可。本方法比较复杂,对于Nano,Xavier,Orin不建议使用。 |
| | | |
− | <code>export CROSS32CC=arm-linux-gnueabihf-gcc</code>
| + | 特别的,对于TX2系统,只能采取本节的方法升级。 |
| | | |
− | <code>export TEGRA_KERNEL_OUT=$L4T_DIR/sources/kernel/out_kernel</code>
| + | =====烧写标准版本镜像===== |
| + | '''''注意:如您的Jetson板子已经正确烧写了标准版本的镜像,此步骤可以跳过。''''' |
| | | |
− | <code>export KERNEL_PATH=$L4T_DIR/sources/kernel/out_kernel</code>
| + | 可以使用SDK Manager直接烧写标准镜像,也可以按照如下步骤手动烧写。 |
| | | |
− | <code>export NVIDIA_PATH=$L4T_DIR/sources/kernel/nvidia</code>
| + | *配置环境变量 |
| | | |
− | <code>export NANO_DTS_PATH=$L4T_DIR/sources/hardware/nvidia/platform/t210/</code> | + | 以下步骤假设SDK安装目录为<TOPDIR>。 |
| | | |
− | <code>export TX2_DTS_PATH=$L4T_DIR/sources/hardware/nvidia/platform/t18x</code> | + | <code>export TOP_DIR=<absolute path to top dir accroding to your jetpack version and board name;for example /home/xumm/nvidia/nvidia_sdk/JetPack_4.5_Linux_JETSON_XAVIER_NX_DEVKIT/></code> |
| | | |
− | <code>export XAVIER_DTS_PATH=$L4T_DIR/sources/hardware/nvidia/platform/t19x</code>
| + | - 通用部分 |
| | | |
− | <code>cd $L4T_DIR/sources/kernel/kernel-4.9/</code> | + | <code>export L4T_DIR=$TOP_DIR/Linux_for_Tegra</code> |
| | | |
| *生成默认版本烧写镜像,烧写默认镜像到板子,准备好L4T环境 | | *生成默认版本烧写镜像,烧写默认镜像到板子,准备好L4T环境 |
Line 212: |
Line 338: |
| <code>sudo ./apply_binaries.sh</code> | | <code>sudo ./apply_binaries.sh</code> |
| | | |
− | 进入recovery mode并烧写标准版本镜像 | + | 进入recovery mode并烧写标准版本镜像。 |
| | | |
| - Nano | | - Nano |
| | | |
− | <code>sudo ./flash.sh jetson--qspi-sd mmcblk0p1</code> | + | <code>sudo ./flash.sh jetson-nano-devkit mmcblk0p1</code> |
| + | |
| + | <code>sudo ./flash.sh jetson-nano-2gb-devkit mmcblk0p1</code> |
| | | |
| ''- TX2'' | | ''- TX2'' |
| | | |
| <code>sudo ./flash.sh jetson-tx2 mmcblk0p1</code> | | <code>sudo ./flash.sh jetson-tx2 mmcblk0p1</code> |
| + | |
| + | ''- TX2 NX(p3509-0000 carrier board)'' |
| + | |
| + | <code>sudo ./flash.sh jetson-xavier-nx-devkit-tx2-nx mmcblk0p1</code> |
| | | |
| ''- AGX Xavier'' | | ''- AGX Xavier'' |
Line 232: |
Line 364: |
| <code>cd $L4T_DIR</code> | | <code>cd $L4T_DIR</code> |
| | | |
− | <code>git clone https://github.com/veyeimaging/nvidia_jetson_veye_bsp<nowiki/>.git</code><code><nowiki/></code> | + | <code>wget <nowiki>https://github.com/veyeimaging/nvidia_jetson_veye_bsp/releases/latest/download/nvidia_jetson_veye_bsp.tar.gz</nowiki></code> |
| + | |
| + | <code>tar -xzvf nvidia_jetson_veye_bsp.tar.gz</code> |
| | | |
| <code>export RELEASE_PACK_DIR=$L4T_DIR/nvidia_jetson_veye_bsp</code> | | <code>export RELEASE_PACK_DIR=$L4T_DIR/nvidia_jetson_veye_bsp</code> |
| | | |
| =====升级Image和DTB===== | | =====升级Image和DTB===== |
− | prebuilt Image on github:https://github.com/veyeimaging/nvidia_jetson_veye_bsp/tree/master/kernel_image
| + | 解压开下载到的nvidia_jetson_veye_bsp.tar.gz,找到对应版本的Image。 |
| | | |
| *升级Image文件 | | *升级Image文件 |
Line 251: |
Line 385: |
| <code>sudo cp <path to your Image dir>/Image /boot/Image -f</code> | | <code>sudo cp <path to your Image dir>/Image /boot/Image -f</code> |
| | | |
− | ''- AGX Xavier 和Xavier NX'' | + | ''- Xavier 和Orin'' |
| | | |
− | 需要使用签名后的文件,把新的Image和Image.sig拷贝的XAVIER的/boot/目录下。
| + | 需要使用签名后的文件(比如Image_l4t_r32.*.*_veyecam_signed_4_xavier目录下),把新的Image和Image.sig拷贝的XAVIER的/boot/目录下。 |
| | | |
| <code>sudo cp <path to your Image dir>/Image /boot/Image -f</code> | | <code>sudo cp <path to your Image dir>/Image /boot/Image -f</code> |
| | | |
− | <code><s>sudo cp <path to your Image dir>/Image.sig /boot/Image.sig -f</s></code> | + | <code>sudo cp <path to your Image dir>/Image.sig /boot/Image.sig -f</code> |
| | | |
| <s>在Host PC执行</s> | | <s>在Host PC执行</s> |
Line 281: |
Line 415: |
| - ''Nano'' | | - ''Nano'' |
| | | |
− | <code>sudo ./flash.sh -r -k DTB jetson-nano-qspi-sd mmcblk0p1</code> | + | <code><s>sudo ./flash.sh -r -k DTB jetson-nano-qspi-sd mmcblk0p1</s></code> |
| + | |
| + | <code>sudo ./flash.sh -r -k DTB jetson-nano-devkit mmcblk0p1</code> |
| + | |
| + | <code>sudo ./flash.sh -r -k DTB jetson-nano-2gb-devkit mmcblk0p1</code> |
| | | |
| ''- TX2'' | | ''- TX2'' |
| | | |
| <code>sudo ./flash.sh -r -k kernel-dtb jetson-tx2 mmcblk0p1</code> | | <code>sudo ./flash.sh -r -k kernel-dtb jetson-tx2 mmcblk0p1</code> |
| + | |
| + | ''- TX2 NX(p3509-0000 carrier board)'' |
| + | |
| + | <code>sudo ./flash.sh -r -k kernel-dtb jetson-xavier-nx-devkit-tx2-nx mmcblk0p1</code> |
| | | |
| ''- AGX Xavier'' | | ''- AGX Xavier'' |
Line 299: |
Line 441: |
| ====Image和DTB更新成功了吗?==== | | ====Image和DTB更新成功了吗?==== |
| 完成Image和DTB的更新后,可以使用以下步骤检查操作是否成功。 | | 完成Image和DTB的更新后,可以使用以下步骤检查操作是否成功。 |
− |
| |
− | =====对于Image=====
| |
− | <code>ls /sys/bus/i2c/drivers/</code>
| |
− |
| |
− | 应当有 veye327 csx307 cssc132 目录的存在
| |
| | | |
| =====对于DTB===== | | =====对于DTB===== |
| DTB在不同的平台和不同的摄像头模组都会有所不同。 | | DTB在不同的平台和不同的摄像头模组都会有所不同。 |
| | | |
− | - Nano A02 | + | - Nano A02/ Nano 2G |
| | | |
| <code>ls /proc/device-tree/host1x/i2c@546c0000/</code> | | <code>ls /proc/device-tree/host1x/i2c@546c0000/</code> |
Line 320: |
Line 457: |
| <code>ls /proc/device-tree/i2c@3180000/tca9548@70/i2c@*</code> | | <code>ls /proc/device-tree/i2c@3180000/tca9548@70/i2c@*</code> |
| | | |
− | - AGX Xavier
| + | or |
| | | |
− | <code>ls /proc/device-tree/i2c@3180000/tca9548@70/i2c@*</code> | + | <code>ls /proc/device-tree/i2c@3180000/tca9548@77/i2c@*</code> |
| | | |
− | - Xavier NX | + | - AGX Xavier和AGX Orin |
| | | |
− | <code>ls /proc/device-tree/cam_i2cmux/i2c@*</code> | + | <code>ls /proc/device-tree/i2c@3180000/tca9548@70/i2c@*</code> |
− | | |
− | 应当可以发现摄像头型号。
| |
| | | |
− | ====使用源码进行编译====
| + | or |
| | | |
− | =====编译kernel=====
| + | <code>ls /proc/device-tree/i2c@3180000/tca9548@77/i2c@*</code> |
| | | |
− | *patch代码
| + | - Xavier NX and TX2 NX(p3509-0000 carrier board) |
| | | |
− | <code>cp $RELEASE_PACK_DIR/drivers_source/cam_drv_src/* $NVIDIA_PATH/drivers/media/i2c/</code> | + | <code>ls /proc/device-tree/cam_i2cmux/i2c@*</code> |
| | | |
− | ''- r32.2.1''
| + | 应当可以发现摄像头型号。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/drivers_source/kernel_veyecam_config_32.2.1 $L4T_DIR/sources/kernel/kernel-4.9/arch/arm64/configs/tegra_veyecam_defconfig</code> | + | =====对于Image或者ko===== |
| + | <code>ls /sys/bus/i2c/drivers/</code> |
| | | |
− | ''- r32.3.1''
| + | 正确安装摄像头时,摄像头的相关目录应当存在,如 veyecam csx307 cssc132 mvcam等。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/drivers_source/kernel_veyecam_config_32.3.1 $L4T_DIR/sources/kernel/kernel-4.9/arch/arm64/configs/tegra_veyecam_defconfig</code>
| + | ==== 防止被升级所覆盖 ==== |
| + | 确定Image和dtb成功更新之后,请执行以下命令,防止kernel和dtb被升级覆盖。 |
| | | |
− | ''- r32.4.2''
| + | <code>sudo apt-mark hold nvidia-l4t-kernel nvidia-l4t-kernel-dtbs</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/drivers_source/kernel_veyecam_config_32.4.2 $L4T_DIR/sources/kernel/kernel-4.9/arch/arm64/configs/tegra_veyecam_defconfig</code>
| + | ====使用源码进行编译==== |
| | | |
− | ''- r32.4.3''
| + | 请参考:[[VEYE CS Camera source for Jetson/zh|英伟达Jetson平台上VEYE摄像头驱动源码编译指南]] |
| | | |
− | <code>cp $RELEASE_PACK_DIR/drivers_source/kernel_veyecam_config_32.4.3 $L4T_DIR/sources/kernel/kernel-4.9/arch/arm64/configs/tegra_veyecam_defconfig</code>
| + | kernel和DTS编译完成后,可以按照上面的步骤升级Image和DTB。 |
| | | |
− | *编译
| + | ===应用和测试=== |
| + | ====系统状态检测==== |
| + | 完成系统安装后,在Jetson板端执行以下命令来检测是否正确连接摄像头。 |
| | | |
− | <code>cd $L4T_DIR/sources/kernel/kernel-4.9/</code>
| + | *VEYE-MIPI-X型号(使用VEYE-MIPI-CAM2M dtb) |
| | | |
− | <code>make ARCH=arm64 O=$TEGRA_KERNEL_OUT tegra_veyecam_defconfig</code> | + | <code>dmesg | grep veye</code> |
| | | |
− | <code>make ARCH=arm64 O=$TEGRA_KERNEL_OUT Image -j4</code>
| + | 应当有类似如下提示: |
| | | |
− | 编译完成的Image文件在 $TEGRA_KERNEL_OUT/arch/arm64/boot/Image,可以用于整体烧写,也可以用于动态升级。
| + | <code>camera id is veyecam</code> |
| | | |
− | 以下用于整体烧写
| + | <code>sensor is IMX327/IMX462/IMX385</code> |
| | | |
− | <code>sudo cp $TEGRA_KERNEL_OUT/arch/arm64/boot/Image $L4T_DIR/kernel/ -f</code> | + | <code>subdev veyecam [i2c_bus]-003b bound</code> |
| | | |
− | *对于xavier,进行签名
| + | 此外,检查/dev/videoX设备节点,应当是存在的。 |
| | | |
− | <code>cd $L4T_DIR</code>
| + | *CS-MIPI-IMX307型号 |
| | | |
− | <code>./l4t_sign_image.sh --file kernel/Image --chip 0x19</code> | + | <code>dmesg | grep x307</code> |
| | | |
− | =====编译DTS=====
| + | 应当有类似如下提示: |
| | | |
− | *patch代码
| + | <code>Detected CS307 sensor</code> |
| | | |
− | ''- '''Nano@Jetpack4.2.2'''''
| + | <code>subdev csx307 [i2c_bus]-003b bound</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.2.2_Linux_GA_P3448/dts\ dtb/common/t210/* -r $NANO_DTS_PATH/</code>
| + | 此外,检查/dev/videoX设备节点,应当是存在的。 |
| | | |
− | 对于VEYE-MIPI-327
| + | *CS-MIPI-SC132型号 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.2.2_Linux_GA_P3448/dts\ dtb/VEYE-MIPI-327/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code> | + | <code>dmesg | grep cssc132</code> |
| | | |
− | 对于CS-MIPI-IMX307
| + | 应当有类似如下提示: |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.2.2_Linux_GA_P3448/dts\ dtb/CS-MIPI-IMX307/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code> | + | <code>subdev cssc132 [i2c_bus]-003b bound</code> |
| | | |
− | ''- '''Nano@Jetpack4.3'''''
| + | 此外,检查/dev/videoX设备节点,应当是存在的。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.3_Linux_P3448/dts\ dtb/common/t210/* -r $NANO_DTS_PATH/</code>
| + | * VEYE-MIP-IMX335型号 |
| | | |
− | 对于VEYE-MIPI-327
| + | <code>dmesg | grep imx335</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.3_Linux_P3448/dts\ dtb/VEYE-MIPI-327/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code>
| + | 应当有类似如下提示: |
| | | |
− | 对于CS-MIPI-IMX307
| + | <code>camera id is VEYE-MIPI-IMX335</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.3_Linux_P3448/dts\ dtb/CS-MIPI-IMX307/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code> | + | <code>subdev veye_imx335 [i2c_bus]-003b bound</code> |
| | | |
− | ''- '''Nano@Jetpack4.4'''''
| + | 此外,检查/dev/videoX设备节点,应当是存在的。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.4_Linux_JETSON_NANO_DEVKIT/dts\ dtb/common/t210/* -r $NANO_DTS_PATH/</code>
| + | *VEYE-MIPI-327型号(使用VEYE-MIPI-327 dtb) |
| | | |
− | 对于VEYE-MIPI-327
| + | <code>dmesg | grep veye327</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.4_Linux_JETSON_NANO_DEVKIT/dts\ dtb/VEYE-MIPI-327/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code>
| + | 应当有类似如下提示: |
| | | |
− | 对于CS-MIPI-IMX307
| + | <code>Detected VEYE327 sensor</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.4_Linux_JETSON_NANO_DEVKIT/dts\ dtb/CS-MIPI-IMX307/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code> | + | <code>subdev veye327 [i2c_bus]-003b bound</code> |
| | | |
− | 对于CS-MIPI-SC132
| + | 此外,检查/dev/videoX设备节点,应当是存在的。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Nano/JetPack_4.4_Linux_JETSON_NANO_DEVKIT/dts\ dtb/CS-MIPI-SC132/tegra210-porg-plugin-manager.dtsi -r $NANO_DTS_PATH/porg/kernel-dts/porg-plugin-manager</code> | + | 驱动提示信息中的<code>[i2c_bus]</code>表示此摄像头对应的i2c总线。 |
| + | ====视频流软件包和测试==== |
| + | 摄像头模组在Jetson系统中映射为/dev/videoX设备节点。 |
| | | |
− | ''- '''TX2@Jetpack4.2.2'''''
| + | 操作系统启动过程中,按照i2c bus从小到大的顺序探测摄像头。X值是按照探测的逻辑顺序[0-5]递增的。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.2.2_Linux_GA_P3310/dts\ dtb/common/t18x/* -r $TX2_DTS_PATH/</code>
| + | 举例说,如果只接入一个摄像头,无论硬件连接到哪个位置,X都为0。如果接入5个,则按照i2c bus从小到大,X为[0-4]。 |
| | | |
− | 对于CS-MIPI-IMX307
| + | gstreamer中,v4l2src和nvv4l2camerasrc可以通过指明device=/dev/videoX来访问不同的摄像头。 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.2.2_Linux_GA_P3310/dts\ dtb/CS-MIPI-IMX307/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | =====Gstreamer Usage===== |
| + | <code>export DISPLAY=:0</code> |
| | | |
− | 对于VEYE-MIPI-327
| + | *视频预览1080p HD |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.2.2_Linux_GA_P3310/dts\ dtb/VEYE-MIPI-327/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc device=/dev/video0 ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)1920, height=(int)1080" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nv3dsink sync=false</code> |
| | | |
− | ''- '''TX2@Jetpack4.3'''''
| + | <code>gst-launch-1.0 nvv4l2camerasrc device=/dev/video0 ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)1920, height=(int)1080" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)NV12" ! nv3dsink sync=false</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.3_Linux_P3310/dts\ dtb/common/t18x/* -r $TX2_DTS_PATH/</code>
| + | * 视频预览1080p HD(using xvimagesink sink if supported) |
| | | |
− | 对于CS-MIPI-IMX307
| + | <code>export DISPLAY=:0</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.3_Linux_P3310/dts\ dtb/CS-MIPI-IMX307/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | <code>gst-launch-1.0 -e v4l2src io-mode=4 device=/dev/video0 do-timestamp=true ! 'video/x-raw, width=1920, height=1080, framerate=30/1, format=UYVY' ! xvimagesink sync=false</code> |
| | | |
− | 对于CS-MIPI-SC132
| + | *视频预览720p@60 HD(模组支持此分辨率时) |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.3_Linux_P3310/dts\ dtb/CS-MIPI-SC132/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)1280, height=(int)720, framerate=(fraction)60/1" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nv3dsink sync=false</code> |
| | | |
− | 对于VEYE-MIPI-327
| + | *视频预览1280*1080@45fpsHD |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.3_Linux_P3310/dts\ dtb/VEYE-MIPI-327/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)1280, height=(int)1080, framerate=(fraction)45/1" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nv3dsink sync=false</code> |
| | | |
− | ''- '''TX2@Jetpack4.4'''''
| + | *视频预览640*480@130fps(模组支持此分辨率时) |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.4_Linux_JETSON_TX2/dts\ dtb/common/t18x/* -r $TX2_DTS_PATH/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)640, height=(int)480, framerate=(fraction)130/1" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nv3dsink sync=false</code> |
| | | |
− | 对于CS-MIPI-IMX307
| + | *并列预览两路视频 1080p HD |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.4_Linux_JETSON_TX2/dts\ dtb/CS-MIPI-IMX307/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | <code>WIDTH=960</code> |
| | | |
− | 对于CS-MIPI-SC132
| + | <code>HEIGHT=540</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.4_Linux_JETSON_TX2/dts\ dtb/CS-MIPI-SC132/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code> | + | <code>CAPS="video/x-raw(memory:NVMM),format=(string)UYVY, width=1920, height=1080"</code> |
| | | |
− | 对于VEYE-MIPI-327
| + | <code>gst-launch-1.0 nvcompositor name=comp sink_0::xpos=0 sink_0::ypos=0 sink_0::width=$WIDTH sink_0::height=$HEIGHT sink_1::xpos=$WIDTH sink_1::ypos=0 sink_1::width=$WIDTH sink_1::height=$HEIGHT ! nv3dsink nvv4l2camerasrc device=/dev/video0 ! $CAPS ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420"! comp. nvv4l2camerasrc device=/dev/video1 ! $CAPS ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420"! comp.</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/TX2/JetPack_4.4_Linux_JETSON_TX2/dts\ dtb/VEYE-MIPI-327/tegra186-quill-p3310-1000-a00-00-base.dts $TX2_DTS_PATH/quill/kernel-dts/</code>
| + | * Gstreamer 嵌入到 OpenCV |
| | | |
− | ''- '''AGX Xavier@Jetpack4.2.2'''''
| + | I think maybe OpenCV do not support I420 data format input,so you should convert it to BGR format. |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.2.2_Linux_GA_P2888/dts\ dtb/common/t19x/* -r $XAVIER_DTS_PATH/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc ! video/x-raw(memory:NVMM), format=(string)UYVY, width=(int)1920, height=(int)1080 ! nvvidconv ! video/x-raw(memory:NVMM), format=(string)I420 ! nvvidconv ! video/x-raw, format=(string)BGRx ! videoconvert ! video/x-raw, format=(string)BGR ! appsink</code> |
| | | |
− | 对于CS-MIPI-IMX307
| + | *视频录像1080p HD |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.2.2_Linux_GA_P2888/dts\ dtb/CS-MIPI-IMX307/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc num-buffers=300 ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)1920, height=(int)1080" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)NV12" ! nvv4l2h264enc control-rate=1 bitrate=10000000 ! h264parse ! qtmux ! filesink location=filename.mp4 -e</code> |
| | | |
− | 对于VEYE-MIPI-327
| + | *录像回放 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.2.2_Linux_GA_P2888/dts\ dtb/VEYE-MIPI-327/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code> | + | <code>gst-launch-1.0 filesrc location=filename.mp4 ! qtdemux ! queue ! h264parse ! nvv4l2decoder ! nv3dsink -e</code> |
| | | |
− | ''- '''AGX Xavier@Jetpack4.3'''''
| + | *抓拍图片 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.3_Linux_P2888/dts\ dtb/common/t19x/* -r $XAVIER_DTS_PATH/</code> | + | <code>gst-launch-1.0 v4l2src num-buffers=1 ! "video/x-raw,format=(string)UYVY, width=(int)1920, height=(int)1080" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nvjpegenc ! filesink location=jpgname.jpg</code> |
| | | |
− | 对于CS-MIPI-IMX307
| + | ===== VEYE-MIPI-IMX335 的gstreamer例子 ===== |
| + | 由于VEYE-MIPI-IMX335仅支持几种特定的分辨率模式,其驱动我们采用了use_sensor_mode_id模式。 |
| + | {| class="wikitable" |
| + | |+VEYE-MIPI-IMX335 mode |
| + | !./veye5_mipi_i2c.sh video mode |
| + | !v4l2-ctl sensor_mode |
| + | !video format |
| + | |- |
| + | |1 |
| + | |0 |
| + | |2592x1944@20fps |
| + | |- |
| + | |2 |
| + | |1 |
| + | |2592x1944@12.5fps |
| + | |- |
| + | |3 |
| + | |2 |
| + | |2560x1440@25fps |
| + | |- |
| + | |4 |
| + | |3 |
| + | |2560x1440@30fps |
| + | |} |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.3_Linux_P2888/dts\ dtb/CS-MIPI-IMX307/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code>
| + | * 准备工作 |
| | | |
− | 对于CS-MIPI-SC132
| + | <code>sudo apt-get install v4l-utils</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.3_Linux_P2888/dts\ dtb/CS-MIPI-SC132/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code>
| + | 参考下面一节,下载好veye5_mipi_i2c.sh工具。 |
| | | |
− | 对于VEYE-MIPI-327
| + | * 2592x1944@20fps模式预览,帧率统计 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.3_Linux_P2888/dts\ dtb/VEYE-MIPI-327/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code> | + | <code>v4l2-ctl -d /dev/video0 --set-ctrl sensor_mode=0</code> |
| | | |
− | ''- '''AGX Xavier@Jetpack4.4'''''
| + | <code>./veye5_mipi_i2c.sh -w -f videomode -p1 1 -b [busnum]</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.4_Linux_JETSON_AGX_XAVIER/dts\ dtb/common/t19x/* -r $XAVIER_DTS_PATH/</code> | + | <code>v4l2-ctl -d /dev/video0 --set-ctrl preferred_stride=5376</code> |
| | | |
− | 对于CS-MIPI-IMX307
| + | 预览 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.4_Linux_JETSON_AGX_XAVIER/dts\ dtb/CS-MIPI-IMX307/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc device=/dev/video0 ! "video/x-raw(memory:NVMM), width=(int)2592, height=(int)1944" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nv3dsink sync=false</code> |
| | | |
− | 对于CS-MIPI-SC132
| + | 帧率统计 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.4_Linux_JETSON_AGX_XAVIER/dts\ dtb/CS-MIPI-SC132/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc device=/dev/video0 ! "video/x-raw(memory:NVMM),format=(string)UYVY,width=(int)2592,height=(int)1944" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! fpsdisplaysink video-sink=fakesink -v</code> |
| | | |
− | 对于VEYE-MIPI-327
| + | * 2560x1440@30fps模式录像、抓拍 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/AGX-Xaviar/JetPack_4.4_Linux_JETSON_AGX_XAVIER/dts\ dtb/VEYE-MIPI-327/tegra194-p2888-0001-p2822-0000.dts $XAVIER_DTS_PATH/galen/kernel-dts/</code> | + | <code>v4l2-ctl -d /dev/video0 --set-ctrl sensor_mode=3</code> |
| | | |
− | ''- '''Xavier NX@Jetpack4.4'''''
| + | <code>./veye5_mipi_i2c.sh -w -f videomode -p1 4 -b [busnum]</code> |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Xavier-NX/JetPack_4.4_Linux_JETSON_XAVIER_NX_DEVKIT/dts\ dtb/common/t19x/* -r $XAVIER_DTS_PATH/</code> | + | <code>v4l2-ctl -d /dev/video0 --set-ctrl preferred_stride=5120</code> |
| | | |
− | 对于CS-MIPI-IMX307
| + | 录像 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Xavier-NX/JetPack_4.4_Linux_JETSON_XAVIER_NX_DEVKIT/dts\ dtb/CS-MIPI-IMX307/tegra194-p3509-0000-a00.dtsi $XAVIER_DTS_PATH/jakku/kernel-dts/common/</code> | + | <code>gst-launch-1.0 nvv4l2camerasrc num-buffers=300 ! "video/x-raw(memory:NVMM),format=(string)UYVY, width=(int)2560, height=(int)1440" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)NV12" ! nvv4l2h264enc control-rate=0 bitrate=10000000 ! h264parse ! qtmux ! filesink location=filename.mp4 -e</code> |
| | | |
− | 对于CS-MIPI-SC132
| + | 录像回放 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Xavier-NX/JetPack_4.4_Linux_JETSON_XAVIER_NX_DEVKIT/dts\ dtb/CS-MIPI-SC132/tegra194-p3509-0000-a00.dtsi $XAVIER_DTS_PATH/jakku/kernel-dts/common/</code> | + | <code>gst-launch-1.0 filesrc location=filename.mp4 ! qtdemux ! queue ! h264parse ! nvv4l2decoder ! nvoverlaysink -e</code> |
| | | |
− | 对于VEYE-MIPI-327
| + | 抓图 |
| | | |
− | <code>cp $RELEASE_PACK_DIR/Xavier-NX/JetPack_4.4_Linux_JETSON_XAVIER_NX_DEVKIT/dts\ dtb/VEYE-MIPI-327/tegra194-p3509-0000-a00.dtsi $XAVIER_DTS_PATH/jakku/kernel-dts/common/</code> | + | <code>gst-launch-1.0 v4l2src num-buffers=1 ! "video/x-raw,format=(string)UYVY, width=(int)2560, height=(int)1440" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nvjpegenc ! filesink location=jpgname.jpg</code> |
| | | |
− | *编译
| + | ===== Jetson multimedia-api samples ===== |
| + | Jetson平台上提供了[https://docs.nvidia.com/jetson/l4t-multimedia/index.html Jetson Linux API] 供开发者使用。具体jetson_multimedia_api包的安装请参考nVidia官方文档。 |
| | | |
− | <code>cd $L4T_DIR/sources/kernel/kernel-4.9/</code>
| + | 对于VEYE和CS系列相机,已经在相机内集成了ISP功能,因此不能使用libargus获取数据,而可以直接使用使用标准V4L2接口从/dev/videoX设备文件获取数据。 |
| | | |
− | <code>make ARCH=arm64 O=$TEGRA_KERNEL_OUT dtbs</code>
| + | 下面两个sample可以直接运行: |
| | | |
− | - ''Nano'' | + | ====== 12_camera_v4l2_cuda ====== |
| + | <code>./camera_v4l2_cuda -d /dev/video0 -s 1920x1080 -f UYVY</code> |
| | | |
− | <code>cp $TEGRA_KERNEL_OUT/arch/arm64/boot/dts/tegra210-p3448-0000-p3449-0000-a02.dtb $L4T_DIR/kernel/dtb/</code> | + | ====== v4l2cuda ====== |
| + | <code>./capture-cuda -d /dev/video0 -f UYVY -m -o out.ppm -s 1920x1080 -c 1</code> |
| | | |
− | <code>cp $TEGRA_KERNEL_OUT/arch/arm64/boot/dts/tegra210-p3448-0000-p3449-0000-b00.dtb $L4T_DIR/kernel/dtb/</code>
| + | ===== v4l2-ctl 应用范例 ===== |
| | | |
− | ''- TX2''
| + | ======安装v4l2-utils====== |
| + | <code>sudo apt-get install v4l-utils</code> |
| + | ======使用v4l2-ctl配置参数 ====== |
| | | |
− | <code>cp $TEGRA_KERNEL_OUT/arch/arm64/boot/dts/tegra186-quill-p3310-1000-c03-00-base.dtb $L4T_DIR/kernel/dtb/</code>
| + | * 列出相机支持的数据格式 |
| | | |
− | ''- AGX XAVIER''
| + | <code>v4l2-ctl --list-formats-ext</code> |
| | | |
− | <code>cp $TEGRA_KERNEL_OUT/arch/arm64/boot/dts/tegra194-p2888-0001-p2822-0000.dtb $L4T_DIR/kernel/dtb/</code>
| + | * 帧率统计 |
| | | |
− | ''- XAVIER NX''
| + | <code>v4l2-ctl --set-fmt-video=width=1920,height=1080,pixelformat=UYVY--stream-mmap --stream-count=-1 --stream-to=/dev/null</code> |
| | | |
− | <code>cp $TEGRA_KERNEL_OUT/arch/arm64/boot/dts/tegra194-p3668-all-p3509-0000.dtb $L4T_DIR/kernel/dtb/</code>
| + | * 保存图片到文件 |
| | | |
− | kernel和DTS编译完成后,可以按照上面的步骤升级Image和DTB。
| + | <code>v4l2-ctl --set-fmt-video=width=1920,height=1080,pixelformat=UYVY --stream-mmap --stream-count=1 --stream-to=uyvy-1920x1080.yuv</code> |
| | | |
− | ===应用和测试=== | + | ===== yavta ===== |
− | ====系统状态检测==== | |
− | 完成系统安装后,在Jetson TX2板端执行以下命令来检测是否正确连接摄像头。
| |
| | | |
− | *VEYE-MIPI-327型号
| + | ======安装yavta====== |
| + | <code>git clone <nowiki>https://github.com/veyeimaging/yavta.git</nowiki></code> |
| | | |
− | <code>dmesg | grep veye327</code> | + | <code>cd yavta;make</code> |
| | | |
− | 应当有类似如下提示:
| + | ====== 保存图片到文件 ====== |
| + | <code>./yavta -c1 -FUYVY-1920x1080.yuv --skip 0 -f UYVY -s 1920x1080 /dev/video0</code> |
| + | =====Opencv===== |
| + | 为了将摄像头数据从v4l2设备导入到opencv,我们提供了几个sample。 |
| | | |
− | <code>Detected VEYE327 sensor</code>
| + | We provide some samples [https://github.com/veyeimaging/nvidia_jetson_veye_bsp/tree/master/samples/opencv here]. |
| + | ====使用i2c脚本修改摄像机参数==== |
| | | |
− | <code>subdev veye327 X-003b bound</code>
| + | *VEYE-MIPI-CAM2M系列(VEYE-MIPI-327、VEYE-MIPI-IMX327S、VEYE-MIPI-IMX462、VEYE-MIPI-IMX385) |
| | | |
− | 此外,检查/dev/videoX设备节点,应当是存在的。
| + | 具体使用说明请见:[[VEYE-MIPI-290/327/zh/i2c|VEYE-MIPI-327 I2C脚本使用说明]]。 |
| | | |
− | *CS-MIPI-IMX307型号 | + | *CS-MIPI-IMX307和CS-MIPI-SC132 |
| | | |
− | <code>dmesg | grep x307</code>
| + | 具体使用说明请见:[[CS-MIPI-X i2c/zh|CS-MIPI-X I2C脚本使用说明]]。 |
| | | |
− | 应当有类似如下提示:
| + | * VEYE-MIPI-IMX335 |
| | | |
− | <code>Detected CS307 sensor</code>
| + | 具体使用说明请见:[[5m mipi i2c user guide/zh|VEYE-MIPI-IMX335 I2C脚本使用说明]]。 |
| + | ===怎样移植驱动到第三方底板=== |
| + | 源码编译步骤请参考:[[VEYE CS Camera source for Jetson/zh|英伟达Jetson平台上VEYE和CS系列摄像头驱动源码编译指南]] |
| | | |
− | <code>subdev csx307 X-003b bound</code>
| + | ==== 驱动移植 ==== |
| + | 对于Image,我们是在官方标准Image基础上增加了功能,并没有做任何删减。一般情况下,可以直接使用我们编译好的Image。特殊情况请参考源码进行整合。 |
| | | |
− | 此外,检查/dev/videoX设备节点,应当是存在的。
| + | 对于modules则更简单,直接使用即可。从源码编译和非常简单,此处不做赘述。 |
| | | |
− | *CS-MIPI-SC132型号
| + | ==== dts移植 ==== |
| + | 我们只提供了Nano、TX2、Xavier、Orin的部分板子的dtb,对于没有提供的类型,需要: |
| | | |
− | <code>dmesg | grep cssc132</code>
| + | 1. 得到该板子的dts源码。 |
| | | |
− | 应当有类似如下提示:
| + | 2. 我们camera相关的dts到整体中。 |
| | | |
− | <code>subdev cssc132 X-003b bound</code>
| + | 3. 重新编译得到对应板子的dtb。 |
| | | |
− | 此外,检查/dev/videoX设备节点,应当是存在的。
| + | 操作步骤并不复杂,但是有一些第三方底板厂家并不开放dts源码。这就需要各方的配合才能做到了。 |
− | ====视频流软件包和测试====
| |
− | 我们的摄像头模组,在TX2系统中映射为/dev/videoX设备节点。X值是按照detect的逻辑顺序[0-5]递增的。举例说,如果只接入一个摄像头,则X为0。如果接入5个,则X体现为[0-4]。
| |
| | | |
− | gstreamer中,v4l2src可以通过指明device=/dev/videoX来访问不同的摄像头。
| + | === 常见问题和bug列表 === |
| | | |
− | =====Gstreamer Usage===== | + | ==== 带SSD硬盘的系统的更新系统不生效的问题 ==== |
| + | 如果系统安装了SSD硬盘,并将SSD硬盘挂载到/目录,有可能导致常规更新系统(Image,ko,dtb)操作完全无效。 |
| | | |
− | *视频预览1080p HD(硬件加速)
| + | 这个原因是,板子自带有eMMC存储器件,启动阶段生效的是eMMC中的Image,ko和dtb。启动完成之后,SSD硬盘挂载到/目录,导致emmc上的文件无法看到。 |
| | | |
− | <code>gst-launch-1.0 v4l2src device=/dev/video0 ! "video/x-raw,format=(string)UYVY, width=(int)1920, height=(int)1080" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nvoverlaysink sync=false</code>
| + | 此时的处理方法是将eMMC的mmcblk0p1分区手动挂载到某个目录,并基于此目录进行更新系统的所有操作。 |
| | | |
− | *视频预览720p@60 HD(模组支持此分辨率时,硬件加速)
| + | ==== VEYE cameras on Jetpack5.x ==== |
| + | Jetpack5.x在xavier和orin平台对mipi信号的要求更加严格。VEYE-MIPI-xxx系列相机需要固件版本hdver>=7才可以完美支持。 |
| | | |
− | <code>gst-launch-1.0 v4l2src ! "video/x-raw,format=(string)UYVY, width=(int)1280, height=(int)720, framerate=(fraction)60/1" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nvoverlaysink sync=false</code>
| + | ==== CS-MIPI-IMX307配合Orin nano以及Orin NX绿屏 ==== |
| + | 当CS-MIPI-IMX307使用FFC cable的3.3V供电模式时,现在(Jetpack5.1.1)Orin nano和Orin NX的MIPI接收状态机会进入错误状态。建议参考[[Power supply mode switching/zh|此文章]],修改CS-MIPI-IMX307的供电模式,使用5V供电模式。 |
| | | |
− | *视频预览1280*1080@45fpsHD(硬件加速)
| + | ==== Jetpack5.0.1 DP ==== |
| + | 本版本有很多bug,如不支持nvv4l2camerasrc,不建议使用。 |
| | | |
− | <code>gst-launch-1.0 v4l2src device=/dev/video0 ! "video/x-raw,format=(string)UYVY, width=(int)1280, height=(int)1080,framerate=(fraction)45/1" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nvoverlaysink sync=false</code>
| + | ==== nv3dsink ==== |
| + | Jetpack5.x不再支持nvoverlaysink,使用nv3dsink替代之。nv3ksink需要使用本地执行,不能ssh远程登陆执行。 |
| | | |
− | *视频预览640*480@130fps(模组支持此分辨率时,硬件加速)
| + | ==== L4T32.7.2在xavier系列上的bug ==== |
| + | 对于Xavier系列,L4T32.7.2的cboot存在一个bug,必须要先解决掉才可以升级。 |
| | | |
− | <code>gst-launch-1.0 v4l2src ! "video/x-raw,format=(string)UYVY, width=(int)640, height=(int)480, framerate=(fraction)130/1" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! nvoverlaysink sync=false</code>
| + | [https://elinux.org/Jetson/L4T/r32.7.x_patches <nowiki>[Cboot] Cboot in 32.7.2 fails to read extlinux.conf</nowiki>] |
| | | |
− | *并列预览两路视频 1080p HD(硬件加速)
| + | 我们编译了正确版本的cboot并放在[https://github.com/veyeimaging/nvidia_jetson_veye_bsp/tree/master/cboot_l4t_32.7.2 这里]。 |
| | | |
− | <code>WIDTH=960</code>
| + | 下载后,放到Linux_for_Tegra/bootloader目录下,进入recovery模式后,在PC端执行如下命令以烧写cboot。 |
| | | |
− | <code>HEIGHT=540</code>
| + | * AGX Xavier |
| | | |
− | <code>CAPS="video/x-raw,format=(string)UYVY, width=1920, height=1080"</code> | + | <code>sudo ./flash.sh -r -k cpu-bootloader jetson-xavier mmcblk0p1</code> |
| | | |
− | <code>gst-launch-1.0 nvcompositor name=comp sink_0::xpos=0 sink_0::ypos=0 sink_0::width=$WIDTH sink_0::height=$HEIGHT sink_1::xpos=$WIDTH sink_1::ypos=0 sink_1::width=$WIDTH sink_1::height=$HEIGHT ! nvoverlaysink v4l2src device=/dev/video0 ! $CAPS ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420"! comp. v4l2src device=/dev/video1 ! $CAPS ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420"! comp.</code>
| + | * Xavier NX |
| | | |
− | *视频录像1080p HD(硬件加速)
| + | <code>sudo ./flash.sh -r -k cpu-bootloader jetson-xavier-nx-devkit mmcblk0p1</code> |
| + | === 文档历史 === |
| | | |
− | <code>gst-launch-1.0 v4l2src num-buffers=300 ! "video/x-raw,format=(string)UYVY, width=(int)1920, height=(int)1080" ! nvvidconv ! "video/x-raw(memory:NVMM),format=(string)I420" ! omxh264enc qp-range=20,20:20,20:-1,-1 ! matroskamux ! queue ! filesink location=videoname.mkv</code>
| + | *20230427 |
| | | |
− | *录像回放(硬件加速)
| + | 支持Jetpack5.1.1。 |
| | | |
− | <code>gst-launch-1.0 filesrc location=videoname.mkv ! matroskademux ! h264parse ! omxh264dec ! nvoverlaysink</code>
| + | * 20230222 |
| | | |
− | *抓拍图片
| + | 支持Jetpack5.1。 |
| | | |
− | <code>gst-launch-1.0 v4l2src num-buffers=1 ! "video/x-raw,format=(string)UYVY, width=(int)1920, height=(int)1080" ! jpegenc ! filesink location=jpgname.jpg</code>
| + | *20220831 |
− | ====视频控制软件包的使用====
| |
| | | |
− | *i2c bus说明:
| + | 完善Jetpack5.0.2下关于VEYE系列和 MV系列的说明。 |
| | | |
− | 在TX2和AGX-Xavier平台,ADP-N1共6个MIPI接口,对应的i2c地址为[30-35]。
| + | * 20220824 |
| | | |
− | 在Xavier NX平台,i2c地址为9和10。
| + | 支持Jetpack5.0.2。 |
| | | |
− | 在Xavier Nano A02平台,i2c地址为6。
| + | * 20220720 |
| | | |
− | 在Xavier Nano B01平台,i2c地址为7和8。
| + | 增加Jetson multimedia-api和v4l2-ctl描述。 |
| | | |
− | dmesg 显示的X部分一致。
| + | * 20220714 |
| | | |
− | <code>subdev veye327 X-003b bound</code>
| + | 增加对L4T32.7.2的说明。 |
| | | |
− | <code>subdev csimx307 X-003b bound</code>
| + | * 20220629 |
| | | |
− | <code>subdev cssc132 X-003b bound</code>
| + | 增加Jetpack5.0.1DP的支持,调通AGX-Orin。 |
| | | |
− | 执行i2c控制脚本时,需使用-b选项来指明控制的对应摄像头。
| + | * 20220110 |
| | | |
− | *VEYE-MIPI-327
| + | 增加对新型号VEYE-MIPI-IMX335的相关说明。 |
| | | |
− | 具体使用说明请见:[[VEYE-MIPI-290/327/zh/i2c|VEYE-MIPI-327 I2C脚本使用说明]]。
| + | * 20220105 |
| | | |
− | *CS-MIPI-IMX307和CS-MIPI-SC132
| + | Use nvv4l2h264enc instead of omxh264enc in gstreamer command,because omxh264enc has been deprecated. |
− | | |
− | 具体使用说明请见:[[CS-MIPI-X i2c/zh|CS-MIPI-X I2C脚本使用说明]]。
| |
− | ===瑞泰RTSO-9001的补充说明===
| |
− | | |
− | ====硬件连接方法====
| |
− | [[File:CS-MIPI-307 to ruitai 9001tx2.jpg|center|thumb|800x800px|CS-MIPI-IMX307 与瑞泰RTSO-9001(TX2)]]
| |
| | | |
| + | * 20211025 |
| | | |
− | 与瑞泰RTSO-9001配套,需使用树莓派相机扩展板RTST-RPI转接板。
| + | gstreamer命令中,普遍采用nvv4l2camerasrc代替v4l2src,数据直接进入DMA内存。 |
− | | |
− | 备注:当前版本的RTSO-9001的MIPI CSI-2接口供电能力不足以支撑我们摄像头的功率需求,需要额外5V供电给摄像头。上图中并未提现。
| |
− | | |
− | ====软件的补充说明====
| |
− | | |
− | *针对瑞泰RTSO-9001,对应的目录为:
| |
− | | |
− | nvidia_jetson_veye_bsp\TX2\JetPack_4.2.2_Linux_RTSO-9001
| |
− | | |
− | *受与瑞泰公司协议限制,我方不发布源代码
| |
− | *我方资料已提交瑞泰公司,建议客户与瑞泰联系获取完善版本的支持镜像
| |
| | | |
| ===参考资料=== | | ===参考资料=== |
Line 688: |
Line 853: |
| SDK Manager: https://docs.nvidia.com/sdk-manager/index.html | | SDK Manager: https://docs.nvidia.com/sdk-manager/index.html |
| | | |
− | L4T Doc: https://docs.nvidia.com/jetson/archives/l4t-archived/l4t-3242/index.htm | + | L4T Doc: https://docs.nvidia.com/jetson/archives/l4t-archived/l4t-325/ |
| + | |
| + | https://docs.nvidia.com/jetson/archives/r35.3.1/DeveloperGuide/index.html |
| | | |
| TX2 user guide: [https://developer.download.nvidia.cn/embedded/L4T/r28_Release_v2.0/GA/Docs/Jetson_TX1_and_TX2_Developer_Kits_User_Guide.pdf?lumI95GW6BEyMmhP1Is8E79OYo105-tpsC2bOVQmBZ6Tw8AkLU4pSDMPCuzOaEonWMiDO2hliXbNvtkH9do81TNIXmLZGGoV7xoEehyEgfc2WO8e0Czz5chLSHoCqIuPLL1 link] | | TX2 user guide: [https://developer.download.nvidia.cn/embedded/L4T/r28_Release_v2.0/GA/Docs/Jetson_TX1_and_TX2_Developer_Kits_User_Guide.pdf?lumI95GW6BEyMmhP1Is8E79OYo105-tpsC2bOVQmBZ6Tw8AkLU4pSDMPCuzOaEonWMiDO2hliXbNvtkH9do81TNIXmLZGGoV7xoEehyEgfc2WO8e0Czz5chLSHoCqIuPLL1 link] |
− |
| |
− | 北京瑞泰新时代公司网址:http://www.realtimes.cn/
| |
− |
| |
− | <br />
| |