前面教大家使用DeepStream的Docker镜像去创建自己的Python工作环境,其好处是即使Jetson设备需要使用JetPack重新安装系统,我们只要重新启动这个Docker容器就可以,无需重复环境配置的工作。
输入源在视频分析中是至关重要的部分,先前的视频文件只是单纯的测试目的,真正实用的部分还是需要接上摄像头或网络的视频流,这样才能应用到实际的工作场景。本文的内容就是带领读者将摄像头与RTSP流接入容器内使用,搭建具有实用价值的容器。
第一件任务就是要判断摄像头的种类与数量,用最简单的“ls /dev/video*”指令并不能分辨其种类,因此最好的方法还是使用v4l2工具。请先执行以下指令安装这个工具:
$ |
sudo apt install -y v4l-utils |
安装好之后,请执行以下指令:
$ |
v4l2-ctl --list-devices |
如果检测到以下“imx219”之类的信息,表示这个摄像头为CSI类型:
如果检测到以下“USB Camera”信息的,就表示为USB摄像头:
在Jetson Orin开发套件的USB摄像头都会占用2个video口,例如上图中的一台USB摄像头占用video0与video1两个端口,但实际能调用作为输入功能的是第一个video0的编号,如果设备上有多个摄像头的时候,就需要特别注意这些细节。
由于CSI摄像头与USB摄像头的调用方式不同,因此在创建Docker容器时,需要使用以下两种不同的映射方式将设备指到容器内使用:
这些摄像头加到容器之后,会发现容器内的编号与容器外是对应的,例如原本video0与video2两个USB摄像头,进到容器之后同样为video0与video2的编号。
由于Jetson Orin开发套件的CSI摄像头比较特殊,因此这里使用两个USB摄像头来做演示,并以nvcr.io/nvidia/deepstream-l4t:6.1-samples镜像来创建执行容器,如果您按照前面文章将samples内容复制到容器外的话,请执行以下指令:
$ $ |
sudo xhost +si:localuser:root docker run -it --net=host --runtime=nvidia -e DISPLAY=$DISPLAY \ -w /opt/nvidia/deepstream/deepstream -v /tmp/.X11-unix/:/tmp/.X11-unix \ -v ~/deepstream/samples:/opt/nvidia/deepstream/deepstream/samples \ --device /dev/video0 --device /dev/video2 nvcr.io/nvidia/deepstream-l4t:6.1-samples |
现在进入容器后先检查摄像头数量,请执行以下指令:
$ $ |
apt install -y v4l-utils v4l2-ctl --list-devices |
会看到如下的信息,表示有两个USB摄像头:
这样就能在容器内调用摄像头来进行工作。
在容器内用deepstream-app进行演示,使用samples/config/deepstream-app下的source1_usb_dec_infer_resnet_int8.txt配置文件,不过需要对配置文件进行以下的修改:
主要修改部分如下:
[tiled-display] ... columns=2 ... [source0] ... camera-v4l2-dev-node=0 # 将[source0]内容复制一份成下面的[source1],并修改节点编号 [source1] ... camera-v4l2-dev-node=2 ... [sink0] ... type=2 |
修改完后,就在容器内执行以下指令:
$ $ |
cd samples/config/deepstream-app deepstream-app -c source1_usb_dec_infer_resnet_int8.txt |
就应该能看到显示两个摄像头的画面。
如果您已经按照前面文章创建支持Python开发环境的DeepStream容器,现在就可以用前面存好的deepstream-l4t:6.1-python镜像创建ds_python容器,如果还没有创建好的话,请参考前一篇文章中去调试Python执行环境。
现在执行以下指令,使用deepstream-l4t:6.1-python镜像创建可执行Python范例的容器:
$ $
$ |
sudo xhost +si:localuser:root docker run -id --net=host --name=ds_python --runtime=nvidia -e DISPLAY=$DISPLAY \ -w /opt/nvidia/deepstream/deepstream -v /tmp/.X11-unix/:/tmp/.X11-unix \ -v ~/deepstream/deepstream/sources:/opt/nvidia/deepstream/deepstream/sources \ -v ~/deepstream/deepstream/samples:/opt/nvidia/deepstream/deepstream/samples \ --device /dev/video0 --device /dev/video2 deepstream-l4t:6.1-python docker exec -it ds_python bash |
进入容器后,先使用以下指令检查摄像头是否完成连接:
$ $ |
apt install -y v4l-utils v4l2-ctl --list-devices |
如果看到如下的信息,表示有两个USB摄像头:
现在使用Python范例的deepstream-test1-usbcam项目来执行USB摄像头的测试,请执行以下指令:
$ $ |
cd sources/deepstream_python_apps/apps/deepstream-test1-usbcam/ ./deepstream_test_1_usb.py /dev/video0 |
这样就能在容器内调用USB摄像头。
好文章,需要你的鼓励
LibreOffice 25.8版本以"更智能、更快速、更可靠"为特色正式发布。新版本在多个方面实现性能优化,包括启动速度、文档滚动和文件打开速度的显著提升。该版本增强了对微软Office文档格式的兼容性,改进了连字符处理和字体兼容性,Calc表格组件新增十多个函数以更好支持Excel文件导入。值得注意的是,LibreOffice 25.8首次支持PDF 2.0格式导出,并具备PDF数字加密和签名功能。新版本提高了系统要求,不再支持Windows 7/8系列和32位系统。
谷歌DeepMind团队开发出ViNT视觉导航系统,让机器人像人类一样仅通过"看"就能在陌生环境中导航。该系统模仿ChatGPT的学习方式,通过分析600万个导航轨迹掌握通用导航能力,在未知环境中的成功率达87%。这一突破将推动物流配送、家庭服务、搜救等领域的机器人应用发展。
微软AI首席执行官苏莱曼发文称,研究AI福利和意识"既不成熟又危险",认为这会加剧人类对AI的不健康依赖。而Anthropic、OpenAI等公司正积极研究AI意识问题,招聘相关研究人员。业界对AI是否会产生主观体验及其权利问题分歧严重。前OpenAI员工认为可以同时关注多个问题,善待AI模型成本低且有益。随着AI系统改进,关于AI权利和意识的辩论预计将升温。
谷歌DeepMind推出AlphaFold3,革命性提升分子结构预测能力。该AI模型采用创新扩散网络架构,能够精确预测蛋白质与DNA、RNA、药物等分子的相互作用,准确率比传统方法提高50%以上。这一突破将显著加速新药开发,推动基础科学研究,并通过免费开放服务促进全球科研合作,标志着生命科学研究进入AI驱动的新时代。