首页 > 资讯 > > 正文

RK3588-Camera:MIPI-CSI调试之通路解析-每日焦点

来源:jf_30051736 2023-06-11 18:20:38

一、简介

专栏总目录

本文介绍RK3588平台的Camera:MIPI-CSI调试之通路解析


【资料图】

MIPI联盟,即移动产业处理器接口(Mobile Industry Processor Interface 简称MIPI)联盟。MIPI(移动产业处理器接口)是MIPI联盟发起的为移动应用处理器制定的开放标准和一个规范。

目的是把手机内部的接口如摄像头、显示屏接口、射频/基带接口等标准化,从而减少手机设计的复杂程度和增加设计灵活性。

CSI & DSI

• CSI ( Camera Serial Interface ):摄像头接口

• DSI ( Display Serial Interface ):显示接口

二、 名词解释:

ISP ( Image Signal Processor ): 即图像信号处理模块, 主要作用是对前端图像传感器输出的信号做后期处理,依赖于 ISP 才能在不同的光学条件下都能较好的还原现场细节。VICAP( Video capture ):视频捕获单元

三、RK3588 的camera通路:

多sensor支持:

单路硬件isp最多支持4路复用,isp复用情况支持分辨率如下:2路复用:最大分辨率3840x2160,dts对应配置2路rkisp_vir设备。3路或4路复用:最大分辨率2560x1536,dts对应配置3或4路rkisp_vir设备。硬件支持最多采集7路sensor:6mipi + 1dvp,多sensor软件通路如下:

下图是RK3588 camera连接链路示意图,可以支持7路camera。

四、 链路解析:

图中:mipi camera2---> csi2_dphy1 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2

对应节点:imx415 ---> csi2_dphy0 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2

链接关系:sensor---> csi2 dphy---->mipi csi host--->vicap

实线链路解析: Camera sensor ---> dphy ---> 通过mipi_csi2模块解析mipi协议---> vicap ( rkcif节点代表vicap )

虚线链路解析:vicap ---> rkcif_mipi_lvds2_sditf ---> isp

每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。

五、RK3588硬件通路框图

rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。

六、详细解析:

imx415 : Camera sensorcsi2_dphy0 : rk3588支持2个dphy硬件,这里我们称之为dphy0_hw/dphy1_hw ,,两个dphy硬件都可以工作在full mode 和split mode两种模式下。

当使用dphy0_hw:

full mode:节点名称使用csi2_dphy0,最多支持4 lane。当dphy0_hw使用full mode时,链路需要按照csi2_dphy1这条链路来配置,但是节点名称csi2_dphy1需要修改为csi2_dphy0,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy1(使用0/1 lane)、csi2_dphy2(使用2/3 lane),每个phy最多支持2 lane。

当使用dphy1_hw:

full mode:节点名称使用csi2_dphy3,最多支持4 lane。当dphy1_hw使用full mode时,链路需要按照csi2_dphy4这条链路来配置,但是节点名称csi2_dphy4需要修改为csi2_dphy3,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy4(使用0/1 lane)、csi2_dphy5(使用2/3 lane),每个phy最多支持2 lane。

dcphy:rk3588支持两个dcphy,节点名称分别为csi2_dcphy0/csi2_dcphy1。每个dcphy硬件支持RX/TX同时使用,对于camera输入使用的是RX。支持DPHY/CPHY协议复用;需要注意的是同一个dcphy的TX/RX只能同时使用DPHY或同时使用CPHY。其他dcphy参数请查阅rk3588数据手册。

使用上述mipi phy节点,需要把对应的物理节点配置上。(csi2_dcphy0_hw/csi2_dcphy1_hw/csi2_dphy0_hw/csi2_dphy1_hw)

每个mipi phy都需要一个csi2模块来解析mipi协议,节点名称分别为mipi0_csi2~mipi5_csi2。

rk3588所有camera数据都需要通过vicap,再链接到isp。rk3588仅支持一个vicap硬件,这个vicap支持同时输入6路mipi phy,及一路dvp数据,所以我们将vicap分化成rkcif_mipi_lvds~rkcif_mipi_lvds5、rkcif_dvp等7个节点,各个节点的绑定关系需要严格按照框图的节点序号配置。

每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。

rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。

直通与回读模式:•直通:指数据经过vicap采集,直接发送给isp处理,不存储到ddr。需要注意的是hdr直通时,只有短帧是真正的直通,长帧需要存在ddr,isp再从ddr读取。

•回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。

•在dts配置时,一个isp硬件,如果只配置一个虚拟节点,默认使用直通模式,如果配置了多个虚拟节点默认使用回读模式。

七、单路Camera的dts配置说明:( 以imx415摄像头为例 )

案例场景:这里使用的是csi2_dphy0的单路camera配置:链路配置: imx415 —> csi2_dphy0 —> mipi2_csi2 —> rkcif_mipi_lvds2—>rkcif_mipi_lvds2_sditf —>rkisp0_vir2
&i2c3 {status = "okay";imx415: imx415@1a {status = "okay";compatible = "sony,imx415";reg = < 0x1a >;clocks = < &cru CLK_MIPI_CAMARAOUT_M3 >;clock-names = "xvclk";pinctrl-names = "default";pinctrl-0 = < &mipim0_camera3_clk >;power-domains = < &power RK3588_PD_VI >;pwdn-gpios = < &gpio1 RK_PB0 GPIO_ACTIVE_HIGH >;reset-gpios = < &gpio4 RK_PA0 GPIO_ACTIVE_LOW >;rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "CMK-OT2022-PX1";rockchip,camera-module-lens-name = "IR0147-50IRC-8M-F20";port {imx415_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam0 >;data-lanes = < 1 2 3 4 >;};};};camera_imx219: camera-imx219@10 {status = "disabled";compatible = "sony,imx219";reg = < 0x10 >;clocks = < &clk_cam_24m >;clock-names = "xvclk";rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "rpi-camera-v2";rockchip,camera-module-lens-name = "default";port {imx219_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam1 >;data-lanes = < 1 2 >;};};};};&csi2_dphy0_hw {status = "okay";};&csi2_dphy0 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipidphy0_in_ucam0: endpoint@1 {reg = < 1 >;remote-endpoint = < &imx415_out0 >;data-lanes = < 1 2 3 4 >;};mipidphy0_in_ucam1: endpoint@2 {reg = < 2 >;remote-endpoint = < &imx219_out0 >;data-lanes = < 1 2 >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;csidphy0_out: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi2_csi2_input >;};};};};&mipi2_csi2 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_input: endpoint@1 {reg = < 1 >;remote-endpoint = < &csidphy0_out >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_output: endpoint@0 {reg = < 0 >;remote-endpoint = < &cif_mipi2_in0 >;};};};};&rkcif {status = "okay";};&rkcif_mipi_lvds2 {status = "okay";port {cif_mipi2_in0: endpoint {remote-endpoint = < &mipi2_csi2_output >;};};};&rkcif_mipi_lvds2_sditf {status = "okay";port {mipi_lvds2_sditf: endpoint {remote-endpoint = < &isp0_vir0 >;};};};&rkcif_mmu {status = "okay";};&rkisp0 {status = "okay";};&isp0_mmu {status = "okay";};&rkisp0_vir0 {status = "okay";port {#address-cells = < 1 >;#size-cells = < 0 >;isp0_vir0: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi_lvds2_sditf >;};};};&pinctrl {camera {cam_pwdn_gpio: cam-pwdn-gpio {rockchip,pins = < 1 RK_PB0 RK_FUNC_GPIO &pcfg_pull_up >;};};};

八、 调试技巧

8.1 i2c设备的通用调试命令:查看设备是否挂载到i2c总线下:

i2cdetect -y 3

8.2 摄像命令

Linux系统摄像命令:
gst-launch-1.0 v4l2src device=/dev/video11 ! video/x-raw,format=NV12,width=3840,height=2160, framerate=30/1 ! xvimagesink

Android系统:

Android系统自带相机APP。点击APP,看摄像画面是否正常显示。

8.3 imx415 相关的log信息

dmesg | grep imx415

8.4 查看拓扑结构

media-ctl -d /dev/media0 -p

审核编辑:汤梓红

x
推荐阅读

RK3588-Camera:MIPI-CSI调试之通路解析-每日焦点

2023-06-11 18:20:38

电饭煲内胆什么材质的好而且健康麦饭石_电饭煲内胆什么材质的好而且健康 全球看点

2023-06-11 16:47:55

微动态丨烈火金刚小说朗读(烈火金刚小说)

2023-06-11 15:25:09

天狗吞月的故事简短20字_天狗吞月的故事

2023-06-11 14:01:16

杨尚琨简历_万绍芬与杨尚琨关系|全球快资讯

2023-06-11 13:44:28

她被雪藏的原因,国剧今天终于敢播_环球信息

2023-06-11 11:47:18

当前动态:健康到家,您今日饮咗未?

2023-06-11 11:43:44

多措并举促进应届高校毕业生就业 网络招聘活动忙

2023-06-11 10:00:23

环球精选!首台套50万千瓦冲击式水电机组项目开工

2023-06-11 08:35:24

excel去掉部分网格线形成大区域 在EXCEL表格中如何去掉部分单元格的网格线

2023-06-11 08:07:05
相关新闻

RK3588-Camera:MIPI-CSI调试之通路解析-每日焦点

2023-06-11 18:20:38

电饭煲内胆什么材质的好而且健康麦饭石_电饭煲内胆什么材质的好而且健康 全球看点

2023-06-11 16:47:55

微动态丨烈火金刚小说朗读(烈火金刚小说)

2023-06-11 15:25:09

天狗吞月的故事简短20字_天狗吞月的故事

2023-06-11 14:01:16

杨尚琨简历_万绍芬与杨尚琨关系|全球快资讯

2023-06-11 13:44:28

她被雪藏的原因,国剧今天终于敢播_环球信息

2023-06-11 11:47:18

当前动态:健康到家,您今日饮咗未?

2023-06-11 11:43:44

多措并举促进应届高校毕业生就业 网络招聘活动忙

2023-06-11 10:00:23

环球精选!首台套50万千瓦冲击式水电机组项目开工

2023-06-11 08:35:24

excel去掉部分网格线形成大区域 在EXCEL表格中如何去掉部分单元格的网格线

2023-06-11 08:07:05

哈弗二代大狗与CR-V强势PK,这些选手不一般!

2023-06-11 07:25:18

速看:俄央行维持7.5%基准利率不变

2023-06-11 06:04:20

世界观速讯丨极目时评丨环卫母亲与高考儿子相拥而泣刷屏,普通人改变命运的努力打动人心

2023-06-11 04:31:06

95汽油1吨等于多少升_1吨等于多少升-环球焦点

2023-06-11 03:12:14

空难40天后,机上4名儿童在丛林被发现幸存,最小的只有11个月大 每日速递

2023-06-11 01:32:11

12306买卧铺票可以在线选铺了!操作指南出炉:很方便

2023-06-11 00:35:49

探访安徽巢湖“美容师” 义务守护巢湖水清岸绿

2023-06-10 23:49:45

嘴里长智齿疼怎么办(长智齿疼怎么办)-环球快播

2023-06-10 22:28:56

蒙脱石散饭前吃还是饭后吃好一些(蒙脱石散饭前吃还是饭后吃)_全球消息

2023-06-10 21:03:22

每日热议!交通银行任德奇:扩大融资总量、创新产品服务、参与绿色金融市场建设,助力上海打造国际绿色金融枢纽

2023-06-10 20:10:06

RTX4060 Ti显卡破发 跌到2900多|天天要闻

2023-06-10 18:24:27

华硕BIOS修复蓝屏解决方法需要哪些步骤 世界速看

2023-06-10 18:04:53

贵州省攀岩邀请赛暨贵阳市青少年攀岩锦标赛开赛 当前关注

2023-06-10 16:01:38

科举殿试淘汰制因何取消?|环球观天下

2023-06-10 15:45:22

全城寻找“广州十大科学传播达人”,是你吗?|环球热点评

2023-06-10 14:38:48

天天滚动:“十年一遇”!数万人被疏散,加拿大山林野火为何失控?

2023-06-10 13:15:43

天天热议:避而不谈开工率 宁波韵升:下游市场需求相对低迷|直击业绩会

2023-06-10 12:13:43

全球快看:20座以下通勤班车不可走公交道

2023-06-10 10:47:35

前沿资讯!成立仅4年、估值200亿,这家“含着金钥匙”的光伏企业要上市了!

2023-06-09 23:14:58

没有会员的奇迹手游推荐 没有会员的奇迹手游大全

2023-06-09 19:05:26

天天热讯:何修礼的儿子 何修礼

2023-06-09 16:17:51

每天做饭防老痴

2023-06-09 14:44:45

一世好命粤语03_一世好命粤语

2023-06-09 11:06:30

视点!立华股份5月份猪鸡销量环比下跌 分析师称6月份行业难言回暖

2023-06-09 10:58:06

环球看热讯:梁实谈第27次高考:文综出现重大失误,最后几分钟还剩两道大题没答

2023-06-09 10:41:43

欧诺卡 欧尚_欧诺卡|全球即时看

2023-06-09 10:15:16

天天快报!小村庄里的风流韵事

2023-06-09 09:59:06

【世界速看料】机票均价比“五一”低10%,端午跨省游热度下降

2023-06-09 08:25:14

ai锁定图层的快捷键取消_ai锁定图层的快捷键|速看料

2023-06-09 07:17:02

拟定调研课题34个 力解企业发展之忧 湖北联投推动主题教育落实落细

2023-06-09 05:50:35

【世界报资讯】华能国际电力股份(00902.HK):6月8日南向资金减持719.2万股

2023-06-09 04:41:39

Vlog|探寻祖国北疆生态绿景 速看

2023-06-09 04:00:19

酸辣面藕鲜大拌菜做法?_环球速看

2023-06-09 02:12:16

天能股份:预计今年天能的储能业务板块将呈现明显增长的趋势|环球视点

2023-06-09 00:57:28

目标永兴岛 航程900海里 “海巡03”轮首次巡航西沙海域

2023-06-08 23:21:57

吉网直击高考现场丨高考结束,这个考点外每个瞬间都是爱!

2023-06-08 20:32:42

热资讯!qq三国国战时间表2021_qq三国国战时间

2023-06-08 20:14:46

世界球精选!辽宁2023年初级护师考试成绩单打印入口已开通

2023-06-08 14:05:57

《青年π计划》歌手献唱毕业季 唱出青春无限可能

2023-06-08 12:57:00

世界最资讯丨河北井陉:保护古村风貌 留住乡愁古韵

2023-06-08 12:14:59

三部门发文加快制定服装箱包鞋类产品羽绒制品等质量分级标准

2023-06-08 11:12:34

世界关注:连夜通报!发现2例,已隔离

2023-06-08 08:13:36

安德幼儿园接待两所帮扶园教师入园跟岗学习|每日关注

2023-06-08 07:58:36

永不沉没的泰坦尼克号_泰坦尼克号沉没的真正原因是什么|世界资讯

2023-06-08 07:43:49

截至6月4日美国玉米作物进展报告 环球最资讯

2023-06-08 06:17:43

世界快消息!浙能电力:水系锌离子目前尚未完成结题验收 但性能测试达到项目计划书指标要求

2023-06-08 05:26:02

亲民实用的国民MPV 试驾一汽奔腾M9_全球短讯

2023-06-08 04:43:21

临川区气象台发布雷电黄色预警信号【III级/较重】【2023-06-07】-每日消息

2023-06-08 03:22:34

“三个注重”提升人才工作效能_世界热点

2023-06-08 02:24:56

今日欧市盘前英镑兑美元汇率走势基本面行情解读(2023/6/7) 热点聚焦

2023-06-08 00:49:56

苏州与北京银行签署战略合作协议 北京银行苏州分行揭牌|天天微头条

2023-06-08 00:14:03

克明食品:子公司5月生猪销售收入同比增38.4%|焦点播报

2023-06-07 23:26:09

手机问题:天玑1200玩原神吃鸡王者卡么-天天亮点

2023-06-07 22:26:30

签署多份战略合作协议,新华制药2023港澳山东周“收获满满”

2023-06-07 22:04:41

大运有我!“青年力量”显担当-每日信息

2023-06-07 21:10:54

天天微资讯!美媒:美俄勒冈州一污水处理厂发生故障 大量污水排入河中

2023-06-07 21:14:51

图集|芍药花开,惊艳时光,美醉延吉……

2023-06-07 20:40:04

江苏出台14条措施推动外贸稳规模优结构 每日观点

2023-06-07 18:56:53

申万宏源:首予洲际船务(02409)“买入”评级 三大业务板块营收持续增长

2023-06-07 18:13:38

300772股票_翔港科技股票行情

2023-06-07 17:19:41

“鼠头罗生门”持续发酵:网友不买账校方通报,之前出过类似事件

2023-06-07 17:04:53

民生证券给予珠海冠宇推荐评级,首次覆盖:消费电池专家,进军动储放量在即 环球微动态

2023-06-07 16:16:48

在月球上可不可以正常使用弹簧测力计(在月球上用弹簧测力计) 世界消息

2023-06-07 15:14:20

香港六福铂金多少钱一克(2023年06月07日) 环球观点

2023-06-07 14:25:05

今日观点!甘肃高速公路封闭最新消息(持续更新)

2023-06-07 12:34:49

水产品有哪些好吃的_水产品有哪些

2023-06-07 09:42:58

最新消息:化妆师资格证官网查询_化妆师资格证

2023-06-07 08:37:42

最新:压力怪是什么意思是指什么样的人_压力怪是什么梗

2023-06-07 07:34:43

环球快播:安德森·圣马利亚

2023-06-07 06:37:08

弹琴的古诗有哪些 关于弹琴的诗句|当前最新

2023-06-07 04:55:22

不吃晚饭能减肥吗 多久见效_不吃晚饭能减肥 实时焦点

2023-06-07 04:12:51

核电站工作原理_核电站是什么意思 天天热文

2023-06-07 03:08:04

【时快讯】内螺纹截止阀厂家推荐_内螺纹截止阀

2023-06-07 02:32:48

一汽丰田新 RAV4 荣放开创 SUV 动力、智能、四驱“千人千面”新时代 当前关注

2023-06-07 02:09:32

林妖的舞蹈_关于林妖的舞蹈概略 焦点速递

2023-06-07 00:55:37

外媒:俄方控制的卡霍夫卡水电站大坝持续坍塌|环球播资讯

2023-06-06 23:41:53

《蜘蛛侠:纵横宇宙》北美首日票房超《银河护卫队3》 每日快讯

2023-06-06 22:36:20

全球微速讯:web网页游戏开发综合实训报告_web网页游戏

2023-06-06 21:24:15

网络游戏板块跌2.05% 奥飞娱乐涨10.04%居首 环球快播报

2023-06-06 20:38:34

英国提出从2025年起为可持续航空燃料授权 聚焦

2023-06-06 19:28:07

这周日,九江市这些区域计划停水,请提前做好储水准备!

2023-06-06 18:16:42

即时看!皇马官宣本泽马离队 结束14年俱乐部生涯

2023-06-06 17:53:03

世界热资讯!贝莱德增持北京首都机场股份(00694)约728.66万股 每股作价约5.46港元

2023-06-06 16:17:27

时代谢幕!《星球大战》天行者卢克或将阔别银幕

2023-06-06 14:31:28

大片夹击之下还能看到有趣的艺术片,全靠他们 环球微头条

2023-06-06 13:49:02

港股异动 | 飞扬集团(01901)涨超7% 机构称第一季度旅游业快速回暖 看好国内出行复苏带来的业绩弹性

2023-06-06 13:03:18

国内商品期货开盘 玻璃等跌超2%

2023-06-06 12:14:35

看提示开车,50分钟的车程缩短至19分钟

2023-06-06 10:57:56

苹果MR头显欲开启“空间计算”时代 最强芯片单设备可跑AI大模型 每日看点

2023-06-06 10:07:19

【报资讯】柯南工藤新一被实锤渣男?吃着碗里看着锅里辜负小兰等待多年!

2023-06-06 09:26:49