全球观焦点:RK3588-Camera:MIPI-CSI调试之通路解析
一、简介
专栏总目录
【资料图】
本文介绍RK3588平台的Camera:MIPI-CSI调试之通路解析
MIPI联盟,即移动产业处理器接口(Mobile Industry Processor Interface 简称MIPI)联盟。MIPI(移动产业处理器接口)是MIPI联盟发起的为移动应用处理器制定的开放标准和一个规范。
目的是把手机内部的接口如摄像头、显示屏接口、射频/基带接口等标准化,从而减少手机设计的复杂程度和增加设计灵活性。
CSI & DSI
• CSI ( Camera Serial Interface ):摄像头接口
• DSI ( Display Serial Interface ):显示接口
二、 名词解释:
ISP ( Image Signal Processor ): 即图像信号处理模块, 主要作用是对前端图像传感器输出的信号做后期处理,依赖于 ISP 才能在不同的光学条件下都能较好的还原现场细节。VICAP( Video capture ):视频捕获单元三、RK3588 的camera通路:
多sensor支持:
单路硬件isp最多支持4路复用,isp复用情况支持分辨率如下:2路复用:最大分辨率3840x2160,dts对应配置2路rkisp_vir设备。3路或4路复用:最大分辨率2560x1536,dts对应配置3或4路rkisp_vir设备。硬件支持最多采集7路sensor:6mipi + 1dvp,多sensor软件通路如下:下图是RK3588 camera连接链路示意图,可以支持7路camera。
四、 链路解析:
图中:mipi camera2---> csi2_dphy1 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2
对应节点:imx415 ---> csi2_dphy0 ---> mipi2_csi2 ---> rkcif_mipi_lvds2--->rkcif_mipi_lvds2_sditf --->rkisp0_vir2
链接关系:sensor---> csi2 dphy---->mipi csi host--->vicap
实线链路解析: Camera sensor ---> dphy ---> 通过mipi_csi2模块解析mipi协议---> vicap ( rkcif节点代表vicap )
虚线链路解析:vicap ---> rkcif_mipi_lvds2_sditf ---> isp
每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。
五、RK3588硬件通路框图
rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。六、详细解析:
imx415 : Camera sensorcsi2_dphy0 : rk3588支持2个dphy硬件,这里我们称之为dphy0_hw/dphy1_hw ,,两个dphy硬件都可以工作在full mode 和split mode两种模式下。当使用dphy0_hw:
full mode:节点名称使用csi2_dphy0,最多支持4 lane。当dphy0_hw使用full mode时,链路需要按照csi2_dphy1这条链路来配置,但是节点名称csi2_dphy1需要修改为csi2_dphy0,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy1(使用0/1 lane)、csi2_dphy2(使用2/3 lane),每个phy最多支持2 lane。当使用dphy1_hw:
full mode:节点名称使用csi2_dphy3,最多支持4 lane。当dphy1_hw使用full mode时,链路需要按照csi2_dphy4这条链路来配置,但是节点名称csi2_dphy4需要修改为csi2_dphy3,软件上是通过phy的序号来区分phy使用的模式。split mode:拆分成2个phy使用,分别为csi2_dphy4(使用0/1 lane)、csi2_dphy5(使用2/3 lane),每个phy最多支持2 lane。dcphy:rk3588支持两个dcphy,节点名称分别为csi2_dcphy0/csi2_dcphy1。每个dcphy硬件支持RX/TX同时使用,对于camera输入使用的是RX。支持DPHY/CPHY协议复用;需要注意的是同一个dcphy的TX/RX只能同时使用DPHY或同时使用CPHY。其他dcphy参数请查阅rk3588数据手册。
使用上述mipi phy节点,需要把对应的物理节点配置上。(csi2_dcphy0_hw/csi2_dcphy1_hw/csi2_dphy0_hw/csi2_dphy1_hw)
每个mipi phy都需要一个csi2模块来解析mipi协议,节点名称分别为mipi0_csi2~mipi5_csi2。
rk3588所有camera数据都需要通过vicap,再链接到isp。rk3588仅支持一个vicap硬件,这个vicap支持同时输入6路mipi phy,及一路dvp数据,所以我们将vicap分化成rkcif_mipi_lvds~rkcif_mipi_lvds5、rkcif_dvp等7个节点,各个节点的绑定关系需要严格按照框图的节点序号配置。
每个vicap节点与isp的链接关系,通过对应虚拟出的XXX_sditf来指明链接关系。
rk3588支持2个isp硬件,每个isp设备可虚拟出多个虚拟节点,软件上通过回读的方式,依次从ddr读取每一路的图像数据进isp处理。对于多摄方案,建议将数据流平均分配到两个isp上。
直通与回读模式:•直通:指数据经过vicap采集,直接发送给isp处理,不存储到ddr。需要注意的是hdr直通时,只有短帧是真正的直通,长帧需要存在ddr,isp再从ddr读取。
•回读:指数据经过vicap采集到ddr,应用获取到数据后,将buffer地址推送给isp,isp再从ddr获取图像数据。
•在dts配置时,一个isp硬件,如果只配置一个虚拟节点,默认使用直通模式,如果配置了多个虚拟节点默认使用回读模式。
七、单路Camera的dts配置说明:( 以imx415摄像头为例 )
案例场景:这里使用的是csi2_dphy0的单路camera配置:链路配置: imx415 —> csi2_dphy0 —> mipi2_csi2 —> rkcif_mipi_lvds2—>rkcif_mipi_lvds2_sditf —>rkisp0_vir2&i2c3 {status = "okay";imx415: imx415@1a {status = "okay";compatible = "sony,imx415";reg = < 0x1a >;clocks = < &cru CLK_MIPI_CAMARAOUT_M3 >;clock-names = "xvclk";pinctrl-names = "default";pinctrl-0 = < &mipim0_camera3_clk >;power-domains = < &power RK3588_PD_VI >;pwdn-gpios = < &gpio1 RK_PB0 GPIO_ACTIVE_HIGH >;reset-gpios = < &gpio4 RK_PA0 GPIO_ACTIVE_LOW >;rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "CMK-OT2022-PX1";rockchip,camera-module-lens-name = "IR0147-50IRC-8M-F20";port {imx415_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam0 >;data-lanes = < 1 2 3 4 >;};};};camera_imx219: camera-imx219@10 {status = "disabled";compatible = "sony,imx219";reg = < 0x10 >;clocks = < &clk_cam_24m >;clock-names = "xvclk";rockchip,camera-module-index = < 0 >;rockchip,camera-module-facing = "back";rockchip,camera-module-name = "rpi-camera-v2";rockchip,camera-module-lens-name = "default";port {imx219_out0: endpoint {remote-endpoint = < &mipidphy0_in_ucam1 >;data-lanes = < 1 2 >;};};};};&csi2_dphy0_hw {status = "okay";};&csi2_dphy0 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipidphy0_in_ucam0: endpoint@1 {reg = < 1 >;remote-endpoint = < &imx415_out0 >;data-lanes = < 1 2 3 4 >;};mipidphy0_in_ucam1: endpoint@2 {reg = < 2 >;remote-endpoint = < &imx219_out0 >;data-lanes = < 1 2 >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;csidphy0_out: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi2_csi2_input >;};};};};&mipi2_csi2 {status = "okay";ports {#address-cells = < 1 >;#size-cells = < 0 >;port@0 {reg = < 0 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_input: endpoint@1 {reg = < 1 >;remote-endpoint = < &csidphy0_out >;};};port@1 {reg = < 1 >;#address-cells = < 1 >;#size-cells = < 0 >;mipi2_csi2_output: endpoint@0 {reg = < 0 >;remote-endpoint = < &cif_mipi2_in0 >;};};};};&rkcif {status = "okay";};&rkcif_mipi_lvds2 {status = "okay";port {cif_mipi2_in0: endpoint {remote-endpoint = < &mipi2_csi2_output >;};};};&rkcif_mipi_lvds2_sditf {status = "okay";port {mipi_lvds2_sditf: endpoint {remote-endpoint = < &isp0_vir0 >;};};};&rkcif_mmu {status = "okay";};&rkisp0 {status = "okay";};&isp0_mmu {status = "okay";};&rkisp0_vir0 {status = "okay";port {#address-cells = < 1 >;#size-cells = < 0 >;isp0_vir0: endpoint@0 {reg = < 0 >;remote-endpoint = < &mipi_lvds2_sditf >;};};};&pinctrl {camera {cam_pwdn_gpio: cam-pwdn-gpio {rockchip,pins = < 1 RK_PB0 RK_FUNC_GPIO &pcfg_pull_up >;};};};
八、 调试技巧
8.1 i2c设备的通用调试命令:查看设备是否挂载到i2c总线下:
i2cdetect -y 3
8.2 摄像命令
Linux系统摄像命令:gst-launch-1.0 v4l2src device=/dev/video11 ! video/x-raw,format=NV12,width=3840,height=2160, framerate=30/1 ! xvimagesink
Android系统:
Android系统自带相机APP。点击APP,看摄像画面是否正常显示。
8.3 imx415 相关的log信息
dmesg | grep imx415
8.4 查看拓扑结构
media-ctl -d /dev/media0 -p
审核编辑:汤梓红
标签:
电脑
-
ChatGPT原理是什么?ChatGPT对人类有哪些影响?
ChatGPT发布以来,就迅速火出了圈,相当对的用户都在下载体验,对这个很感兴趣,同时用户们对ChatGPT实...
-
ChatGPT是什么意思?ChatGPT国内能用吗?
ChatGPT是什么意思ChatGPT是聊天机器人。严格来说,这是一种基于openAI的大规模学习语言,基于接收到的...
-
word自动生成目录不全怎么办?mathtype如何嵌入到word中?
word自动生成目录不全怎么办word是通过识别标题的级别来自动生成目录的,如果部分标题未设置级别,就会...
-
夸克网盘的文件怎么保存到百度网盘?微软edge浏览器新功能怎么用?
夸克网盘的文件怎么保存到百度网盘很多小伙伴为了方便下载并保存自己组要得各种资源,会进行各类网盘的...
-
word设置图片环绕方式为四周型的方法有哪些?excel表格灰色不显示内容怎么办?
word设置图片环绕方式为四周型的方法word文档的丰富功能想必大家是有目共睹的,大家在使用Word文档编辑...
硬件
- 加热鼠标垫会不会导致键盘失灵?发热鼠标垫使用有哪些注意事项?
- 鼠标上的按键分别有什么功能?鼠标六个按键功能介绍
- 自己怎么组装电脑?需要哪些配件?
- 移动硬盘不识别怎么办?怎么解决移动硬盘不识别问题?
- 移动硬盘什么品牌质量最好?移动硬盘品牌推荐
- 有哪些便宜好用的机械键盘?机械键盘推荐
- 国产游戏手柄哪个牌子好?好用国产游戏手柄推荐
- 有哪些好用u盘推荐?u盘质量品牌排行榜前十名
- 怎么查看惠普笔记本是否支持SSD加速?有哪些方法?
- 联想tinkpad t410开机失败报错fan error怎么办?怎么拆机清理散热器?
- 笔记本电脑怎么样设置显卡硬件加速?主板加显卡可以提速吗?
- g3250和i33240哪个好?CPUG3250升级可以升级成什么?
- 华硕水立方装什么主板?华硕z590p主板可以装几张显卡?
- 七彩虹b560m主板带蓝牙吗?win10系统怎么连蓝牙低音炮?
- 全球观焦点:RK3588-Camera:MIPI-CSI调试之通路解析
- 天天快看点丨RK3588-MIPI屏幕调试笔记:RK3588-MIPI-DSI之屏参配置
- 【新时代新征程新伟业】乌鲁木齐市特色园区投资环境推介会举行 会上成功签约五个项目
- 【强信心 起好步 开新局】新疆糖酒会开幕 “新食力”引领“新食尚”_天天热点评
- 【绿水青山就是金山银山|践行绿色发展理念 建设生态美好家园】和平渠今日正式通水 水源属非接触性绿化及景观用水,不建议直接接触
- 【焦点热闻】“大市小集”,快闪店里有慢生活
- 2023高考今日落幕 多地公布志愿填报时间
- 天天速递!师生吃同锅菜要同价,并且可以互相选择才是真标准
- 要把算计代入婚姻,那也别怪对方魔高一尺道高一丈-今日观点
- 当前资讯!以前的食物,培育方法比较原始,没有那么多高科技手段
- 世界热文:《P3重制版》实体盘疑泄露:PS4/5和NS版也曝光!
- 聚焦:光线传媒董事长透露:动画电影《哪吒2》明年上映
- 全球信息:全国已收获冬小麦面积2.04亿亩——“三夏”机收快速推进
- 【环球报资讯】2022年全国住房公积金发放个人住房贷款超一万亿元
- 从一封未刊信札看董每戡在长沙的朋友圈 今日热议
- 当前热讯:如何促进新型研发机构高质量发展?广州这样做
- 美债野蛮生长 国防开支节节攀升
- 老河口:蓝莓成熟季 等你来采撷
- 天天讯息:微软准备在加拿大新建实验室,将配备公司在中国和世界各地的AI专家
- 世界今亮点!中国商飞:加快形成独立自主的研制能力、生产能力
- 中超泰山队客场1-1三镇,克雷桑扳平比分,费莱尼下轮停赛|天天观天下
- 世界要闻:高考落幕——
- 实时焦点:cpu蓝屏怎么解决
- 华硕BIOS修复蓝屏解决方法需要哪些步骤-天天观热点
- 世界今日讯!思明区政务服务中心“政务智能办”专区启用
- 市质检院研发项目有新进展 LED行业标准修订获工信部立项
- 世界今热点:黄梅环保部门开展“静音降噪”行动
- 黄冈市妇幼保健院获首批国家级婚前保健特色专科建设单位 全球快看
- 天天速递!这就是信心|优化营商环境 各地硬招、实招频出
- 环球热头条丨第12届金交会开幕,现场签约总金额超3500亿元
- 全球今热点:江阴本土儿童剧《今天我是升旗手》全国展演
- C视频丨四川这4个项目,谁最有可能冲刺世界文化遗产?丨文化和自然遗产日
- 我是大运火炬手丨邓亚萍:希望大家享受体育带来的健康和快乐 环球微资讯
- C视频丨四川这5处世界遗产,你打卡过几个?丨文化和自然遗产日_当前消息
- 天天速读:黄瓜汁怎么榨好喝儿童(黄瓜汁怎么榨好喝)
- 小洗衣机什么牌子最好(儿童洗衣机什么牌子好)_天天播报
- 全球新消息丨200多分的专科学校辽宁(200多分的专科学校)
- 10寸平板电脑尺寸对照表图片(10寸平板电脑尺寸)_今日要闻
- 嘴里长智齿疼怎么办(长智齿疼怎么办)
- 繁花嫩叶的意思在《春》(繁花嫩叶的意思)
- 狂犬病的早期症状(狂犬病的前兆)-每日播报
- 世界热点评!年夜饭菜谱大全20道素菜(年夜饭菜谱)
- 从8000年前的刻符龟甲说起 成博新展用220件重磅文物解读“汉字中国”|文化和自然遗产日
- 【世界速看料】头狼:黄金下周1970-73区域布局空
- 《底特律》发行商公布独立品牌:三款游戏待发售|当前快报
- 每日精选:最美童星长大后惊艳全网!16岁时因“不够性感”被导演刷掉,她霸气怒怼:恶心的猪!
- 前沿热点:“两展一节”在京启动,北京茶业交易中心平台预计年底运行
- 车企销量哪家强?最新成绩单来了_天天实时
- 广西启动2023年普通高校毕业生就业百日攻坚行动-全球球精选
- 非遗融入生活 文化自信自强
- 当前播报:唤醒身体并击退负面情绪 《跑步穿过阴云密布》收录35个真实故事
- 团伙设下“首付购车”骗局,黄石两家4S店掉进陷阱 每日热讯
- 世界短讯!将歪心思打到人民币上,两男子用假币被拘留
- 340多家葡萄酒企业悉数亮相 第三届葡萄酒节博览会进行时|世界最资讯
- 回访章莹颖父亲:用余生把女儿带回家 | 面孔 世界今日报
- 绽放文化自信自强的时代华彩——来自“中国文化第一展”的一线观察
- 「夏收现场」知识落“地”助丰收 耕地质量提升示范田小麦增产53.6% 全球简讯
- 世界热推荐:「深度」应收账款高悬 拆解建工企业“三角债”
- 离职原因有哪些选项(离职原因有哪些)
- 遵守公司规章制度总结怎么写(遵守公司规章制度总结) 当前信息
- 萨克斯指法表大全图片(萨克斯指法表)
- 通讯!在平面直角坐标系中 已知点A 负根号5(在平面直角坐标系中 已知点a)
- 媒体:霍尊前女友陈某涉嫌敲诈勒索案已进入审查起诉阶段|天天通讯
- 金山云美股涨7.72% 世界热门
- 中方驳斥:无中生有、信口雌黄、恶意诋毁! 每日快讯
- 14家养殖公司5月份销售生猪超1226万头 专家:头部企业产能不减行业难言见底 焦点资讯
- 全球观点:毕业礼物手链编织,手串毕业款啥意思?
- 天天观天下!给我欧泡一份礼物,红酒怎么快递?
- 终于来了!曝广东“双王牌”正式到位,杜锋不用拆散后场黑白矮! 环球微头条
- 赵睿宣布最新决定,杜锋看懂了,朱芳雨该行动了|今日热门
- 网暴将受严惩,依法精准打击,就问你怕不怕
- 奥迪中国总裁温泽岳:计划构建中国市场专属的奥迪生态系统
- 环球今头条!各地税务部门不断优化服务 前5个月新办涉税经营主体643.5万户
- 学制苗族银饰 传承非遗之美 环球热文
- 报道:昔日荒山变为幸福“金山” 桃园变成农民增收“致富园”
- 2023年全国射击锦标赛(步手枪项目)落幕
- 中超综合:中超第一阶段结束 上海海港领跑积分榜
- 2023年三亚日报 “爱在三亚 情定天涯”公益相亲会今天举行|焦点信息
- 当前视讯!和平区劝业场街流动菜点进社区 丰富居民菜篮子
- 茅台咖啡来了!12元可多加2ml飞天茅台酒 最新回应_当前通讯
- 全球热讯:已离婚十年,董洁真不该旧事重提
- 直击2023中国经济传媒大会丨中国经济体制改革会副会长樊纲:消费需求一时难以扩大,短期内仍寄希望于投资需求
- 【世界时快讯】我的隆胸手术经历:从缺乏自信到充满自信
- 世界最新:因为本人哥哥车祸不能工作现在单位要求他办理离职这件事是否受合
- 如果客人从我这买了饮品,回家后喝了几口后,说里面有虫子,找我索赔
- 热消息:外公撞死人 会对外孙女有什么影响
- 热推荐:这个全国区县级首创活动在东安湖体育公园开幕
- AI前哨 | OpenAI联合创始人Sam Altman:安全性很重要 不会很快有GPT-5|今日视点
- 证监会就公募基金投顾业务管理规定公开征求意见
- 国家乡村振兴局开展农村厕所革命“提质年”
- 黄州区“政采贷”为中小微企业发展注入金融“活水”
- 高中英语3500单词录音 高中英语3500单词音频
- 英雄联盟怎么出装备合理(英雄联盟怎么出装备)
- 【环球快播报】中国惊奇先生金刚尸被消灭 中国惊奇先生金刚尸
- 环球观点:第12届东盟残运会在柬埔寨首都闭幕
- 诗词里的遗产:龙虎天下绝 千载玉棺探秘_最资讯
- 北京门头沟举办“文化和自然遗产日”非遗宣传展示活动-环球快报
- 世界简讯:海南省机关事务管理局保卫处、海南省直属机关保卫大队开展朗诵比赛活动
- 天津夏季达沃斯论坛期间将举办主题城市论坛_全球时讯
- 关于铁路计次票、定期票 如何购买使用
电竞
数码
事件
- 吴怡农为父13年前性骚女大学生发声,网友不禁脱口1字-天天资讯06-11
- 2023世界动力电池大会储能发展高峰论坛举行 宜宾被授予“中国储能产业新高地”06-11
- 奇迹手游sf发布网哪个最受欢迎 奇迹手游sf发布网最新分享_环球速讯06-11
- 黄州区“政采贷”为中小微企业发展注入金融“活水” 环球快播报06-10
- 俄央行维持7.5%基准利率不变06-10
- 讯息:国铁集团6月10日起在12306网站试行在线选铺服务06-10
- 加拿大野火肆虐影响美国,野火频发已成全球性问题06-10
- 高考考程过半 考生从容赴考 家长陪考减少06-10
- 诗意盎然的意思(盎然的意思)-今日热门06-10
- 梁晓声人世间小说好词佳句(小学生好词佳句摘抄大全)-每日热门06-10
- 世界观焦点:茅台咖啡来了!12元可多加2ml飞天茅台酒 最新回应06-10
- 高质量发展调研行 | 在智慧港口见证大湾区经济活力——广州南沙港走访一线见闻|焦点热议06-10
- 在铁路12306买卧铺票也可以在线选铺位了!手把手教你怎么操作06-10
- 焦点简讯:“要命”的嗓子疼到底是个什么病?06-10
- 年夜饭菜谱大全20道素菜(年夜饭菜谱)06-10