Firefly-RK3399

作为Firefly新一代的顶级开源平台,Firefly-RK3399采用了六核64位“服务器级”处理器Rockchip RK3399,拥有2GB/4GB DDR3和16G/32GB eMMC, 并新增DP 1.2、PCIe 2.1 M.2、Type-C、USB3.0 HOST等高性能数据传输和显示接口。Firefly-RK3399强大的性能配置将给VR、全景拍摄、视觉识别、服务器、3D等前沿技术带来里程碑的变革。

Camera 使用

更新时间:2018-03-15 阅读:16573

简介

Firefly-RK3399 开发板分别带有两个MIPI,一个DVP摄像头接口,MIPI支持最高4K拍照,并支持 1080P 30fps以上视频录制。此外,开发板还支持 USB 摄像头。

本文以 OV13850/OV5640 摄像头为例,讲解在该开发板上的配置过程。

接口效果图

Rk3399-camera-board-cn.jpg

DTS配置

 isp0: isp@ff910000 {
	 …
	 status = "okay";
 }
 isp1: isp@ff920000 {
	 …
	 status = "okay";
 }

驱动说明

与摄像头相关的代码目录如下:

 Android:
 `- hardware/rockchip/camera/
    |- CameraHal             // 摄像头的 HAL 源码
    `- SiliconImage          // ISP 库,包括所有支持模组的驱动源码
       `- isi/drv/OV13850    // OV13850 模组的驱动源码
          `- calib/OV13850.xml // OV13850 模组的调校参数
 `- device/rockchip/rk3399/
    |- rk3399_firefly_box
    |  `- cam_board.xml     // 摄像头的参数设置


 Kernel:
 |- kernel/drivers/media/video/rk_camsys  // CamSys 驱动源码
 `- kernel/include/media/camsys_head.h

配置原理

设置摄像头相关的引脚和时钟,即可完成配置过程。

从以下摄像头接口原理图可知,需要配置的引脚有:AF_VDD28、DOVDD18、AVDD28、DVDD12、PWDN1、RST 和 MCLK。

  • MIPI 接口

Rk3399-camera-mipi-interface.jpg

  • DVP 接口

Rk3399-camera-cif-interface.jpg

  • AF_VDD28 可不做配置。

  • DOVDD18、AVDD28

DOVDD18、AVDD28 由 DVP_PWR 控制,DVP_PWR 对应 RK3399 的 GPIO1_C7:

Rk3399-camera-dvp.jpg

  • DVDD12

DVDD12 由 CIF_POWER 引脚控制,CIF_POWER 对应 RK3399 上的 GPIO1_C6 引脚:

Rk3399-camera-cif.jpg


  • PWDN1、RST

MIPI CIF:PWDN0(共用)、PWDN1、RST 对应 GPIO2_B4、GPIO2_D4、GPIO0_B0 引脚:

CIF_RST硬件上拉,无需额外配置

Rk3399-camera-reset.jpg

在开发板中,除了 DVDD12 (CIF_POWER) 要在 DTS中设置以外,其它引脚都是在 cam_board_rk3399.xml 中设置。

配置步骤

配置 Android

修改device/rockchip/rk3399/$(TARGET_PRODUCT)/cam_board.xml来注册摄像头:

        
        
        
            
                
                    
                   
                   
                                        
                    
 
 
 
 
 
     
 
 
 
                    
                    
                    
                    
                    
                    
       
                
                    
                    
                    
                    
                    
                    
                    
                    
                    
                
      
      
      
      
      
      
      
      
      
   
       
               
               
               
                
                
                
                
                
         
         
                
                
               
                
                
               
                
               
                
                
                
                
                
                
               
                
                
         
         
                
                
                
                
                
                
                
               
                
          
                
                    
                    
                    
                    
                    
         
         
                           
                    
                    
                    
                    
                    
                
                
                    
                    
                    
                    
                
                
                
                
                
                
                
                
        

//DVP       
                
        
        
        
        
        
        
        
                
        
        
        
        
        
        
        


主要修改的内容如下:

  • Sensor 名称

该名字必须与 Sensor 驱动的名字一致,目前提供的 Sensor 驱动格式如下:

libisp_isi_drv_OV13850.so
libisp_isi_drv_OV5640.so

用户可在编译 Android 完成后在目录 out/target/product/rk3399_firefly_box/system/lib/hw/ 下找到该摄像头驱动文件。

  • Sensor 软件标识

注册标识不一致即可,可填写以下值:

CAMSYS_DEVID_SENSOR_1A
CAMSYS_DEVID_SENSOR_1B
CAMSYS_DEVID_SENSOR_2
  • 采集控制器名称

目前只支持:

CAMSYS_DEVID_MARVIN
  • Sensor 所连接的主控 I2C 通道号

具体通道号请参考摄像头原理图连接主控的 I2C 通道号。

  • Sensor 寄存器地址长度,单位:字节

  • Sensor 的 I2C 频率,单位:Hz,用于设置 I2C 的频率。

  • Sensor 输入时钟频率, 单位:Hz,用于设置摄像头的时钟。

  • Sensor AVDD 的 PMU LDO 名称。如果不是连接到 PMU,那么只需填写 NC。

  • Sensor DOVDD 的 PMU LDO 名称。

如果不是连接到 PMU,那么只需填写 NC。注意 min 以及 max 值必须填写,这决定了 Sensor 的 IO 电压。


  • Sensor DVDD 的 PMU LDO 名称。

如果不是连接到 PMU,那么只需填写 NC。

  • Sensor PowerDown 引脚。

  //mipi
 //dvp

直接填写名称即可,active 填写休眠的有效电平。

  • Sensor Reset 引脚。

直接填写名称即可,active 填写复位的有效电平。

  • Sensor Power 引脚。

直接填写名称即可, active 填写电源有效电平。

  • 选择 Sensor 作为前置还是后置。

可填写 "front" 或 "back"。

  • Sensor 的接口方式

可填写如下值:

CCIR601
CCIR656
MIPI
SMIA
  • Sensor 的镜像方式

目前暂不支持。

  • Sensor 的角度信息

  • 物理接口设置


    • MIPI

   
 hyMode:Sensor 接口硬件连接方式,对 MIPI Sensor 来说,该值取 "CamSys_Phy_Mipi"
 Lane:Sensor mipi 接口数据通道数
 Phyindex:Sensor mipi 连接的主控 mipi phy 编号
 sensorFmt:Sensor 输出数据格式,目前支持 CamSys_Fmt_Raw_10b

    • DVP


phyMode: Sensor 接口硬件连接方式,DVP Sensor 接口则为:CamSys_Phy_Cif
sensor_d0_to_cif_d:Sensor DVP 输出数据位 D0 对应连接的主控 DVP 接口的数据位号码
cif_num:Sensor DVP 连接到主控 DVP 接口编号
sensorFmt:Sensor 输出的数据格式,目前版本支持填写 CamSys_Fmt_Yuv422_8b

编译内核需将 drivers\media\video\rk_camsys 驱动源码编进内核,其配置方法如下:

在内核源码目录下执行命令:

make menuconfig

然后将以下配置项打开:

Device Drivers  --->
 Multimedia support  --->
        camsys driver
         RockChip camera system driver  --->
                   camsys driver for marvin isp
                   camsys driver for cif

最后执行:

make ARCH=arm64 rk3399-firefly.img

即可完成内核的编译。

调试方法

终端下可以直接修改/system/etc/cam_board.xml调试各参数并重启生效

FAQs

1.无法打开摄像头,首先确定sensor I2C是否通信。若不通则可检查mclk以及供电是否正常(Power/PowerDown/Reset/Mclk/I2cBus)分别排查
2.支持列表ː
13Mː OV13850/IMX214-0AQH5
8Mː OV8825/OV8820/OV8858-Z(R1A)/OV8858-R2A
5Mː OV5648/OV5640
2Mː OV2680
详细资料可查询SDK/RKDocs