捕获海康威视IPCamera图像,转成OpenCV能够处理的图像(二)

摘要:
海康威视IPCamera图像捕获捕获海康威威视IPComera图像。转换为OpenCV可以处理的IplImage图像(II)使用的海康威视相机型号:DS-2CD4026FWD-海康威威视IPCamera图像捕获方法有两种方法:在SDK_DVR_CaptureJPEGPicture_NEW中使用NET进行视频捕获和实时流捕获。在实现了捕获海康威视IPCamera图像并将其转换为OpenCV可以处理的IplImage图像(I)的方法之后,发现它不可能是实时的。从而实现了YV12格式视频流的捕获功能。仅使用YV12是不够的。您需要将YV12转换为YUV4:4:4。

海康威视IPCamera图像捕获


捕获海康威视IPCamera图像。转成OpenCV能够处理的IplImage图像(一)

捕获海康威视IPCamera图像。转成OpenCV能够处理的IplImage图像(二)


所使用海康威视摄像头型号:DS-2CD4026FWD-(A)(P)


海康威视IPCamera图像捕获方法有两种:

(1)利用SDK里面的NET_DVR_CaptureJPEGPicture_NEW进行视频抓图

(2)捕获实时流。将实时流解码成YV12,然后转换成RGB


在上一篇博文里,我介绍了第一种方法,可是由于NET_DVR_CaptureJPEGPicture_NEW该函数执行须要较长时间,无法实时,所以必须继续另外一种方法。

在这篇博文里,我将介绍另外一种方法,将捕获到的海康威视IPCamera摄像头图像转成OpenCV能处理的IplImage图像。


在实现完捕获海康威视IPCamera图像,转成OpenCV能够处理的IplImage图像(一)里面的方法后,发现不能实时。这个系统我是要做给给人看的,是须要实时演示的,这样子肯定是不行的。

纠结了好久!然后查看海康威视《设备网络SDK使用手冊_V4.2》,里面有一个预览模块演示样例程序,可惜我一直执行不了,报出的错误是PROCGETCONSOLEWINDOW GetConsoleWindow中的GetConsoleWindow被重定义,后来一直调试没调成功。


实在是没辙了。打海康客服,只是海康的客服我实在无语,北京的全然无法接通,直接打杭州的,打了四五遍最终有个人接电话了,对方不懂,然后说让个project师回电话。OK。最终回了。他告诉我http://www.hikvision.com/cn/download_more_401.html 这里是有例程的,有分功能演示样例!突然间有了希望了,例程是VC6.0project,改了一些地方后。最终能执行了。于是,将他的MFCproject相关的代码抠出来,重组。

于是实现了捕获YV12格式的视频流的功能,光有YV12还是不行的,须要将YV12转成YUV4:4:4的。然后再将YUV色度空间转换成RGB色度空间,这个过程是在信件的DecBFun回调函数(回调函数请看这里!)里面执行的。


不多说了,上代码!


#include <cstdio>
#include <cstring>
#include <iostream>
#include "Windows.h"
#include "HCNetSDK.h"
#include "PlayM4.h"
#include <opencv2opencv.hpp>
#include "cv.h"
#include "highgui.h"
#include <time.h>
#define USECOLOR 1
using namespace std;
using namespace std;

//--------------------------------------------
int iPicNum=0;//Set channel NO.
LONG nPort=-1;
HWND hWnd=NULL;


void yv12toYUV(char *outYuv, char *inYv12, int width, int height,int widthStep)
{
   int col,row;
   unsigned int Y,U,V;
   int tmp;
   int idx;

  //printf("widthStep=%d.
",widthStep);

   for (row=0; row<height; row++)
   {
      idx=row * widthStep;
      int rowptr=row*width;

      for (col=0; col<width; col++)
      {
         //int colhalf=col>>1;
         tmp = (row/2)*(width/2)+(col/2);
//         if((row==1)&&( col>=1400 &&col<=1600))
//         { 
//          printf("col=%d,row=%d,width=%d,tmp=%d.
",col,row,width,tmp);
//          printf("row*width+col=%d,width*height+width*height/4+tmp=%d,width*height+tmp=%d.
",row*width+col,width*height+width*height/4+tmp,width*height+tmp);
//         } 
         Y=(unsigned int) inYv12[row*width+col];
         U=(unsigned int) inYv12[width*height+width*height/4+tmp];
         V=(unsigned int) inYv12[width*height+tmp];
//         if ((col==200))
//         { 
//         printf("col=%d,row=%d,width=%d,tmp=%d.
",col,row,width,tmp);
//         printf("width*height+width*height/4+tmp=%d.
",width*height+width*height/4+tmp);
//         return ;
//         }
         if((idx+col*3+2)> (1200 * widthStep))
         {
          //printf("row * widthStep=%d,idx+col*3+2=%d.
",1200 * widthStep,idx+col*3+2);
         } 
         outYuv[idx+col*3]   = Y;
         outYuv[idx+col*3+1] = U;
         outYuv[idx+col*3+2] = V;
      }
   }
   //printf("col=%d,row=%d.
",col,row);
}



//解码回调 视频为YUV数据(YV12),音频为PCM数据
void CALLBACK DecCBFun(long nPort,char * pBuf,long nSize,FRAME_INFO * pFrameInfo, long nReserved1,long nReserved2)
{
 	long lFrameType = pFrameInfo->nType;	

	if(lFrameType ==T_YV12)
	{
#if USECOLOR
	//int start = clock();
	IplImage* pImgYCrCb = cvCreateImage(cvSize(pFrameInfo->nWidth,pFrameInfo->nHeight), 8, 3);//得到图像的Y分量  
	yv12toYUV(pImgYCrCb->imageData, pBuf, pFrameInfo->nWidth,pFrameInfo->nHeight,pImgYCrCb->widthStep);//得到所有RGB图像
	IplImage* pImg = cvCreateImage(cvSize(pFrameInfo->nWidth,pFrameInfo->nHeight), 8, 3);  
	cvCvtColor(pImgYCrCb,pImg,CV_YCrCb2RGB);  
	//int end = clock();
#else
	IplImage* pImg = cvCreateImage(cvSize(pFrameInfo->nWidth,pFrameInfo->nHeight), 8, 1);  
    memcpy(pImg->imageData,pBuf,pFrameInfo->nWidth*pFrameInfo->nHeight); 
#endif
	//printf("%d
",end-start);
	cvShowImage("IPCamera",pImg);
	cvWaitKey(1);
#if USECOLOR
	cvReleaseImage(&pImgYCrCb);
	cvReleaseImage(&pImg);
#else
	cvReleaseImage(&pImg);
#endif
	//此时是YV12格式的视频数据,保存在pBuf中,能够fwrite(pBuf,nSize,1,Videofile);
	//fwrite(pBuf,nSize,1,fp);
	}
	/***************
	else if (lFrameType ==T_AUDIO16)
	{
		//此时是音频数据,数据保存在pBuf中。能够fwrite(pBuf,nSize,1,Audiofile);
		
	}
	else
	{

	}
	*******************/

}


///实时流回调
void CALLBACK fRealDataCallBack(LONG lRealHandle,DWORD dwDataType,BYTE *pBuffer,DWORD dwBufSize,void *pUser)
{
	DWORD dRet;
	switch (dwDataType)
	{
	case NET_DVR_SYSHEAD:    //系统头
		if (!PlayM4_GetPort(&nPort)) //获取播放库未使用的通道号
		{
			break;
		}
		if(dwBufSize > 0)
		{
			if (!PlayM4_OpenStream(nPort,pBuffer,dwBufSize,1024*1024))
			{
				dRet=PlayM4_GetLastError(nPort);
				break;
			}
			//设置解码回调函数 仅仅解码不显示
 			if (!PlayM4_SetDecCallBack(nPort,DecCBFun))
 			{
 				dRet=PlayM4_GetLastError(nPort);
 				break;
 			}
		
			//设置解码回调函数 解码且显示
			//if (!PlayM4_SetDecCallBackEx(nPort,DecCBFun,NULL,NULL))
			//{
			//	dRet=PlayM4_GetLastError(nPort);
			//	break;
			//}

			//打开视频解码
			if (!PlayM4_Play(nPort,hWnd))
			{
				dRet=PlayM4_GetLastError(nPort);
				break;
			}

			//打开音频解码, 须要码流是复合流
			if (!PlayM4_PlaySound(nPort))
			{
				dRet=PlayM4_GetLastError(nPort);
				break;
			}		
		}
		break;
		
	case NET_DVR_STREAMDATA:   //码流数据
		if (dwBufSize > 0 && nPort != -1)
		{
			BOOL inData=PlayM4_InputData(nPort,pBuffer,dwBufSize);
			while (!inData)
			{
				Sleep(10);
				inData=PlayM4_InputData(nPort,pBuffer,dwBufSize);
				OutputDebugString(L"PlayM4_InputData failed 
");	
			}
		}
		break;	
	}		
}

void CALLBACK g_ExceptionCallBack(DWORD dwType, LONG lUserID, LONG lHandle, void *pUser)
{
    char tempbuf[256] = {0};
    switch(dwType) 
    {
    case EXCEPTION_RECONNECT:    //预览时重连
    printf("----------reconnect--------%d
", time(NULL));
    break;
	default:
    break;
    }
}

void main() {

  //---------------------------------------
  // 初始化
  NET_DVR_Init();
  //设置连接时间与重连时间
  NET_DVR_SetConnectTime(2000, 1);
  NET_DVR_SetReconnect(10000, true);
  
  //---------------------------------------
  // 获取控制台窗体句柄
  //HMODULE hKernel32 = GetModuleHandle((LPCWSTR)"kernel32");
  //GetConsoleWindow = (PROCGETCONSOLEWINDOW)GetProcAddress(hKernel32,"GetConsoleWindow");

  //---------------------------------------
  // 注冊设备
  LONG lUserID;
  NET_DVR_DEVICEINFO_V30 struDeviceInfo;
  lUserID = NET_DVR_Login_V30("10.102.7.88", 8000, "admin", "12345", &struDeviceInfo);
  if (lUserID < 0)
  {
       printf("Login error, %d
", NET_DVR_GetLastError());
       NET_DVR_Cleanup();
       return;
  }

  //---------------------------------------
  //设置异常消息回调函数
  NET_DVR_SetExceptionCallBack_V30(0, NULL,g_ExceptionCallBack, NULL);


  //cvNamedWindow("IPCamera");
  //---------------------------------------
  //启动预览并设置回调数据流 
  NET_DVR_CLIENTINFO ClientInfo;
  ClientInfo.lChannel = 1;        //Channel number 设备通道号
  ClientInfo.hPlayWnd = NULL;     //窗体为空,设备SDK不解码仅仅取流
  ClientInfo.lLinkMode = 0;       //Main Stream
  ClientInfo.sMultiCastIP = NULL;
  
  LONG lRealPlayHandle;
  lRealPlayHandle = NET_DVR_RealPlay_V30(lUserID,&ClientInfo,fRealDataCallBack,NULL,TRUE);
  if (lRealPlayHandle<0)
  {
	printf("NET_DVR_RealPlay_V30 failed! Error number: %d
",NET_DVR_GetLastError());
	return;
  }

  //cvWaitKey(0);
  Sleep(-1);

  //fclose(fp);
  //---------------------------------------
  //关闭预览
  if(!NET_DVR_StopRealPlay(lRealPlayHandle))
  {
	printf("NET_DVR_StopRealPlay error! Error number: %d
",NET_DVR_GetLastError());
	return;
  }
  //注销用户
  NET_DVR_Logout(lUserID);
  NET_DVR_Cleanup();

  return;
}


最终能够实时捕获图像了。并且转换成了OpenCV能够处理的图像格式。

在这个过程中搜了非常多资料,可是没有一个地方能具体说明,只是最终还是把这个给攻克了。

 

附加说明:假设最后要做图像处理而不是像我这样仅仅是将採集的图像显示出来,那么以下的语句是不须要的。

  1. #if USECOLOR  
  2.     cvReleaseImage(&pImgYCrCb);  
  3.     cvReleaseImage(&pImg);  
  4. #else  
  5.     cvReleaseImage(&pImg);  
  6. #endif  

 

 后记:尽管这个功能实现了,可是与我的图像处理函数怎样结合到一起?我想到的是用链队列,双线程。链队列代码请看这里

 


写这两篇博文的目的事实上也是想让处于探索过程中的开发者能少走些弯路,节省些时间,衷心希望本文能够帮到你!


由于本人已经毕业。项目也早就已经结题了,手头上不再具有可供调试的硬件设备。因此对于大家所碰到的问题,我基本上也已经无法回答了。非常抱歉!

假设大家在开发海康威视摄像头的过程中遇到了什么问题能够去跟海康客服去沟通,假设您所在地区的客服无法联系上的话,请直接联系杭州总部的客服。

最后,对之前非常长一段时间对大家所提出的问题一直置之不理再次表示道歉!

谢谢大家的支持!


**************************************************************************************

转载请注明出处:http://blog.csdn.net/wanghuiqi2008/article/details/31410509

**************************************************************************************





免责声明:文章转载自《捕获海康威视IPCamera图像,转成OpenCV能够处理的图像(二)》仅用于学习参考。如对内容有疑问,请及时联系本站处理。

上篇modelsim脚本文件的编写Android蓝牙操作笔记下篇

宿迁高防,2C2G15M,22元/月;香港BGP,2C5G5M,25元/月 雨云优惠码:MjYwNzM=

相关文章

基于 WebRTC 的 RTSP 视频实时预览

简介 背景 由于项目需要,需要使用摄像头预览功能,设备型号为海康威视。目前已存在的基于 FFmpeg 的方案延迟都太高,所以项目最终选择基于此方案。 方案 方案选用为基于 WebRTC 的视频即时通讯,它原生支持对 RTP 协议的解码,所以能够做到延迟很低,大概0.2-0.4秒左右,其他方案都有大于1秒的延迟。 WebRTC对浏览器有要求,可以在下面的地...

c提取文件路径、文件名和后缀名

/* MAKEPATH.C */ #include <stdlib.h> #include <stdio.h> void main( void ) { char path_buffer[_MAX_PATH]; char drive[_MAX_DRIVE]; char dir[...

windows server中opencv运行过程中MF.dll/MFReadWrite.dll/MFPlat.DLL文件丢失问题解决

windows server 2008/2012 使用opencv出现 DLL load failed错误,发现缺失部分dll:MFPlat.dll、MF.dll、MFReadWrite.dll等等,原因:服务器版本默认没有安装windows media player。1、解决方法1:使用如下步骤安装windows media player:1)、打开“服...

Linux中 diff与patch的深入分析(转)

本文转自http://linux.chinaitlab.com/c/805820.html 1) diff的传统格式输出.   ############################################   cat before.txt   输出:   This is a line to be deleted   This is a line...

gprof的使用介绍

转于:http://blog.chinaunix.net/uid-25194149-id-3215487.html #不知道这是在哪里找的了,感谢各位~性能分析工具gprof介绍Ver:1.0目录1. GPROF介绍 42. 使用步骤 43. 使用举例 43.1 测试环境 43.2 测试代码 43.3 数据分析 53.3.1 flat profile模式...

图形学实验用的VS2017本地环境配置,VS 2017配置opencv、Eigen

最近在进行图形学相关实验时,会用到VS 2017,虚拟机里的VScode卡得小宇宙爆发,索性就在本地进行配置吧。这个过程主要需要配置 opencv 和 Eigen 线代库。下面是配置教程: 一、VS2017 配置OpenCV 这是我看到的最详细的配置教程:VS2017配置opencv教程(超详细!!!) 配置问题 在配置好后,测试运行时,我的报错“由于找不...