视频智能分析技术，起源于计算机视觉技术。计算机视觉，是人工智能研究的分支之一，它在图像及图像描述之间建立映射关系，从而通过数字图像处理和分析来理解视频画面中的内容。它使计算机得以从纷繁的视频图像中分辩、识别出关键目标。应用于安防视频监控系统后，其可借助计算机强大的数据处理能力过滤掉图像中无用的或干扰信息，并自动分析、抽取视频源中关键的有用信息，使监控系统不但有眼睛(摄像机)，更由于智能视频分析计算机或专用DSP处理器，使监控系统具有智慧的大脑功能，使监控变得“聪明”，能自动学习和思考，从而替代人力或者协助人力进行监控。

视频分析要建立在背景分析、目标跟踪、特征提取、分析反馈等过程之上，主要利用以上过程的结果，根据目标出现的时间、位置、速度、大小等因素，并结合之前设置好的行为规则，实现分析判断，如入侵、起身、越界、逗留等。