本发明公开了一种基于视频的老年人认知功能缺陷评估系统及装置，属于医学、建筑以及公共管理相结合的交叉学科领域。该系统及装置利用视频监控技术对患病老人日常居家生活进行长期观察和跟踪，收集和总结老年人的异常行为特征，将这些行为特征与基于异常居家行为的认知功能缺陷评分规则进行对应，从而依据基于异常居家行为的评分规则对老年人的认知功能情况进行评估，可以实现对居家老人认知功能缺陷相关疾病的早期识别和诊断。本发明的系统及装置简单易懂，可操作性强，能够客观清楚地反映居家老人患有认知功能缺陷相关疾病的可能性，对于指导老年人的痴呆、抑郁等认知功能缺陷相关疾病的早期预判、诊断具有重要的意义。