A população brasileira, assim como em outros países, tem se apresentado mais envelhecida. Direcionando os esforços para idosos que moram sozinhos, um modelo que seja capaz de fazer um monitoramento não-invasivo e identificar um comportamento irregular pode contribuir para a redução de uma situação de perigo na sua rotina. Nesse contexto, o presente trabalho, utilizou as técnicas de Visão Computacional para detecção de movimento e reconhecimento de padrões com a finalidade de propor e avaliar um algoritmo capaz de monitorar padrões anômalos de movimentação entre os cômodos em residências de idosos que moram ou ficam sozinhos. Analisando os resultados foi possível detectar e rastrear o movimento das pessoas no vídeo. A biblioteca OpenCV foi usada para auxiliar o desenvolvimento do sistema para validação.