Segundo as investigações do Dr. Alexandre Alves [ligação] a capela da Via Sacra foi edificada, em data incerta mas anterior ao séc. XV, sobre as ruínas duma pequena capela românica em honra do "Senhor do Horto". A capela passou a ser conhecida por "Capela da Via Sacra" porque era aí que estava instalado o Calvário da Via Sacra que os irmãos da Ordem Terceira de São Francisco faziam todas as sextas-feiras da Quaresma, com início na Igreja dos Terceiros seguindo o trajecto inicial da antiga estrada romana Viseu-Seia.
O edifício sofreu grandes acrescentos e remodelações em especial em 1690 quando a irmandade de S. Francisco das Chagas mandou construir os altares laterais e um novo corpo mais vasto. Os trabalhos foram concluídos em Março do ano seguinte e no dia 23 o Bispo D. Ricardo Russel autorizou a bênção dos altares e da igreja, para se fosse possível o culto e os enterramentos. Durante o séc. XVIII foram executados novos retábulos, renovaram-se as imagens e foi construído o campanário, tendo por modelo o da capela da Nossa Senhora dos Remédios, junto da Porta do Soar de Cima, e colocado um sino fundido por João de Argos.
Foi por iniciativa da irmandade de S. Francisco das Chagas que se iniciou a tradição da Procissão da Ressurreição no domingo de Pascoela em que participavam muitas crianças vestidas de "anjinhos" que no final recebiam amêndoas. No adro e junto ao muro da velha estrada para Ranhados erguia-se o nicho do Calvário que hoje está encostado ao lado esquerdo do edifício. O nicho tinha uma cruz de madeira que o tempo levou.
O local é muito airoso e ainda há poucas décadas tinha uns frondosos cedros que o faziam muito agradável e um bonito miradouro da cidade porém é de má memória porque foi o local onde durante a Idade Média se ergueu a forca da cidade, onde foram sentenciados os condenados. Felizmente a capela teve há alguns anos obras na cobertura, um telhado novo e arranjos exteriores porém não tem reboco, encontra-se fechada e com o interior lamentavelmente votado ao abandono.
