Se calhar também não sou o melhor exemplo.
Mas, pense na lógica gramatical: se for só um HORÁRIO, sem mudanças penso que o singular é bem aplicado visto que não há uma variação do tempo de abertura e fechamento.
Se forem vários tempos de abertura, por exemplo, já seria HORÁRIOS.
Atendimento, para mim, já tem mais consenso que seja singular porque o atendimento só vai ser um, não sei se haverá uma excepção. Talvez se só estiver a explicar as várias vezes que lá foi. Por exemplo: aqueles horários malucos estão sempre a mudar e os atendimentos são péssimos.
Portanto:
Os horários de atendimento da agência X são: ...
OU
O horário de atendimento da agência X é: ...
Espero ter ajudado.