Тульский архиепископ пребывает на архиерейском дворе. Это, действительно, двор, на котором красуется одна из древнейших церквей Тулы — Похвалы Пресв. Богородицы, когда-то принадлежавшая Предтечеву монастырю, основанному тульскими боярами и посадскими людьми в память обороны Тулы от Девлет-Гирея в 1552 году. От прежних трех церквей монастырских осталась только эта одна, подновленная в 1865 году. Церковь, действительно, любопытна во многих отношениях. Хотя многое в ней перестроено, в трапезе выведены своды, расширены пролеты арок, открыт новый вход, а галерея с северной стороны обращена в ризницу, тем не менее, старое обличие храма выступает очень хорошо. Храм не велик, на нем три пирамидальных верха; средняя часть его меньше трапезы и алтаря, но значительно выше их; под сводом голосники; связи в стенах деревянные, а самые стены, сложенные из больших кирпичей, засыпаны в средине щебнем и залиты цементом. Яркость свежей окраски, новый мозаичный пол, несколько новых иконописных изображений, хотя и не вполне соответствуют старине основных линий построения, но и не уничтожают их, а это, — при том условии, что реставрации у нас, к несчастью, почти всегда равносильны уничтожению былого — уже заслуга, и не из последних. Любовь и уважение к глубокой старине сказались здесь также и в том, что сюда, в нижний этаж церкви, перенесено в 1887 году тульское епархиальное древлехранилище, возникшее по почину самого высокопреосвященного. Иконы, напрестольные кресты, многие сосуды, панагии, палицы и пр. достойны полного внимания. Характерна лохань-блюдо и при нем рукомойник для омовения рук епископа пред священнодействием, работы 1697 года, с изображениями на морских волнах чудовищ и обнаженных фигур языческого мифа: похищение Юпитером Европы, поэта Ариона на дельфине и т. д. Надпись, вырезанная на блюде, свидетельствует, что оно дано было неким гостем Шустовым «7205 г. маия в 11 день в граде Коломны в соборную церковь Пресвятые Владычицы Богородицы» на вечное поминовение о его сыне и других родных. Подобных изображений имеется в наших ризницах не малое количество; таково, например, старинное блюдо великого князя Мстислава в Кирилло-Белозерском монастыре, Новгородской губернии, с изображением Персея и Андромеды. Здесь же имеется в древлехранилище пример изображения ветхозаветных пророков на предметах священных, как, например, на иконе «Похвала Богородицы», XVII века, где подле Богоматери, восседающей на троне, виднеются: Захария, Даниил, Иаков, Моисей, цари Соломон и Давид, Исайя, Аввакум, Авдей, Иеремия, Иезекиил, все в сияниях; а внизу, коленопреклоненный, без сияния и не названный пророком, Валаам.
Светлый фон