Старые мрачные каменные стены замка, его низкосводчатые проходы, узкие лестницы, небольшие полукруглые окна, слабо пропускающие свет, – все это как нельзя лучше подходило под тюремное здание, тревожившее и тяготившее воображение заключенных, поколения которых создавали самые невероятные легенды и истории этой петербургской тюрьмы.

Одну из них в 1918 г. поведал в рассказе «Ангел Литовского замка» беллетрист Александр Степанович Рославлев – основатель и редактор журнала «Независимый»: «Ангел стоял на кровле тюремной церкви; отлитый из меди мастером, он являл мощь строгого бытия, какое и подобает посланнику Господа. Словно только ступил он на кровлю – одежда его еще вьется и трепещет, и крылья не опущены. Обе руки Ангел положил на перекладины креста, который выше его и кажется тяжелым. Может быть, Ангел устал и вот слетел отдохнуть. Лик его задумчив, взгляд устремлен в даль полета. Таков был Ангел. Каждую ночь он обходит тюрьму; многие из арестантов слышали его звонкие шаги, а некоторые даже видели блеск крыльев; иногда он стучался в камеру кого-либо из смертников, и того в ту же ночь казнили. В дни Пасхи и Рождества Ангел являлся заключенным во сне, приносил вести от родных, предсказывал, благословлял; было даже, что он медной рукой своей в Страстную субботу выломал решетку в окне одного невинного осужденного и, усыпив часовых, вывел его за ворота тюрьмы. Не мог бы человек согнуть так брусья решетки, да и на плитняке двора остались следы ног, словно бы выжженные. Настанет день, когда Ангел уронит крест, и все выйдут на свободу.

Такова была легенда…»

Родившийся и живший в Коломне живописец и театральный художник Александр Николаевич Бенуа (1870–1960) в своих знаменитых «Воспоминаниях» также дал довольно точную оценку Литовской тюрьме: «…Тюрьма, перестроенная на ампирный фасон из сооруженного при Екатерине „турецкого семибашенного“ замка… состояла из гладких толстых стен, соединенных кургузыми необычной толщины круглыми башнями. Окон в этом здании было до странности мало, а те окна, что были расположены по верхнему этажу башен, были круглой формы, что и давало впечатление каких-то выпученных в разные стороны глаз. Центральный фасад был украшен фронтоном в „греческом вкусе“ со статуями двух держащих крест ангелов посреди. Это мрачное (несмотря на свою белую окраску) здание принадлежало к лучшему, что было построено в классическом стиле в Петербурге, а на меня, ребенка, Литовский замок производил одновременно как устрашающее, так и притягивающее впечатление. Ведь за этими стенами, за этими черными окнами, с их железными решетками, я рисовал себе самых жутких разбойников, убийц и грабителей, и я знал, что из этой тюрьмы выезжали те „позорные колесницы“, которые я видел медленно следующими мимо наших окон, с восседающими на них связанными преступниками. Несчастных везли на Семеновский плац для выслушивания приговора ошельмования».