Некоторые историки считают, что во многом под влиянием Фотия император решился на издание знаменитого указа 1822 года о запрещении масонских и иных тайных обществ, братств и сект. Точно известно, что противники министра духовных дел князя А. Н. Голицына успешно использовали энергию Фотия для низвержения этого некогда влиятельного при дворе человека и закрытия в 1824 году его министерства. В августе 1822 года Фотий стал игуменом Юрьева монастыря, причем эта знаменитая в истории Великого Новгорода обитель, находившаяся в запустении, сразу же зажила новой жизнью.

Поспешно ремонтировались ее стены и церкви, срочно возводился новый собор, церковная утварь засверкала бриллиантами и золотом из орловской сокровищницы. Из Петербурга и других мест непрерывно прибывали обозы с провиантом и припасами для юрьевской братьи, которая множилась и толстела. Правда, внутри стен монастыря порой происходили дела неблаговидные, и светским властям приходилось вмешиваться, чтобы навести там порядок. Особую скандальную известность приобрела история 1832 года с пресловутой Фотинией — актрисой из какого-то петербургского театра, которая поселилась в созданной Фотием прямо в монастыре больнице для «бесных» — одержимых бесом, — да потом и сошлась с молодым келейником Фотия. Разгорелся скандал, этим делом заинтересовался губернатор, а потом и Третье отделение — политический сыск. Несмотря на сопротивление Фотия, о котором стали говорить как о любовнике заезжей актерки, девицу пришлось отправить в женский монастырь.

Но Анна была выше всего этого. Она была свято убеждена в праведности Фотия и даже перехватывала в Петербурге все доносы и жалобы на него и отдавала ему в руки. Анна верила, что Фотий ведет ее по пути спасения. Чтобы быть ближе к своему учителю, Орлова построила в версте от монастыря особняк «Уединение», в котором ее посещал Фотий и где она проводила годы в молитвах и постах. Столица была полна скабрезных сплетен на сей счет. Не чуждый светского злословья, Пушкин писал:

Позднейшие авторы считают, что все же Фотий не был «безбрачных дев супруг», и ему было важнее владеть не телом, но душой Орловой, и поэтому он особенно упорно «утверждал ее в девическом, физическом и духовном девственном состоянии».

Не раз он убеждал ее не разбивать «скляницу девства»: «Потребно бо весьма и паче всего девице единое сокровище свое хранить, целость девства телесного и с тем Бог даст и духовное.