После этого недолгая успешная карьера Анны Стэн в Голливуде вначале затормозилась, а затем актриса вообще отошла на задний план.
Правда, ее приглашали режиссеры и продюсеры, но обычно на роли второстепенные, от которых она отказывалась, предпочитая вести частную жизнь.
В то же время Анна Стэн оставалась яркой фигурой в Голливуде. Когда в 1935 году Мориса Шевалье попросили назвать десять самых красивых женщин, он первой включил в этот список Анну Стэн, а Марлен Дитрих и Грета Гарбо оказались на втором и третьем местах. Стэн особенно ценили за умение одеваться. Известный продюсер, сценарист и актер Дэррил Занук считал, что она подбирает гардероб лучше всех, кого он когда-либо видел. Об Анне Стэн как одной из самых стильных актрис говорили в Голливуде и многие другие деятели кино.
Естественно, такие отзывы вызывали недобрые чувства у голливудских звезд, которые всячески препятствовали Анне Стэн в ее продвижении.
Это отнюдь не значило, что Анна Стэн не стремилась возвратиться на экран в главных ролях. Но снималась она редко, причем, так сказать, волнами, перерывы между которыми становились все более продолжительными.
В 1936 году она все же сыграла главную роль в фильме своего супруга Юджина Френке «Одинокая женщина». Критика отмечала, что Анна Стэн ярко выразила драму несчастной любви между служанкой и самодовольным офицером высокого ранга.
Прошло три года без новых фильмов. В 1939 году Анна вновь появилась на экране в картине «Экспресс изгнания», поставленном Отисом Гарретом, в котором Юджин Френке выступал продюсером (фильм был произведен от имени американского филиала британской корпорации «Грэнд нейшнл филмз»[57], который вскоре после выхода картины вышел из бизнеса). Анна Стэн играла драматическую, даже трагическую роль иммигрантки, работавшей в некой американской научной лаборатории. Она была ошибочно обвинена в соучастии в убийстве своего шефа, в связи с недоказанностью вины к суду не привлекалась, но подлежала депортации. Хотя вся история завершалась благополучно, фильм и одна из его актрис, Анна Стэн, убедительно показывали физические муки и душевные терзания молодой женщины, обвиненной в преступлении, к которому она не имела никакого отношения.
Фильм оценивался критикой как одно из лучших произведений года. Видимо, в связи с тем, что его производители не были связаны с какой-либо из мощных кинокомпаний Голливуда, он не был отмечен никакими наградами.
Период Второй мировой войны стал для Анны Стэн несколько более благоприятным. В 1940 и 1941 годах она играла последовательно в двух картинах, а за 1943-й снялась в трех фильмах.