Обдуманная суровость властей поддерживается жестокостью толпы горожан, среди которых выделяются женщины, завидующие красоте и достоинству Гестер. Чем уродливее кумушка, обсуждающая поведение Гестер, тем суровее ее приговор, тем больших страданий требует она для несчастной женщины. Та, что не имеет шансов быть порочной, мстит Гестер за то, что она прекрасна и желанна. Между тем осуждающие Гестер люди и сами не без греха. Магический алый знак помогает Гестер разгадывать среди проходящих мимо мужчин и женщин множество тайных грешников. Бостонские жители внешне подчиняются суровым законам общины, но втайне следуют голосу чувства. Так мстит природа за антиприродные установления пуританских магистратов.

Таким образом, романтик Готорн сталкивает пуританский закон, в котором он различает черты лицемерия и мелкой мстительности, со свободным естественным чувством любви, которое взрывает и оковы общественных запретов и те предрассудки, которые живут в сознании самих героев.

Создавая образ Гестер Прин, Готорн как бы попробовал испытать в реальных жизненных условиях теоретический тезис Эмерсона о «доверии к себе». Сложный и противоречивый духовный мир Гестер подвергается анализу в тот критический момент, когда она приведена в конфликт со всем городом. Она инстинктивно чувствует свою правоту, свое право на любовь и счастье, которое всем окружающим представляется позорным нарушением нравственности. Гордый и независимый ум Гестер не хочет уступить шельмующей ее толпе. Она искусно вышивает алую букву, так что последняя выглядит украшением на богатом платье. Стоя на эшафоте, Гестер пытается выглядеть гордой и несломленной, хотя у нее и бывают минуты слабости и сомнений.

Но когда после этого страшного испытания тянутся годы изгнания и презрения, Гестер чувствует, как тяжело быть отщепенцем, удаленным из общества. Готорн вскрывает здесь главный порок теории Эмерсона. Будучи вырванным из общества, человек обрекается на трагическую изоляцию. Одиночество приводит его к невозможности реализовать те преимущества, которые дает ему его прогрессивное мировоззрение. Он выпадает из коллектива и тем самым становится бесполезным для него. Поэтому Гестер ощущает свое изгнание из городка как величайшую трагедию. Готорн показывает, как страдания и одиночество закаляют ум Гестер, как она приходит к зрелым самостоятельным выводам об угнетенном положении женщины в обществе, об иных нормах справедливости: казалось бы, она должна стать еще дальше от общества. Но нет, именно теперь приходит к ней сознание гибельности отрыва человека от других людей — его обязанностей по отношению к ним, и она становится помощницей всех страждущих, она делает добро тем самым людям, которые так свирепо расправились с ней и которые, даже принимая ее помощь, полны презрения к ней. Готорн как бы поверяет на конкретном случае возможность для человека оборвать связи с обществом и дает резко отрицательный ответ на рекомендации Эмерсона.

С большой психологической тонкостью Готорн показывает, как чувство любви по-разному преломляется у различных людей. У Гестер Прин любовь принимает форму жертвенной преданности любимому человеку. Ради этой любви она ломает всю свою жизнь. Стоя на эшафоте перед мучителями судьями, она хранит тайну имени своего соблазнителя, и в дальнейшем, несмотря на позор и унижение, она не в силах покинуть тот город, где живет и страдает Димсдейл.

В то же время у ее мужа, Роджера Чиллингуорса, это же чувство любви носит характер ревнивого обладания, и месть ученого доктора Димсдейлу похожа на расправу над вором, укравшим чужую собственность.

Еще не зная того, кто отнял у него сердце его жены, он обещает искать его с тою же страстью, с которой он искал истину в книгах или золото в реторте алхимика. «Я почувствую его присутствие, ибо мы с ним связаны. Я увижу, как он затрепещет, и я сам внезапно и невольно содрогнусь. Рано или поздно, но он будет в моих руках!»

Образ Чиллингуорса перекликается с образом ученых-маньяков в новеллах Готорна («Дочь Раппачини», «Родимое пятно» и др.). Это тип человека, целиком отдавшегося одной идее, равнодушного к моральным правилам и бесповоротно преследующего свою цель, даже если это связано с гибелью других людей. Но если ученый химик Раппачини губит свою собственную дочь, производя над ней эксперименты с изобретенными им ядами, то его мания, при всем ее эгоизме, мотивируется преданностью науке, то есть в каком-то конечном счете преследует неэгоистические цели. Чиллингуорс же не стремится к научному открытию. Он использует свои знания и силу своего ума исключительно ради личной мести. Здесь эгоистическая мания ученого поставлена на служение эгоистической же цели. Это усиливает зловещий характер его деятельности. Готорн рисует его как человека, который, «занимаясь дьявольскими делами, и сам постепенно превращается в дьявола». Там, где ступает его нога, вянут цветы; из глаз его исходит красно-синее пламя, и черный цвет его одежды гармонирует с его черными делами.

Обдуманной целеустремленности Чиллингуорса противостоит душевная мягкость и нерешительность Димсдейла. Это фигура, на которой пересекаются любовь Гестер и ненависть Чиллингуорса. Если Гестер характеризуется мужеством и добротой, если Чиллингуорс — это мужество без доброты, то Димсдейл — это доброта без мужества. В сущности весь роман строится на том, что у Димсдейла не хватает силы «быть правдивым».

«Человек должен быть правдивым» — учит Готорн Он должен показывать людям «худшую сторону своей души», а Димсдейл воровским образом пользуется репутацией святого праведника, на которую он не имеет морального права. Готорн обнажает это противоречие между ложной репутацией Димсдейла и его тайным обликом согрешившего священника в сцене шельмования Гестер на эшафоте, когда Димсдейл сам должен уговаривать ее раскрыть имя ее соблазнителя. Речь Димсдейла отражает всю двойственность его положения. Он выполняет то, чего ждут от него верующие пуритане, он уговаривает Тестер, но делает он это так искусно, что его слова помогают ей снова почувствовать в нем своего союзника, который страдает не меньше, чем она сама. Димсдейл живет двойной жизнью, но вместе с тем его по существу правдивая натура безмерно тяготится этой двойственностью. Он презирает себя за то, что ему приходится лгать и притворяться, и этим самоосуждением Димсдейла пользуется Чиллингуорс, осуществляя свою месть.

Все дело в том, что Димсдейл воспринимает пуританские законы как абсолютную религиозную норму и свое отступление от этих законов — как страшный грех. Здесь внешнее принуждение превращается во внутренний душевный закон. Тюрьмой для человека становится его собственное сознание. И конфликт, который для Гестер Прин развивается между обществом и страдающим индивидуумом, здесь перенесен в глубь человеческой души или, придерживаясь образной системы Готорна, в глубь человеческого сердца.

Сердце согрешившего священника является сферой борьбы различных побуждений. В нем скрыта роковая тайна, которая причиняет ему неслыханные муки. Поэтому Готорн сравнивает его сердце с темной пещерой, тюрьмой, могилой. Тайну Димсдейла хочет насильственно раскрыть Чиллингуорс, и он «рылся в сердце несчастного священника, как рудокоп, ищущий золото или, вернее, как могильщик, который раскапывает могилу». Готорн считает, что эта тайна должна быть выведена из мрака на свет. Но это должно быть сделано священником по доброй воле. Поэтому то, что делает Чиллингуорс, является насилием над человеческим сердцем.

Изображая переживания священника, Готорн прибегает к сложной метафорической игре. Тайна нераскрытого греха получает вещественное выражение. Сердце священника терзает загадочно возникший на его груди алый знак, причем терзает не в переносном, а в буквальном смысле, и бедный грешник то и дело прижимает руку к сердцу, чтобы унять эту жгучую боль. Здесь переплетается вещественный и символический смысл событий, и это переплетение характерно для романтической поэтики Готорна. В его романе тюрьма, кладбище, лес, розовый куст играют не только свою прямую роль. Они выступают как символы, точно так же как цвета предметов не только связаны с описанием их внешнего вида, но и вносят с собой символические ассоциации — черный цвет пуританизма, зеленый цвет безгрешной природы, алый цвет преступления. Эта символическая игра сочетается с фантастикой, загадочными совпадениями, необъяснимыми явлениями: в тот момент, когда Димсдейл, гонимый муками своей совести, ночью приходит на эшафот и встречает здесь Гестер и Перл, над ними появляется в небе багровый метеорит в форме буквы «А».