在这几年里，许多人都发生着变化，齐灵渥斯变的更加苍老了，海丝特·白兰原来印象最深的他先前那种聪慧好学的品格，那种平和安详的风度，如今已经荡然无存，取而代之的是一种急切窥测的神色，近乎疯狂而又竭力掩饰，而这种掩饰使旁人益发清楚地看出他的阴险。海丝特·白兰请求齐灵渥斯放过丁梅斯代尔牧师，不要再摧残他的灵魂了，但是丁梅斯代尔牧师的痛苦、复仇的快乐已经冲昏了齐灵渥斯的头脑，他决定继续实施自己的阴谋，他要慢慢地折磨丁梅斯代尔牧师，复仇已经成为他生活唯一的目的。海丝特·白兰决定将齐灵渥斯的真实身份告诉丁梅斯代尔。 　　 　

　　在一片浓密的森林里，海丝特·白兰见到了丁梅斯代尔，他们互诉衷肠，述说着几年来心底的秘密，他们受着同样的痛苦和煎熬，同样受着良知和道德的啮噬。丁梅斯代尔告诉她，虽然他的胸前没有佩带红字，但是，同样的红字在他的生命里一直燃烧着。此时，海丝特·白兰才意识到牺牲掉牧师的好名声，甚至让他死掉，都比她原先所选择的途径要强得多，她告诉丁梅斯代尔齐灵渥斯就是她的丈夫，她所做的一切都是为了他的荣誉、地位及生命才隐瞒了这个秘密。阴暗凶猛的眼神瞬间涌上了丁梅斯代尔的脸上，他痛楚的把脸埋在双手之中。海丝特·白兰劝丁梅斯代尔离开这里，到一个没有人认识的地方去，到一个可以避开齐灵渥斯双眼的地方去，她愿意和他开始一段新的生活，过去的已经一去不复返了！现在又何必去留恋呢？　丁梅斯代尔犹豫着，他要么承认是一名罪犯而逃走，要么继续充当一名伪君子而留下，但他的良心已难以从中取得平衡；为了避免死亡和耻辱的危险，以及一个敌人的莫测的诡计，丁梅斯代尔决定出走。 　　

　　海丝特·白兰的鼓励及对新生活的憧憬，使丁梅斯代尔重新有了生活的勇气和希望。刚好有一艘停泊在港湾的船三天之后就要到英国去，他们决定坐这艘船返回欧洲，一切都在顺利地进行着。他们每天都被这种新的希望激励着、兴奋着，丁梅斯代尔决定演讲完庆祝说教后就离开。新英格兰的节日如期而至，丁梅斯代尔牧师的演讲也按计划进行着，　海丝特·白兰和小珠儿来到市场，她的脸上有一种前所未见的表情，特殊的不安和兴奋，“再最后看一眼这红字和佩戴红字的人吧！”她想，“再过一段时间，她就会远走高飞了！那深不可测的大海将把你们在她胸前灼烧的标记永远淹没无存！”　这时，那艘准备开往英国船只的船长走了过来，他告诉海丝特·白兰，齐灵渥斯将同他们同行，海丝特·白兰彻底绝望了。