Петерса с Джордж-Стрит, охватывающее этот и немного более ранний период, показывает, какое возмущение вызвал у горожан этот неравный брак, соединивший столь неподходящую пару. Однако влияние Тиллингестов на жизнь города было неоспоримым, и дом Джозефа Карвена вновь стали посещать люди, которых при иных обстоятельствах вряд ли что-либо заставило переступить его порог. Все же общество так и не приняло Карвена до конца, и от этого больше всех страдала его жена; но как бы то ни было, строгий остракизм был до некоторой степени смягчен. Странный новобрачный удивил как свою супругу, так и всех окружающих, обращаясь с ней в высшей степени галантно и уважительно.

В новом доме на Олни-Корт больше не происходило ничего., внушающего беспокойство, и хотя Карвен часто отлучался на свою ферму в Потуксете, где его жена так ни разу и не побывала, он больше походил на обычного жителя города, чем когда бы то ни было за долгое время его жизни в Провиденсе. Лишь один человек проявлял к нему открытую вражду — молодой корабельный штурман, помолвка которого с Элайзой Тиллингест была так внезапно расторгнута. Эзра Виден при свидетелях поклялся отомстить и, несмотря на то, что обладал спокойным и в общем мягким характером, взялся за дело с упорством, продиктованным ненавистью, а это не обещало ничего хорошего человеку, отнявшему у него невесту.

Седьмого мая 1765 года родилась единственная дочь Карвена Энн. Крестил ее Преподобный Джон Грейвз из Королевской Церкви, прихожанами которой стали Карвены через некоторое время после свадьбы — это было своеобразным компромиссом между принадлежностью к конгрегационистам и баптистской церкви.

Запись рождения девочки, так же, как и запись регистрации брака, заключенного за два года перед этим, в большинстве церковных записей и гражданских книг мэрии была уничтожена, и Чарльз Вард смог найти эти записи с большим трудом лишь после того, как, узнав о том, что вдова Карвена сменила фамилию, установил свое родство с Карвеном. Юноша со страстью предался изысканиям, касающимся этого человека. Запись о рождении Энн он нашел совершенно случайно, в ходе переписки с наследниками доктора Грейвза, который, покидая свою паству после Революции, ибо был верным сторонником короля, взял с собой дубликаты всех церковных записей. Вард написал им, потому что знал, что его прапрабабушка, Энн Тиллингест Поттер, принадлежала к епископальной церкви.

Вскоре после рождения дочери, события, по поводу которого предок Варда выразил огромную радость, странную при его обычной сдержанности, Карвен решил заказать свой портрет. Он поручил эту работу жившему тогда в Ньюпорте талантливому художнику — шотландцу по имени Космо Александр, впоследствии получившему известность как первый учитель Джилберта Стюарта. Говорили, что портрет, отличающийся необыкновенным сходством, был написан на стенной панели в библиотеке дома на Олни-Корт, но ни один из дневников, где упоминается этот портрет, не говорит о его дальнейшей судьбе.