От мыса Каточе Граммон проследовал вдоль побережья Юкатана на восток, к островку Логгерхэд-Ки, где тело ван Хоорна было предано земле. Оттуда он прошел к другому маленькому острову, Исла-де-Мухерес. В то время как большинство флибустьеров во главе с де Граффом взяло курс на Сен-Доменг, Граммон остался в компании двух небольших английских судов, капитанами которых были Дэниэл и Холл, а также трофейного судна «Нуэстра Сеньора де ла Регла», которым командовал капитан Жан Тристан (на его борту находились 90 моряков из экипажа «Ле Арди»). На острове Мухерес четыре капитана запаслись дровами и питьевой водой. Затем Граммон велел Тристану идти с «Ла Реглой» в Пти-Гоав, а сам отправился на отдых в британскую колонию Каролина (Северная Америка).

Старинная карта Флориды и Багамских островов.

Очутившись в начале июля среди островков к югу от Флориды, он взял на абордаж испанский корабль «Нуэстра Сеньора де Канделария», вышедший 28 мая из Гаваны и направлявшийся в сторону Веракруса. Этот приз, нагруженный мукой, помог Граммону и его людям утолить голод. От Флориды «Ле Арди» отправился к багамскому острову Нью-Провиденс, на котором находилась небольшая английская колония. Там Граммон хотел продать в рабство две сотни негров и мулатов, захваченных в Веракрусе. Но через три дня после его прибытия губернатор острова Ричард Лилберн, опознав в Граммоне французского пирата, приказал ему немедленно поднять якорь.

Граммон и два его английских компаньона оставили Багамские острова и пошли в Каролину, где рассчитывали на лучший прием. Прежде чем они добрались до указанной английской колонии, буря вынудила капитана Дэниэла покинуть его судно.

Район порта Чарлстон в Каролине. Карта 1671 года.

С «Ле Арди» и судном Холла сьёр де Граммон появился в порту Чарлстона примерно в сентябре 1683 года. Флибустьеры были хорошо встречены там англичанами, купившими у них всех рабов и снабдившими их припасами. Завязав в Чарлстоне полезные знакомства, Граммон взял курс на Эспаньолу.

Вначале он прибыл в Кап-Франсэ – порт на северном берегу Сен-Доменга. Его возвращение породило легенду, которая через месяц или два дошла до Мартиники, до ушей главного управляющего Французских Антильских островов. Чтобы посеять страх среди англичан Ямайки, кто-то пустил слух, будто Граммон после прибытия в Кап-Франсэ сразился по просьбе королевского лейтенанта де Франкенэ с английским судном, пиратствовавшим в проливе между Тортугой и Пор-де-Пэ, и истребил весь его экипаж.

Автором этих слухов был, вероятно, сам Франкенэ, который после кончины своего предшественника сьёра де Пуансэ временно исполнял обязанности губернатора Сен-Доменга.

Остров Тортуга и северный берег Сен-Доменга на французской карте колониальной эпохи.

У него уже был конфликт с теми флибустьерами, которые вернулись из похода на Веракрус с капитаном де Граффом. Причина этого конфликта, без сомнения, заключалась в том, что флибустьеры обманули французские власти, сбыв большую часть своей добычи в открытом море ямайским контрабандистам. Однако позже сьёр де Франкенэ помирился с пиратами, надеясь отправить их против Сантьяго-де-Кубы. Возможно, Франкенэ надеялся, что вовлечение в скандал Граммона отвадит от союза с французскими флибустьерами их английских коллег. В любом случае, ничто не указывает на то, что он встретил Граммона с распростертыми объятиями, поскольку последний вернулся на Эспаньолу из английской колонии.