Sài Gòn thất lợi, vua đi sang Xiêm, Thành lui ẩn, không được đi theo. Năm
Giáp Thìn (1787) mùa thu, vua đem quân Xiêm về Gia Định, Thành đến
yết kiến ở hành tại Trà đi Bát Chiên, Quang Hóa thu nạp dư đảng Đông
Sơn là lũ Đặng Triệu. Triệu trước theo quân làm Tổng nhung, kịp biến năm
Canh Tý (1780), bị giặc bắt làm Chưởng cơ giặc cùng đồ đảng chưởng
Hùng, chưởng Tuy cùng giữ đồn Bát Chiên, Thành cùng Triệu giết lũ Hùng
dẫn quân về với vua. Vua sai Thành đem hơn 1000 lính đi đánh trận cùng
với quân Xiêm. Gặp quân Xiêm bị giặc đánh bại, quan quân đều tan, vua
bỏ thuyền đi lên bộ, lũ Lê Văn Duyệt 12 người đi bộ theo vua, tự Đông
Vân đến Thị Giang. Thành cùng lũ Tôn Thất Huy, Tôn Thất Hội đốc dẫn
quân tàn 50 hay 60 người nối đến, vua liền ra Hà Tiên, đi thuyền đánh cá ra
hải đảo, Thành ngày đêm giữ buồm chèo, có lúc vua cũng bơi, đến đóng
Thổ Châu, rồi lên đóng trên đảo. Quan quân dần lại họp. Gặp lúc hết lương
ăn, quân đói xanh mặt, gặp có thuyền buôn ở Hạ Châu đi qua, Thành đem
quân đi cướp bị lũ lái buôn chống lại rất dữ, Thành bị vài vết thương cố
nhảy lên cướp được thuyền gạo đem về.
Năm Ất Tỵ (1785), theo vua đi Vọng Các, gặp nước Xiêm bị Miến Điện
đến đánh cướp, Thành theo Lê Văn Quân đem quân giúp Xiêm đánh giặc,
đánh tan quân Miến Điện ở Sai Nặc (đất nước Xiêm), thu được súng, khí
giới vô kể. Vua Xiêm muốn giúp quân để thu phục Gia Định. Vua triệu chư
tướng hội bàn. Thành tâu rằng: Lính Xiêm tàn ngược không nên nhờ họ
giúp, nếu nhờ binh lực họ mà thành công lại có sự lo sau. Sao bằng ta hãy
yên tĩnh để đợi. Việc ấy bèn thôi. Thành thích đánh bạc mắc nợ thường bị
người ta đòi. Đến lúc theo vua sang Xiêm, một hôm vua sai Thành đem
1000 lạng bạc đi Chiêm Kha (đất nước Xiêm), đong thóc, đi đường gặp
quan quân mắc nợ tiền bạc với người Xiêm, họ dữ dằn đòi nợ rất khổ,
Thành thấy thế thương, dốc túi cho quân trả nợ đi về tay không, nói cho
vua biết, vua không bằng lòng nhưng cũng cho làm lạ, không hỏi nữa. Năm
Đinh Mùi (1787) mùa thu, Hà Hỷ Văn đóng quân ở đảo Côn Lôn muốn quy
phục, vua bèn sai Thành cùng Nguyễn Thái Nguyên đi đón, đến lúc về bị
gió trái hướng thuyền không đến chỗ hành tại được, thuyền đóng ở Hà Tiên