Setelah puas dapat ketenaran dan uang yang banyak, pada tahun 1839, Chang dan Eng memilih berhenti dari dunia pertunjukan dan pindah ke North Carolina dan menikah dengan dua kakak beradik. Pernikahan keduanya itu melahirkan l 21 anak.

Kehidupan kembar Chang dan Eng mulai mendapat cobaan. Pada 1870, Chang dan Eng pulang dari Rusia. Saat perjalanan itu Chang mengalami stroke di kapal dan tubuh bagian kanannya lumpuh. 

Akibat kondisi kesehatan Chang, si kembar memutuskan untuk pensiun, meski Eng sehat walafiat. Lalu pada suatu pagi Chang meninggal dunia akibat kondisi kesehatan memburuk. Tetapi Eng yang masih hidup.

Baru dua jam setelah Chang wafat, si kembar Eng yang meninggal dunia. Dikabarkan dokter yang datang waktu itu tak sempat menyelamatkan nyawa Eng Bungker. Di Carolina Utara lah kembar Chang dan Eng dimakamkan diperistirahatan terakhir. Dan istilah kembar Siam masih dipakai hingga sekarang.