Sebagai informasi, saat Titanic tenggelam, Astor berada di kapal bersama istrinya selama tujuh bulan, Madeleine Talmadge Force yang sedang hamil pada saat itu.
Pada pukul 23.40 tanggal 14 April 1912 Titanic menabrak gunung es dan air mulai masuk ke kapal.
Pada awalnya, Astor tidak percaya kapal tersebut berada dalam bahaya serius namun kemudian kapal tersebut tenggelam, dan kapten melakukan evakuasi setelah tengah malam, sehingga Astor membantu istrinya naik ke sekoci nomor 4.
Saat itu ia sempat ingin ikut naik ke sekoci yang ditumpangi sang istri, namun petugas yang bertanggung jawab mengatakan kepadanya untuk tidak bergabung sampai semua wanita dan anak-anak pergi.
Astor lantas mundur dan kembali menanyakan nomor sekoci lain. Sambil menyalakan rokok, dia lalu melemparkan sarung tangannya ke Madeleine.