Theo sách ''Hoàng Lê nhất thống chí'' thì anh tên thật là Trần Ngữ. Anh là con cháu vua [[Trần Nhân Tông]] Khâm. Ông tổ 13 đời là Trần Vượng (tức Trần Hiến Tông). Trần Vượng có cháu cố là Trần Hiện, Trần Hiện là ông tổ của Trần Ngỗi (tức vua Giản Định Đế), Trần Ngỗi có người cháu chắt là Trần Chân. Trần Chân lên nối nghiệp cụ tổ lên làm Đại soái nhà Lê. Trần Chân là cụ cố của Trần Phúc Nghị. Nghị vốn là một tướng của nhà Hậu Lê. Nghị có cháu chắt của mình là Trần Phúc Hợp được giữ chức Thừa tướng. Hợp bị bãi chức khi Lê Uy Mục nắm quyền. Hợp là cụ tổ của Trần Phúc Tụ. Tụ là một võ quan nhà Mạc đã giúp Mạc Toàn xây thành. Tụ còn có cháu chắt là Trần Phúc Sâm ([[1644]]-[[1725]]) là một đại soái của Nguyễn Cừ, bị bắt từ năm 1724. Cháu cố của Sâm là Trần Thiệu ([[1850]]-[[1935]]) bị thực dân Pháp bắt đem về Ấn Độ tra khảo. Thiệu sinh ra 5 con, con thứ là Trần Ích Nguyên là một võ quan nhà Nguyễn, khi nhà Nguyễn suy tàn, Ích Nguyên sinh 7 con, con cả là Trần Ích Lượng được sang Xiêm 5 năm. Từ Xiêm về Việt, Ích Lượng đã nhìn ra nhiều cảnh đẹp. Ích Lượng sinh 6 con.
Phước Tứ sinh ra trong gia đình không có ai làm về thể thao. Anh là con thứ 4, trước anh có 2 chị gái và 1 anh, dưới là 1 em trai.<ref name="baobongda"/>
