Khi trẻ Ngô Quyền đã lấy con gái của Dương Đình Nghệ, nên khi ông lên ngôi bà Dương Thị được lập làm hoàng hậụ Khi sắp qua đời, Ngô Vương ủy thác con là Ngô Xương Ngập cho Dương Tam Kha là em Dương Hậụ Lợi dụng cháu còn nhỏ, Dương Tam Kha cướp ngôi của cháu, tự xưng là Bình Vương. Ngô Xương Ngập thấy biến chạy trốn sang Nam Sách(nay là Hải Dương) vào ẩn ở nhà Phạm Lệnh Công. Dương Tam Kha sai quân đi đuổi bắt, Phạm Lệnh Công đem Xương Ngập trốn trong núị Nhưng Dương Tam Kha bắt em của Xương Ngập là Ngô Xương Văn làm con nuôị
Năm Canh Tuất (905) nhân có loại ở Sơn Tây, Dương Tam Kha sai Ngô Xương Văn cùng tướng Dương Cát Lợi và Đỗ Cảnh Thạc đem quân đi đánh. Đến Từ Liên, Ngô Xương Văn mưu với hai tướng đem quân trở về bắt Dương Tam Khạ Ngô Xương Văn vì nghĩ tình cậu cháu nên không nỡ xử trảm, giáng Tam Kha xuống làm Trương Dương công.