Căn cứ vào sắc phong, các tư liệu liên quan và thông qua truyền ngôn của nhân dân địa phương: Đền Quan Trấn Bắc, xã Đại Tập được xây dựng lên để tôn thờ Quan Trấn Bắc Tôn thần (tướng quân Nguyễn Siêu) - một trong Thập nhị sứ quân thời Đinh Bộ Lĩnh. Ngài có công trấn quản phương Bắc, nhiều lần giúp nước Việt đánh đuổi giặc ngoại xâm. Trong tâm thức nhân dân vùng Khoái Châu (tỉnh Hưng Yên) thì ngài là một người có tính cách cao quý, thông minh hơn người, có tài thao lược, yêu nước, yêu dân. Sau khi ngài mất, thi hài trôi về vùng cửa sông Bái Châu (thuộc xã Đại Tập), nhân dân trong vùng liền chôn cất và lập đền thờ ngay trên phần mộ của ngài. Ngài được suy tôn là Quan Trấn Bắc Tôn Thần, thần bảo hộ, che chở cho nhân dân trong vùng được hưởng cuộc sống yên bình, ấm no, mùa màng tốt tươi.
Tương truyền, đền Quan Trấn Bắc được khởi dựng sau khi ngài hóa về trời. Trải qua thời gian, do biến thiên của lịch sử, ngôi đền đã bị phá hủy chỉ còn lại tòa Hậu cung 01 gian. Năm 1984, chính quyền và nhân dân địa phương đã góp công, góp của phục dựng lại tòa Tiền tế 03 gian. Và năm 2014, ngôi đền được tu bổ, tôn tạo lại. Hiện nay, đền có kết cấu kiến trúc kiểu chữ Đinh (丁) gồm tòa Tiền tế 03 gian và Hậu cung 01 gian. Các cấu kiện kiến trúc được làm theo lối bê tông giả gỗ, mang phong các kiến trúc cổ truyền. Đền còn lưu giữ được một số hiện vật tiêu biểu, có giá trị như: ngai, tượng thờ, 02 đạo sắc phong (thời Nguyễn), hòm sắc,..
Lễ hội truyền thống đền Quan Trấn Bắc được duy trì tổ chức vào ngày mồng 10 tháng Giêng để tưởng nhớ công lao to lớn của thần, ôn lại truyền thống lịch sử của cha ông, khơi dậy thuần phong mỹ tục, nếp sống cộng đồng.
Tại Quyết định số 3245/QĐ-CTUBND ngày 30/12/2016, đền Quan Trấn Bắc được UBND tỉnh xếp hạng là di tích “Lịch sử” cấp tỉnh.