La torre en sí lleva el nombre del Warders 'Hall, un salón y sala de reuniones que anteriormente usaban los Beefeater.
Esto es medieval, pero hasta que fue desmantelado en 1925 siempre estuvo escondido detrás de revestimientos o extensiones.
En el interior hay dos habitaciones en el primer piso en las torrecillas con aspilleras al exterior y chimeneas.
La obra de un artista inglés desconocido se conserva en estilo gótico.
La Torre Byward es el lugar del fuerte donde se lleva a cabo la Ceremonia de las Llaves.