Lorsqu'il est nommé doyen de Windsor en 1846, Neville-Grenville propose de démissionner de la maîtrise du Magdalene College, mais est bloqué par le Visiteur, son frère Lord Braybrooke, qui a réservé le poste à son quatrième fils Latimer Neville (6e baron Braybrooke), alors âgé de 19 ans. La santé du Maître est en déclin: en 1850, alors qu'il n'a que soixante ans, il était "une épave". Avec une certaine diplomatie nécessaire pour gérer la transition, celle-ci est réalisée en 1853 et Latimer Neville est devenu maître à l'âge de 26 ans [5].
↑‘Grenville, George Neville (1789–1854)’, Oxford Dictionary of National Biography, Thorne,R. (Oxford, Oxford University Press, Sept 2004) (ISBN0-19-861411-X)