Bardziej związany był z nianią, Elisabeth Anne Everest, w której jako dziecko miał oparcie. Bardzo kochał matkę i kiedy przebywał w Harrow School, szkole z internatem, często pisał do niej listy, w których prosił, aby przekonała ojca do zabrania go stamtąd. Matka rzadko go odwiedzała.
