Farnham kastil dibangun oleh Henry dari Blois, Uskup Agung dari Winchester, selama paruh pertama abad ke-12. Sedikit yang diketahui tentang Kastil ini awal Selain itu sebuah menara, mungkin terbuat dari batu, di atas semua motte besar. Ini dihancurkan pada perintah Henry II di tahun 1155, tetapi baru-baru ini penggalian arkeologi mengungkapkan besar basement dan dasar-dasar dari menara yang asli di pusat motte. Benteng dibangun pada akhir abad ke-12 dan awal abad ke-13, dengan motte sebelumnya yang seluruhnya dikelilingi tetap shell, dan dinding luar tirai yang dibangun. Ruang antara dinding shell tetap dan lereng motte diisi pada abad ke-13.