James Stuart, um comerciante de cereais de Rothes, construtor e proprietário da Macallan Distillery (1868-1886, ver "Glenrothes"), construiu o Glen Spey (inicialmente um moinho de cereais chamado Roslin Distillery Mill). Depois de comprar a Macallan Distillery, ele vendeu o Glen Spey por £11.000 ao comerciante de vinhos e bebidas espirituosas de Londres, W. & A. Gilbey. Esta foi a primeira vez que uma empresa inglesa comprou uma destilaria de whisky escocês. Em 1904, eles construíram a destilaria Longmorn. Em 1962, a Gilbey se fundiu com a Justerini & Brooks, outro comerciante de vinhos e bebidas espirituosas de Londres de longa data que teve grande sucesso na América com o whisky blend J. & B. Rare. A nova empresa foi nomeada I.D.V. A capacidade de produção do Glen Spey dobrou em 1970. Dois anos depois, foi vendida para a cervejaria Watney Mann e no mesmo ano foi adquirida pela Grand Metropolitan. Em 1997, a Grand Metropolitan se fundiu com a Guinness para formar o que é agora conhecido como U.D.V. da Diageo. Glen Spey tem sido um malt chave para o blend J&B. Por um tempo foi a marca de single malt do comerciante de vinhos Unwin. Até 2001, o Glen Spey foi engarrafado como single malt por seu proprietário U.D.V.

A destilaria Glen Spey mantém um perfil discreto, escondida na rua principal de Rothes, sob as paredes remanescentes do outrora temido Castelo de Rothes. O castelo remonta ao século XIII, tendo recebido o Rei Eduardo I da Inglaterra em 1296. Em 1309, estava nas mãos da poderosa família Leslie, que se tornou Condes de Rothes no século XVI e brevemente Duques de Rothes em 1680 (um título que durou apenas um ano). Em 1662, os locais queimaram o castelo e edifícios adjacentes para evitar que abrigassem ladrões. Na era do aquecimento direto a carvão e iluminação de chama aberta, as destilarias eram frequentemente devastadas por incêndios (veja Talisker, Glenrothes, Glenlossie, etc.). A própria Glen Spey sofreu danos severos em um grande incêndio em 1920.