Ves Ráby byla založena roku 1778 v místech zrušeného Podhůrského dvora, který ve středověku náležel k pardubickému velkostatku. Někdy v 16. století zde Pernštejnové nechali postavit jednopatrovou renesanční budovu s rozsáhlou zahradou. V blízkém okolí byla také daňčí obora. Objekt, lidově zámeček nebo také jägerhaus sloužil především správě obory. Později byl zámeček barokně upraven a sloužil také potřebám místního JZD. Dnes je již ráz budovy zcela změněn.

Objekt je památkově chráněn, veřejnosti je nepřístupný.