V r. 1499 získal Ptení s dvorem a pustou ves Bernov Jakub ze Šarova, nejvyšší hofrychtéř Markrabství moravského, vlastnící již sousední blízkou tvrz a ves Krumsín. Vznikla patrně jako nové rodové sídlo brzy poté co Václav ze Šarova prodal v r. 1527 tvrz krumsínskou. V době českého stavovského postání z l. 1618 - 1620 vlastnil Ptení Hynek ze Šarova, jemuž byly pro účast v povstání tři čtvrtiny maje
tku konfiskovány. Hynek se sice pokoušel vysloužit si u vítězů milost (v r. 1628 byl komisařem kardinála Ditrichštejna), jeho ptenský statek byl však přesto v r. 1630 prodán a Hynek se pak uchýlil na Slovensko. Ptenský statek koupi za 14 000 moravských tolarů jeden z představitelů cizí pobělohorské šlechty, válečný rada a plukovník Antonín Miniatti z Campoli. V r. 1631 se stal velitelem olomoucké pevnosti, která se v červnu 1642 vzdala Švédům. Miniatti využíval vojenských funkcí hlavně k vlastnímu obohacování, takže byl nakonec zbaven všech hodností. Většina jeho majetku byl zabavena na vyrovnání zpronevěřených peněz, ptenský statek se však podařilo Miniattiho ovdovělé manželce Anně Marii, rozené Krebsové, zachránit. V r. 1679 koupil Ptení zemský písař Václav Bernard Bartodějský z Baroděj. Jeho syn je prodal Janu Baptistovi Miniattimu, po němž držel Ptení jeho syn František Fortunát Miniatti, císařský tajný rada a od r. 1722 hejtman Přerovského kraje, poslední mužský potomek rodu. Jeho dcera Marie Anna, provdaná za hraběte Matyáše z Hodic, prodala statek v r. 1746 hraběnce Maxmiliáně Hetzerové z Aurachu, provdané d´Oudaille, od níž jej v r. 1757 koupil klášter sv. Při prodeji statku v r. 1746 se o ptenské tvrzi hovoří jako o zámku. Tato změna terminologie vyjadřuje přeměny ve vybavení interiéru a v úpravě okolí zámku, kolem nějž byl v první polovině 18. Vlastní budova nebyla zřejmě přestavěna, protože si dodnes zachovala renesanční charakter s typický čtvercovým půdorysem, s vnitřním nádvořím a kulatými věžičkami v rozích. Místnosti jsou vesměs zaklenuté křížovou klenbou s hřebínkem. Po r. 1757, kdy panství získaly olomoucké klarisky, ztratil zámek charakter panského sídla a stal se pouhou hospodářskou budovou. Protože nebyl opravován a v r. 1790 hrozil sesutím, muselo být první patro sneseno. Tím zámek dostal dnešní podobu. Po zrušení kláštera v r. 1782 připadlo Ptení náboženskému fondu a v r. 1825 je koupil v dražbě hrabě Filip Ludvík Saint Genois, jehož syn je r. 1878 prodal Lichtenštejnům. Při první pozemkové reformě byl v l. 1924 - 1925 velkostatek zabrán státem, od nějž koupilo v r. 1936 zámeckou budovu s polesím město Prostějov. V roce 2022 koupil HORSET Vládce, zpěvák kapely BARBAR PUNK.
