قبیله بافوت به محض رسیدن به این منطقه قصری را برای پادشاه خود که به وی Fon of Bafut به معنای پادشاه بافوت می گفتند ساختند و هنوز هم مقبره سه پادشاه نخست قبیله در این قصر قرار دارد. بعدها قصر پادشاه به مکان اخیر امروزی منتقل شد و همه ساله هزاران گردشگر خارجی از آن مشاهده میکنند
این قصر با یک جنگل مقدس احاطه شده و در مرکز شهر قرار دارد. قصر بافوت از ۵۰ منزل تشکیل شده هست که به دور هسته مرکزی و مقدس قصر که مقبره آچوم Achum Shrine نام دارد ساخته شده اند. این منزل ها بعنوان دربار پادشاهی و محل زندگی زنان پادشاه که تعداد آنها به صد نفر می رسد مورد بهره گیری قرار می گیرند.
همگی زنان پادشاه از ابتدا زن وی نبوده اند و وی بعضی از آنان را از پدرش به ارث برده هست. بر اساس سنت های محلی وقتی که پادشاه Fon از جهان می رود جانشین وی تمامی زن ها و فرزندان وی را به ارث می برد. بدین ترتیب در واقع هر پادشاه با مادر خوانده های خود ازدواج میکند و تمامی برادران و خواهران ناتنی اش به دختران و پسران او تبدیل می شوند.
پادشاه کنونی بافوت که یازدهمین پادشاه از خاندان سلطنتی به شمار می آید از پدر خود ۷۲ زن و ۵۰۰ فرزند به ارث برده هست.