Istana Pulau Tawar

Sultan Bersemayam di Pulau Tawar
Perpindahan kuasa yang berlaku di Pekan iaitu daripada tangan raja Melayu (corak pemerintahan tradisional) kepada Inggeris sememangnya menimbulkan ketegangan. Menyedari kemungkinan berlakunya kemelut politik ini, terutama gejala kuasa pemerintahan baginda diatasi oleh Inggeris, Sultan Ahmad melantik putera sulung baginda Tengku Mahmud sebagai Tengku Mahkota di samping memberikannya kuasa sebagai wakil Sultan di Pekan, sementara baginda sendiri berundur kira-kira 200 batu ke ulu Sungai Pahang di suatu kawasan yang bernama Pulau Tawar dan membina istana di sana. Baginda dikatakan bersemayam di Pulau Tawar selama 3½ tahun (Disember 1889 hingga Mei 1893) dan meninggalkan bandar Pekan, ibu negeri Pahang, di bawah jagaan Tengku Mahmud.