Ces salles voûtées, principales raisons de l'acquisition du Château par le baron Otard, s'appuient sur le rocher et les anciens murs d'enceinte de la ville. En effet, grâce à l'épaisseur des murs (plus de deux mètres) et à l'humidité dûe à la proximité de la Charente, ces caves offrent les conditions idéales pour le vieillissement du cognac. Une trappe considérée à tort comme les oubliettes du Château donne accès à la Charente.

Non loin de là, discrètement situé entre deux étages, se trouve le "Paradis". Ancienne prison du Château, cet endroit est ainsi nommé car y reposent aujourd'hui les plus vieilles eaux-de-vie de la maison Otard (1820, 1878, 1902, 1906).