Le bâtiment de la Sous-Préfecture de Pointe à Pitre est une ancienne caserne d’infanterie. La ville, à partir de sa fondation est le siège de la garnison militaire de la Grande-Terre.
Au XIXème siècle, les guerres dans la Caraïbe menacent encore et le voisin anglais reste, un adversaire à surveiller. Ainsi au cours de ce siècle, la garnison militaire de la ville est en pleine expansion. Après le tremblement de terre de 1843 la caserne est agrandie et renforcée. En face d’elle, sur le site de l’actuel collège De Kermadec, la colonie aménage l’Arsenal qui permet l’entretien de l’armement de la garnison et des navires de guerre. Malgré toutes les inquiétudes, la deuxième moitié du XIXème siècle n’apporte plus de conflit majeur en Guadeloupe. En 1905 la France signe avec l’Angleterre l’Entente Cordiale. Dès lors le maintien de troupes nombreuses à Pointe-à-Pitre ne se justifie plus. Progressivement le bâtiment est réaffecté à différents usages militaires puis civils.