Cité de caractère animée du "pays du Buëch", elle doit son nom à sa position à l'extrémité d'une crête rocheuse, un "serre". Au Moyen Age, la ville devient la plus importante de la vallée et un château est construit sur le rocher de la Pignolette qui la domine. L'église paroissiale dédiée à saint Arey, évêque de Gap est érigée au XIIème siècle. En 1298 la seigneurie est achetée par le dauphin de Viennois, il accorde des privilèges aux juifs et aux Lombards et transfère le chef-lieu du bailliage de Gapençais à Serres, jusqu'en 1512. La cité se trouve sur la route reliant Avignon aux villes du nord de l'Italie, au XIVème siècle, elle se développe avec l'installation des Papes à Avignon qui amène un accroissement du trafic. En 1337, le dauphin Humbert II crée un entrepôt pour le sel venant de Provence, elle continue de se développer jusqu'au XVIème siècle, de nouveaux remparts sont érigés. Durant les guerres de religion, le capitaine huguenot Montbrun met le siège de la ville le 27 avril 1574, qui capitule le 8 mai. En 1576, François de Bonne, achète la seigneurie de Serres qui devient une place forte protestante, en 1581, Lesdiguières est nommé chef des armées protestantes de la province du Dauphiné par le prince de Condé. Le château de Serres est détruit en 1633 sur ordre de Richelieu. L'édit de Fontainebleau, en 1685, entraîne le départ de nombreux protestants vers la Suisse et l'Allemagne.