Vers le milieu du XIX^e siècle, dans la petite ville imaginaire de Quinnipak, vit toute une communauté rassemblée autour de la très belle Jun Reihl, dont toute la ville admire les lèvres, et de son mari Monsieur Reihl, directeur de la fabrique de verre.
À Quinnipak, chacun a son désir, sa «folie» secrète : Pekish, l'extravagant inventeur de l'«humanophone», un orchestre où chacun ne chante qu'une seule note, toujours la même ; Pehnt, son jeune assistant, enfant trouvé toujours vêtu d'une veste immense et informe ; la «veuve» Abegg, veuve d'un mari qu'elle n'a jamais épousé ; Horeau, l'architecte français qui rêve de grandioses constructions transparentes, et Élisabeth, la locomotive à vapeur...
Avec Châteaux de la colère, Baricco nous offre un roman foisonnant et singulier, construit comme une fugue où chacun chante sa partition avec justesse et jubilation.