De nombreux sites préhistoriques parsèment son territoire : gisements de Brejoux, du Râle, du Moulin des Graves, menhir des Goulards, mégalithe de calcaire silicieux, situé sur une éminence, à l'orée d'un petit bois dit de "La Garenne au Nic".
Sur un promontoire rocheux dominant la vallée de la Dordogne, s'élève la Château Baby, imposant édifice des XVIII° et XIX° siècles, flanqué de deux pavillons à la Mansart recouverts d'ardoise.
Sur les murs des dépendances du domaine des Pétities qui appartenait, en 1462, à la commanderie des Templiers de Saint-Avit de Soulège, on peut encore apercevoir la présence de fenêtres d'époque, aujourd'hui murées.
À Saint-André, la porte d'entrée d'un moulin s'orne d'une inscription lapidaire : "Gabrielle Henri IV - N 1591", en souvenir du passage du roi Henri IV et de Gabrielle d'Estrées.