Avezac-Lavigne, Charles Diderot et la Société du Baron D'Holbach