Brillat-Savarin nacque nella città di Belley, Ain, dove il fiume Rodano separava la Francia dalla Savoia. Studiò legge, chimica e medicina a Digione e praticò l'avvocatura nella sua città natale. Era nato Jean Anthelme Brillat, ma adottò il suo secondo cognome perché una zia di nome Savarin gli lasciò tutta la sua fortuna a condizione che adottasse il suo nome. Nel 1789, all'inizio della Rivoluzione francese, fu inviato come deputato agli Estati Generali che presto diventarono l'Assemblea Nazionale Costituente, divenne noto per alcuni dei suoi discorsi, in particolare uno a sostegno della pena capitale. Ritornò a Belley e fu per un anno sindaco eletto. In una fase successiva della Rivoluzione ci fu una taglia sulla sua testa, ed egli cercò asilo politico dapprima in Svizzera. Più tardi si trasferì in Olanda e poi nei neonati Stati Uniti, dove rimase per tre anni a Boston, New York, Philadelphia e Hartford, vivendo con i proventi delle lezioni di lingua francese e di violino. Per un certo periodo fu primo violino al Park Theater di New York City.
Tornò in Francia sotto il Direttorio nel 1797 e acquisì il posto di magistrato che avrebbe poi tenuto per il resto della sua vita, come giudice della Corte di Cassazione. Pubblicò diverse opere di diritto e di economia politica. Rimase scapolo, ma considerava l'amore come il sesto senso: la sua iscrizione della Physiognomie. alla sua bella cugina Juliette Récamier recita
"Signora, ricevete gentilmente e leggete con indulgenza l'opera di un vecchio. È l'omaggio di un'amicizia che risale alla vostra infanzia e, forse, l'omaggio di un sentimento più tenero... Come posso dirlo? Alla mia età un uomo non osa più interrogare il suo cuore".
La sua famosa opera, Physiologie du goût (La fisiologia del gusto), fu pubblicata nel dicembre 1825, due mesi prima della sua morte. Il titolo completo è Physiologie du Goût, ou Méditations de Gastronomie Transcendante; ouvrage théorique, historique et à l'ordre du jour, dédié aux Gastronomes parisiens, par un Professeur, membre de plusieurs sociétés littéraires et savantes. "Il libro non è mai stato fuori stampa dalla sua prima apparizione, poco prima della morte di Brillat-Savarin. La sua traduzione inglese più notevole è stata fatta dalla scrittrice e critica alimentare M. F. K. Fisher, che ha osservato: "Mi ritengo benedetta tra i traduttori". La sua traduzione fu pubblicata per la prima volta nel 1949. La filosofia di Epicuro si trova in fondo ad ogni pagina; il pasto più semplice soddisfa Brillat-Savarin, purché sia eseguito con arte:
Le persone che soffrono di indigestione, o che si ubriacano, sono totalmente ignoranti dei veri principi del mangiare e del bere.