Brillat-Savarin wurde in der Stadt Belley in Ain geboren, wo die Rhone Frankreich von Savoyen trennte. Er studierte Jura, Chemie und Medizin in Dijon und praktizierte Rechtswissenschaften in seiner Heimatstadt. Er wurde als Jean Anthelme Brillat geboren, nahm aber seinen zweiten Nachnamen an, weil ihm eine Tante namens Savarin ihr gesamtes Vermögen unter der Bedingung hinterließ, dass er ihren Namen annimmt. 1789, zu Beginn der Französischen Revolution, wurde er als Abgeordneter in die Generalstände entsandt, aus denen bald die Verfassungsgebende Nationalversammlung hervorging. Er wurde durch einige seiner Reden bekannt, insbesondere durch eine Rede, in der er die Todesstrafe befürwortete. Er kehrte nach Belley zurück und war ein Jahr lang der gewählte Bürgermeister. In einer späteren Phase der Revolution gab es ein Kopfgeld auf ihn, und er suchte zunächst in der Schweiz politisches Asyl. Später zog er nach Holland und dann in die neugeborenen Vereinigten Staaten, wo er sich drei Jahre lang in Boston, New York, Philadelphia und Hartford aufhielt und von den Einnahmen aus dem Französisch- und Geigenunterricht lebte. Eine Zeit lang war er erster Geiger im Park Theater in New York City.
Er kehrte 1797 im Rahmen des Direktoriums nach Frankreich zurück und erwarb das Richteramt, das er dann für den Rest seines Lebens als Richter des Kassationsgerichtshofs innehatte. Er veröffentlichte mehrere Werke über Recht und politische Ökonomie. Er blieb Junggeselle, aber er zählte die Liebe zum sechsten Sinn: Seine Inschrift der Physiognomie. an seine schöne Cousine Juliette Récamier lautet
"Gnädige Frau, empfangen Sie freundlich und lesen Sie nachsichtig das Werk eines alten Mannes. Es ist eine Hommage an eine Freundschaft, die aus Ihrer Kindheit stammt, und vielleicht die Huldigung eines zarteren Gefühls... Wie kann ich das erkennen? In meinem Alter traut sich ein Mann nicht mehr, sein Herz zu befragen".
Sein berühmtes Werk, Physiologie du goût (Die Physiologie des Geschmacks), wurde im Dezember 1825, zwei Monate vor seinem Tod, veröffentlicht. Der vollständige Titel lautet Physiologie du Goût, ou Méditations de Gastronomie Transcendante; ouvrage théorique, historique et à l'ordre du jour, dédié aux Gastronomes parisiens, par un Professeur, membre de plusieurs sociétés littéraires et savantes. "Das Buch ist seit seinem ersten Erscheinen, kurz vor Brillat-Savarins Tod, nicht vergriffen. Seine bemerkenswerteste englische Übersetzung stammt von dem Lebensmittelschriftsteller und Kritiker M. F. K. Fisher, der bemerkte: "Ich halte mich für gesegnet unter den Übersetzern. Ihre Übersetzung wurde erstmals 1949 veröffentlicht. Die Philosophie von Epikur steht am Ende jeder Seite; die einfachste Mahlzeit befriedigte Brillat-Savarin, solange sie mit Kunstfertigkeit ausgeführt wurde:
Personen, die an Verdauungsstörungen leiden oder betrunken werden, sind über die wahren Prinzipien des Essens und Trinkens völlig unwissend.