Bánh khoai lang có nguồn gốc ở Nam Hoa Kỳ. Những người nô lệ châu Phi đã tạo ra công thức ban đầu cho món bánh khoai lang vào giữa đến cuối những năm 1800. Abby Fisher, một nô lệ châu Phi sau đó được trả tự do, đã viết công thức đầu tiên được biết đến cho món bánh khoai lang trong cuốn sách của mình, "Bà Fisher biết gì về cách nấu ăn miền Nam", xuất bản năm 1881.
Công thức ban đầu của Fisher cho món bánh khoai lang bao gồm khoai lang, trứng, bơ, sữa, cam và muối. Công thức cơ bản cho món bánh khoai lang vẫn được coi là món ăn chủ yếu trong nấu ăn miền Nam ngày nay.
Những người nô lệ thường sử dụng khoai lang vì nó khiến họ liên tưởng đến khoai lang, một loại rau giàu tinh bột tương tự được ăn thường xuyên ở châu Phi. Từ khoai mỡ và khoai lang thường được dùng thay thế cho nhau vì chúng rất giống nhau; tuy nhiên, hai loại rau này có nguồn gốc từ các loại cây khác nhau. Các loại khoai lang mềm đôi khi vẫn được dán nhãn là khoai lang ở Hoa Kỳ nhưng Bộ Nông nghiệp Hoa Kỳ yêu cầu chúng phải kèm theo từ "khoai lang".
Khoai lang có nhiều chất xơ, kali và vitamin C. Chúng cũng là một nguồn beta-carotene tuyệt vời, chứa nhiều như cà rốt. Ngoài ra, chúng là một loại thực phẩm không có chất béo. Ăn loại rau này có thể giúp ngăn ngừa các bệnh như ung thư và bệnh tim cũng như chống lại các bệnh viêm nhiễm như hen suyễn và viêm khớp dạng thấp.