آدام اسمیت پسر یک بازرس گمرک در کرکالدی در منطقه فایف در اسکاتلند بود. تاریخ دقیق تولد وی مشخص نیست، ولی نامگذاری وی در تاریخ پنجم ژوئیه سال ۱۷۲۳ میلادی در کرکالدی انجام گرفته شده بود. پدر او شش ماه قبل از تولد وی از دنیا رفت. او در حدود ۴ سالگی توسط یک گروه از کولیها ربوده شد، ولی خیلی زود توسط عموی خود نجات داده شد و به آغوش مادرش بازگشت.