بنجامین شوارتز در ۱۵ سپتامبر ۱۹۸۱ در برانکس، شهر نیویورک متولد شد. والدین او که هر دو بومی برانکس بودند، شوارتز را در ریوردیل، محلهای در شمال غربی برانکس بزرگ کردند. پدرش قبل از رفتن به سمت املاک و مستغلات یک مددکار اجتماعی بود و مادرش معلم موسیقی در یک مدرسه ابتدایی در ریوردیل بود. او همچنین یک خواهر به نام مارنی دارد. در مصاحبه ای با کوین پولاک، او اظهار داشت: «وقتی به مردم گفتم اهل برانکس هستم، اونها گفتند «اوه، آیا جای زخم گلوله داری؟» و من فقط گفتم «نه، فقط منم و مردمهای یهودی دیگر”
هنگامی که او یازده ساله بود، خانوادهاش به اجمانت، نیویورک، در مجاور شهرستان وستچستر، نیویورک نقل مکان کردند. شوارتز به دبیرستان اجمونت رفت و بسکتبال بازی کرد و در گروه کر آواز خواند. او در سال ۱۹۹۹ فارغالتحصیل شد. سپس در کالج یونین تحصیل کرد و در سال ۲۰۰۳ با یک رشته دو رشته روانشناسی و انسانشناسی فارغالتحصیل شد.