Alba, Pomona- Kaliforniya‘da doğdu. Annesi Catherine, anne tarafından bir Fransız- Amerikan ve baba tarafından da Danimarka ve Amerika kökenlidir. Babası Mark Alba ise anne ve babası Kaliforniya’da doğmasına rağmen Meksikalı’dır. Jessica Alba’nın anne ve babası henüz çok gençken evlendiler. Annesinin babası olan dedesi, Amerikan ordusunda denizcilik yapmış ve İkinci Dünya Savaşı‘nda da Pasifik okyanusunda görev almıştır. Alba, erkek kardeşi Joshua ile beraber büyükannesi ve dedesi tarafından büyütüldü. Kardeşi Joshua, Alba’nın rol aldığı Dark Angel adlı dizinin son bölümünde yer aldı. Jessica Alba on yedi yaşına kadar büyük annesi ve dedesinin yanında yaşadı. Babasının hava kuvvetlerinde olması nedeniyle aile bir çok kere taşındı.Taşındıkları yerler arasında Mississippi ve Teksas gibi eyaletler vardır. Fakat yine en sonunda Kaliforniya’ya geri döndü.
Alba’nın ilk yılları hep hastalıklar ile sürdü. Çocukluk yıllarında iki kez akciğerlerinden, bir kez apandistinden ve bir kez de bademcikleinde oluşan bir kistten dolayı sorun yaşadı. Çocukken okuldaki diğer çocuklardan izole yaşadığını iddia etmesinin nedeni de çok sık hastaneye yatmasına bağlamaktadır. Bu yüzden de kimsenin onu arkadaş olarak tanıma fırsatı bulamadığını da eklemektedir.
Ayrıca çocukken çok saplantıları olan bir çocuk olduğunu itiraf etmektedir[kaynak belirtilmeli]. Ailesini Kaliforniya’ya taşındığı yıllarda 16 yaşında iken liseden mezun oldu. Bunu takiben Atlantic Theater Company‘ye gitti.
İlginizi Çekebilir
