Abimbola Fernandez wurde im American Hospital of Paris in Neuilly-sur-Seine, einer Gemeinde in den westlichen Vororten von Paris, Frankreich, geboren. Ihr Vater war der Milliardär Antonio Deinde Fernandez aus dem Bundesstaat Lagos im Südwesten Nigerias, der als junger Erwachsener in die Vereinigten Staaten gezogen war. Sein Fernandez-Clan stammte von einem portugiesisch-brasilianischen Sklavenhändler ab, der im frühen 19. Jahrhundert in Lagos eine Familie mit einer afrikanischen Frau gründete.
Fernandez‘ Vater hatte vier frühere Ehen; seine dritte Frau war die weiße Amerikanerin Barbara Joyce, die ihn 1961 heiratete, während sie in Virginia lebten, ihm in den Vereinigten Staaten drei Kinder gebar, sich 1984 oder Anfang 1985 von ihm trennte und 1987 die Scheidung einreichte. Seine vierte Partnerin war Prinzessin Abiola Dosunmu, die ihn im April 1973 in Nigeria in einer gut besuchten Zeremonie heiratete. Aus der Ehe ging eine Tochter hervor und sie dauerte bis 1987-1988. Seine fünfte Partnerin, Fernandez‘ afro-amerikanische Mutter, wurde als Sandra Inett Price geboren. Sie nahm den Namen Aduke Fernandez an, als sie sich 1982 bei einer Stammeshochzeit in Nigeria das Ja-Wort gaben, obwohl er später sagte, dass sie nie offiziell verheiratet waren. Das erste Kind des Paares war die Tochter Atinuke im Jahr 1984, 1989 folgte Abimbola. In ihrer französischen Geburtsurkunde steht ihr Name als Darnel Abimbola Olumegbon Fernandez und der Name ihrer Mutter als Aduke Olufunmilola Olumegbon Price Fernandez. Der gemeinsame Name Olumegbon stammt aus dem Adelsgeschlecht der Olumegbon von Isale-Eko, Lagos; ihr Vater war über seine Mutter ein Nachkomme dieses Herrscherhauses.
Nach der Geburt von Fernandez lebte die Familie eine kurze Zeit im Hotel Ritz Paris und zog dann in das Chateau de Bois-Feuillette in Pontpoint.
Ein weiterer Umzug führte sie nach New York, wo ihr Vater das historische All View Estate an der Südspitze von Premium Point, New Rochelle, kaufte. Fernandez begann im Alter von vier Jahren Geige zu spielen. Im Alter von sechs Jahren besuchte sie die Rye Country Day School und später das Convent of the Sacred Heart in Connecticut. Im Alter von 10 Jahren zog sie mit ihrer Familie nach Edinburgh, wo sie das Fettes College besuchte. Mit 13 Jahren begann sie, Gitarre zu spielen. Im Alter von 18 Jahren machte Fernandez ihren Abschluss am Fettes College. Sie belegte Kurse in Videoproduktion am Art Institute of New York City und schrieb sich dann 2009 an der Oxford Brookes University in Oxford ein. Als sie nach einem Monat ihr Studium abbrach, um eine Musikkarriere anzustreben, war ihr Vater dagegen.
Während ihrer Kindheit lebte Fernandez ein behütetes Leben als Tochter eines reichen Mannes, reiste in seinem Jet um die Welt, vor allem in afrikanische Länder, und machte im Sommer Urlaub auf seiner 150-Fuß-Yacht Yemoja. Sie trainierte für den Reitsport und nahm an sechs nationalen Reitturnieren teil. Ihr Vater befürchtete, dass sie entführt und für Lösegeld gehalten werden könnte. Viele bekannte Persönlichkeiten aus aller Welt besuchten ihr Haus aus geschäftlichen Gründen, darunter Papst Johannes Paul II., George H. W. Bush, Kofi Annan, Nelson Mandela und Mobutu Sese Seko.
Im Mai 2003, als sie in Schottland zur Schule ging, zog ihr Vater aus ihrem Haus in Edinburgh aus, und ihre Mutter leitete die Scheidung ein und klagte auf 300 Millionen Pfund, was damals als eine der größten Scheidungsklagen aller Zeiten bezeichnet wurde. Der Fall wurde schließlich gegen 36 monatliche Zahlungen von 30.000 Pfund, insgesamt 1.080.000 Pfund, beigelegt.