Połowa XVI wieku, kiedy urodził się Tomás Luis de Victoria, Ávila była u szczytu swojej potęgi ekonomicznej, z ponad 10 000 mieszkańców. Było to miasto średniej i dużej wielkości, dość podobne do innych sąsiednich miast kastylijskich.
Duża część ludności zajmowała się rzemiosłem i handlem, w tym rodzina Luis-Victoria, która skłaniała się ku sektorowi usług z prawnikami, skrybami i bankierami wśród swoich członków. Barrio lub cuadrilla de San Juan, położone w obrębie murów w najwyższej części miasta, było miejscem, gdzie gromadzili się szlachcice, biurokraci, kupcy i rzemieślnicy, w szczególności ci, którzy pracowali w przemyśle odzieżowym i krawieckim, z którym rodzina Luis-Victoria była blisko związana.
W XVI wieku miasto rozrosło się i zostało upiększone poprzez budowę nowych budynków, publicznych fontann i systemów odprowadzania wody, oczyszczanie i brukowanie ulic, i tak dalej, w okresie wzrostu gospodarczego, który przenikał wszystko dookoła.
Odnaleziono jeden kluczowy dokument dotyczący rodziny ojcowskiej Victorii: testament jego dziadka, Hernána Luisa Dávila, który został zachowany w Archiwum Historycznym Prowincji Ávila. Hernán Luis Dávila był krawcem i sprzedawcą tkanin. Jako sprzedawca podróżował na lokalne targi w Medina del Campo, Segowii i Ávili. Posiadał również ziemie w różnych miastach należących do prowincji Ávila.
Ożenił się z Leonor de Victoria, oboje zmarli w 1545 roku, więc nigdy nie poznali swojego wnuka Tomása. Ta para jest ważna, ponieważ Tomás przyjął nazwiska obu swoich ojcowskich dziadków, zgodnie z ówczesnym zwyczajem, który pozwalał na swobodny wybór i łączenie nazwisk najbardziej bezpośrednich krewnych.
Hernán Luis i Leonor de Victoria mieli siedmioro dzieci, z których najstarszy, Francisco Luis de Victoria, był ojcem Tomása.
Niewiele wiadomo o matczynej stronie rodziny Tomása. Według F. Hernándeza, dziadkami macierzystymi Tomasa byli Antonio Suárez i Beatriz Suárez, pochodzący z zamożnych rodzin Segowii, którzy pracowali w przemyśle tekstylnym. Jednak opinia markiza Lozoya wydaje się być lepiej udokumentowana w tym względzie i uznaje Pedro de la Concha i jego żonę, Elvirę Xuarez, za założycieli linii krwi. Uważa się, że pochodzili oni z Llereny w Badajoz, choć w 1496 r. przenieśli się do Segowii.
Francisco Luis de Victoria, ojciec naszego muzyka, był pierwszym dzieckiem Hernána Luisa i dlatego otrzymał największą część jego spuścizny: jedną trzecią wszystkich jego dóbr i majątków, posiadłość i domy w Sanchidrián, ziemie w różnych gminach i, co ważniejsze, domy rodzinne przy calle Caballeros w Ávila. Franciszek odziedziczył również tytuł notariusza, dzięki czemu jego rodzina znalazła się w bardzo korzystnej sytuacji ekonomicznej.
Franciszek ożenił się w 1544 roku z Franciszką Suárez de la Concha, pochodzącą z Segowii i dziedziczką spadku po rodzicach. Franciszek i Franciszka pobrali się w Ávili w 1540 roku. Urodziło im się jedenaścioro dzieci, z których Tomasz był siódmym.
Dokładna data narodzin Tomasza Luisa jest jednym z najbardziej kontrowersyjnych punktów jego biografii. Nie odnaleziono aktu urodzenia potwierdzającego dokładną datę, ale dziś, dzięki badaniom Ferreola Hernándeza, możemy być prawie pewni, że było to w 1548 roku.
Więc Tomás urodził się w 1548 roku i teraz stajemy przed ciekawym pytaniem: jakie jest jego prawdziwe imię? Ustaliliśmy już, że Luis jest nazwiskiem odziedziczonym po ojcowskiej stronie rodziny, a nie imieniem. Ponieważ żadne świadectwo chrztu ani inne dokumenty pisane z wczesnych lat jego życia nie potwierdzają jego prawdziwego imienia, musimy sięgnąć do późniejszych dokumentów, aby odkryć, że Tomás to w rzeczywistości Tome, lub jak sam zwykł pisać, Thome.
Jeśli chodzi o miejsce jego urodzenia, istnieje więcej niż wystarczająco dużo wskazówek, które pozwalają nam potwierdzić, że urodził się w stolicy Ávila. Tomás urodził się w domu rodzinnym, który został kupiony przez jego dziadka, Hernána Luisa Dávila. Składał się on z patio, korytarzy, pomieszczeń do przechowywania żywności, stajni, piwnicy na wino i innych oddzielnych pomieszczeń. Francisco Luis odziedziczył ten dom w 1545 roku i mieszkał w nim z rodziną do 1557 roku, kiedy to zmarł. Przyjmuje się więc, że Tomás urodził się w tym domu, który Ferreol Hernández umieszcza w miejscu, gdzie obecnie znajduje się calle Caballeros, na rogu calle Pedro Lagasca i dochodząc do calle Cuchillería.
Tomás Luis był chórzystą w katedrze w Ávila. Żaden historyk nie kwestionuje tego faktu, chociaż nie został on w pełni udokumentowany. Logika podpowiada, że Wiktoria nie mogła znaleźć innego miejsca dla swojej edukacji muzycznej, ponieważ nie było innego miejsca w Ávili, gdzie mogłaby zdobyć tak rozległą wiedzę muzyczną. Rozpoczęcie nauki jako chórzysta było dość powszechne wśród muzyków, zwłaszcza tych, którzy mieli zostać maestros de capilla lub kompozytorami.
Tomás wstąpiłby do katedry w 1557 lub na początku 1558 roku, przede wszystkim dlatego, że właśnie wtedy byłby w odpowiednim wieku: 9 lub 10 lat. Ta data jest również bardzo prawdopodobna, ponieważ ojciec Tomasza zmarł w 1557 roku, pozostawiając rodzinę bez środków do życia. Wszyscy musieli się przenieść i szukać pracy, a logiczne jest, że talenty muzyczne Tomasza doprowadziły rodzinę do przekonania, że droga kościelna będzie dla niego najlepsza. Czekając na czas, kiedy dziecko mogło samo zadecydować, umieścili go w katedrze jako chórzystę, ponieważ już wtedy wykazywał wielki talent i zainteresowanie muzyką.
Maestro, których miał w Ávili, byli jego prawdziwymi muzycznymi mentorami i wywarli największy wpływ na jego styl. Jerónimo de Espinar był pierwszym maestro de capilla, z którym Tomás nawiązał kontakt, ale tylko na krótko, ponieważ Espinar zmarł w październiku 1558 roku i obaj nie mogli spędzić razem więcej niż rok. W oczekiwaniu na przybycie nowego maestro, prebendarz Trebe Dueñas został wyznaczony przez kapitułę do uczenia chłopców chorału organowego. Zajmował to stanowisko przez prawie rok, który był kluczowym rokiem dla Tomasza, ponieważ uczył się podstaw i kamienia węgielnego jego sztuki muzycznej.
Bernardino de Ribera objął to stanowisko w czerwcu, 1559 roku. Był on wybitnym muzykiem, a jego praca z Victorią była kluczowa, ponieważ był maestro Tomása przez cztery lata, od czasu, gdy uczeń miał 11 lat do ukończenia 14 lat. W tym czasie organistą był Bernarbé de Águila i to od niego Tomás Luis de Victoria nauczył się grać na tym instrumencie. W późniejszych latach życia Victorii było to jego główną miłością i zajęciem. Była to również pierwsza praca zarobkowa, którą otrzymał po przybyciu do Rzymu. Lubił grać na organach i mógł się uczyć od Bernabé del Águila bardziej niż od Antonia de Cabezón, którego mógł usłyszeć najwyżej dwa razy, podczas jego dwóch publicznych występów w Ávila w 1552 i 1556 roku, oba zbyt wcześnie, aby młody Tomás mógł z nich czerpać jakiekolwiek korzyści. Niemniej Cabezón mieszkał w Ávili do 1560 roku, choć z przerwami, i być może udzielił Tomasowi wczesnej lekcji. Jednym z rówieśników Victorii był Sebastián de Vivanco, urodzony w 1551 roku, a więc tylko trzy lata młodszy od Tomasa, a także chórzysta w katedrze w tym samym czasie.
Z inwentarza z połowy XVI wieku wiemy, że Encinar kupił msze Josquina Desprez i magnificaty Moralesa w 1550 roku, i że były one dostępne dla Victorii. Kapituła miejska nabyła również różne dzieła Escobedo, który, podobnie jak Morales, śpiewał w Kaplicy Papieskiej w Rzymie i powrócił do Hiszpanii, mieszkając w Segowii od 1552 roku do swojej śmierci w 1564 roku. W tych latach kształcenie Tomása Luisa było również związane z włoskimi minstrelami, którzy przybyli do katedry w 1555 roku. Bracia Sardena grali na chirimías, sackbutach i prawdopodobnie na fletach. Wiktoria słuchała i śpiewała razem z nimi, i czasami dzielili się występami.
W końcu, Sewillian Juan Navarro przybył do Ávila 26 lutego 1564 roku, aby zająć wolne stanowisko maestro do 1566 roku. Nie jest pewne, czy Wiktoria rzeczywiście żyła we wszystkich tych skrajnościach, ponieważ data jego wyjazdu do Rzymu jest również punktem spornym. Niezależnie od tego, czy wyjechał w 1565 czy w 1567 roku, miałby niewielki kontakt z Navarro i już wtedy myślał o zmianie, jakiej dokona, przenosząc się do Włoch.