La mayor debilidad de Andrés García fueron las mujeres. Su lista de amoríos fue larga, en alguna ocasión reveló que se había enamorado ocho veces y de aquellas ocasiones, solo con cuatro se acabó.
800 mujeres son con las que supuestamente se acostó en su etapa de juventud hasta los 26 años, después, según sus propias palabras, perdió la cuenta.
Margarita Portillo, fue la cuarta esposa del intérprete de "Pedro Navajas", después de Sandra Vale, con quien el famoso procreó a sus hijos: Leonardo y Andrés García Jr, posteriormente fue Fernanda Ampudia (1974) con quien procreó a Andrea; y más tarde Sonia Infante (1980) con quien tuvo 12 años de relación.
Para el 2000, Andrés inició su idilio con Margarita y fue en 2011 que celebraron sus votos.
Irma Serrano, Carmen Campuzano, Isela Vega, Anel Noreña y Marie Claire, son entre otras, las celebridades vinculadas al actor en materia de romances.
Su vida familiar fue turbulenta, puesto que sostuvo problemas y altercados con amigos y familiares, especialmente con sus hijos, pero finalmente pudo superar diferencias con ellos.