Imaginate que alguien quiere estudiar Literatura. El consejo que le daríamos a esa persona es: "Comienza por las letras, aprende a escribir, aprende a leer etc".
En Física el comienzo siempre son los números... aprender a sumar, restar, multiplicar, dividir etc... Matemáticas. Ese es apenas el comienzo de Física, pero será suficiente en tu caso. Si entras en la Universidad, y tu base de Matemáticas es aceptable, entonces no tendrás grandes traumas al estudiar Física. Será tu base en Matemáticas la que te facilite todo al comienzo y gran parte de la carrera.
Para estudiar Matemáticas, en mi opinión, lo mejor es empezar de cero, volver a aprender todo de nuevo, desde el primer año de la escuela primaria hasta el último año de la secundaria. Si tienes recursos financieros, puedes pagar aulas particulares o cursos. Pero si no puedes pagar, ni te preocupes, porque tu mismo puedes aprender todo: Pide prestado los libros, o busca los libros en la internet (muchos de ellos son gratuitos), o busca en la internet videos, cursos, contenidos etc... es increíble la cantidad y calidad de contenido gratuito que podrás encontrar en la internet.
Y cuánto tiempo te demorará aprender toda la Matemática de nuevo? Depende! Cada persona es una persona. Hay personas que no aguantan estudiar ni 1 hora, mientras que otras personas consiguen estudiar 15 horas por día. Tu personalidad, tus hábitos, tu insistencia, tu persistencia, tu disciplina, tu determinación, tu motivación, tu voluntad etc... es lo que hará la diferencia!
Personalmente creo que estudiando durante 6 meses 4 horas con pausas de 15 minutos + 1 hora de pausa + y más cuatro horas con pausas de 15 minutos... estarás pronto para la Universidad con una fantástica base de Matemáticas, que no solo te servirá para Física, como además te servirá para cualquier otra carrera y para tu vida en general. El resto de lo básico de Física también lo puedes entrenar tú solito, pero si tienes la base Matemática, hacer eso será fácil y te llevará muy poco tiempo. La verdad es que si entras en la Universidad con una buena base Matemática, la propia parte introductoria de Física la podrás aprender en el primer año de Física. Esa es mi humilde opinión.