Ivanhoe se encuentra ubicado en las coordenadas 36°23′16″N 119°13′9″O / 36.38778, -119.21917.
Según la Oficina del Censo, la ciudad tiene un área total de 5,2 km² (2 mi²), de la cual 5,2 km² (2 mi²) es tierra y 0 km² (0 mi²) 0% es agua.
Según la Oficina del Censo en 2000, los ingresos medios por hogar en la localidad eran de $26,052, y los ingresos medios por familia eran $26,166.
Los hombres tenían unos ingresos medios de $20,410 frente a los $19,583 para las mujeres.
La renta per cápita para la localidad era de $9,101.