U ovom poglavlju dat ćemo kratki uvod u matrični problem najmanjih kvadrata. Metoda najmanjih kvadrata se koristi kod preodređenih sustava u slučaju kada imamo više jednadžbi nego nepoznanica i kada sustav nije rješiv po Kronecker-Capellijevom teoremu (vidi M1, teorem 2.5).
Problem najmanjih kvadrata se često koristi u raznim tehničkim primjenama te u ekonomiji (linearna regresija).
Duljina ili norma -dimenzionalnog vektora je broj (vidi M1, poglavlje 3.6)