因素分析在某种程度上可以看做是主成分分析的推广和扩展，也是利用降维的思想，由研究原始变量相关矩阵内部出发，把一些具有错综复杂关系的变量归结为少数几个综合因子；根据相关性把原始变量分组，使得同组内的变量之间相关性较高，不同组的变量间相关性较低，每组变量代表一个基本结构，并用一个不可观测的综合变量表示，这个基本结构就被称为公因子。