耐火磚是不均質體，通常由晶相、非晶相(玻璃相)及氣相三部分組成。隨著耐火磚種類不同，這三相之間的比例也是各式各樣的。
除去氣相外；晶相和非晶相的化學成分又可以有很大的變化。所以對于成分復雜的耐火磚，要判斷其性能是很困難的。同時耐火磚的各種性質又與這三相組成比例有一定的關系。如耐火度不但與晶相、非晶相的化學成分有關，還與它們的存在比例有關，并且與這兩相的分布狀態有關。其他各種性質也在不同程度上與這三相的情況有關系。
另一方面，耐火磚的性能還和其組織結構有關。二種高鋁磚的耐火度同樣為1790℃，氣孔率和其它物理性質基本相同，大部分熱性質也類似。但實際用于蓄熱室蓄熱時，會有很大的差別。一種使用后被侵蝕的表層很光滑，整個磚被侵蝕程度均勻一致。另一種磚被侵蝕后表面十分粗糙，有粒狀物被變質的玻璃相結合而殘留，整個磚被侵蝕強烈，大部分都脫落了。這是由于耐火磚結合物不同造成的。
一般燒結耐火磚的顆粒部分(粘土耐火磚中稱為熟料顆粒)是由結合物粘結在一起的。高鋁耐火磚很多是用耐火粘土作結合物，將高鋁顆粒結合在一起。這種耐火粘土不但耐火度低于整個高鋁磚的耐火度，而且由于制造中磚的氣孔全部集中在此處，使整個結合物較差。增強結合物的方法很多。一般采用的是把高鋁材料粉碎成很小的顆粒，其大小與耐火粘土顆粒度相近。這樣兩種成分均勻混合，緊密共存，燒成后結合物就被增強了。
上述高鋁磚被侵蝕的程度之所以不同就是由于結合物情況不同造成的。由此看來，耐火磚各種性質不但與晶相和非晶相性質有關，與晶相、非晶相、氣相分布和比例有關，還與其燒結情況和分布狀態有很大關系。所以不但要知道耐火物組成相是什么，還要了解其分布情況和組織結構，這樣才能很好地了解耐火磚的性能。因此在選用耐火磚時，要從組成相和組織結構這兩方面來了解耐火磚的性能。
一般看來耐火磚的化學成分和x射線分析顯示的各種化學成分分布情況是影響相組成的主要因素，而與組織結構沒有直接關系。而氣孔率，透氣性是與組織結構關系較大。其它各種性質一般與組成相和組織結構都有關系。