相続税を計算する場合、建物はどのように評価するのでしょうか。

建物は固定資産評価額で評価します。

すなわち相続税評価額＝固定資産税評価額です。
固定資産評価額とは固定資産税を計算する基準となる評価額で、各市町村（東京 23 区は各区）が決定します。

毎年4月～6月に送付される固定資産税納税通知書に固定資産税評価額が記載されています。

建物が貸家の場合は、固定資産税評価額×0.7 で計算します。