我国的驻外使、领馆到底是不是我国领域的延伸？

使馆领馆都不是。《维也纳外交关系公约》和《维也纳公约》只说了使馆馆舍不可侵犯，没说使馆所在地的主权属于派出国。使馆的外交豁免权是可以自行放弃的，而真正意义上的领土主权不能说放弃就放弃。