Храмы спящих расположены на точках силы, на кхаринзе тоже. Разве при перемещении острова точка силы должна переместиться с островом? Логичней было бы если привязка была к определенному месту планеты, а не к конкретному острову.
Думаю, что дело в помещении. Он пытался использовать силы в клетке и пыточной. Когда не получалось, они были закрыты, изолированы от остального мира и доступа к силам не было