Менять cursor только на определенной области

Как изменить курсор, только на определенной позиции карты?

Соответственно, там где с черный фон ходить совсем нельзя. Там где серый можно ходить, но скорость персонажа замедляется. И везде разный курсор.

Как вообще подобное правильно делать? Есть задумка копировать canvas в buffercanvas, сверху наложить карту поверхностей. И сравнивать по пиксельно. Но такой метод кажется крайне медленным, так как функция будет вызываться на каждый чих mousemove.