Rein theoretisch (hab noch nie die x- und y-Positions-Pointer gesucht..) könntest Du ja einmal scannen, dich dann um ein Feld nach oben (nur nach oben) bewegen, dann erneut nach verändertem Wert suchen, das ganze die ganze Zeit wiederholen, bis der Pointer für Y gefunden ist. Das selbe dann mit x bei rechts / links.
Wie gesagt, nicht getestet, könnte aber gehen

.