Обнаружить U-образные края в изображении

Я пытаюсь определить местоположение кончика пальца по изображению. Мне удалось обрезать область на изображении, где он должен иметь кончик пальца, и извлечь края, используя Canny Edge Detector. Однако я застрял. Поскольку в описании моего проекта говорится, что я не могу использовать цвет кожи для обнаружения, я не могу найти точный контур пальца, и мне придется попытаться отделить кончик пальца только краями. Прямо сейчас я думаю, потому что палец имеет изогнутую форму арки / букву U, возможно, это можно использовать для обнаружения. Но так как он должен быть инвариантным к вращению / масштабированию, большинство алгоритмов, которые я нашел до сих пор, не до этого. У кого-нибудь есть идеи как это сделать? Спасибо всем, кто откликнется!

Это результат, который я имею сейчас. Я хочу поставить ограничивающую рамку вокруг указательного пальца, или самого высокого кончика пальца, в зависимости от того, что легче всего.