Лоскутная интерполяция изображений

Я вручную создал карту глубины на основе вершин моей 3D-модели (нет, я не могу использовать z-буфер в этом случае).

К сожалению, карта глубины похожа на пэчворк с множеством дырок.
Вот как это выглядит:

http://i.stack.imgur.com/ZHCKr.png

Я как-то хочу интерполировать эти пропущенные дыры, но я никогда раньше не делал ничего подобного и не знаю, как решить эту проблему.

Я думал о бикубической / билинейной интерполяции.
Это то, что мне нужно применить к моей проблеме?

Если да, не могли бы вы объяснить мне, как использовать этот подход? Если такого рода интерполяция не является правильной, как я могу решить эту проблему дыр?