2 Kokon:

KokonЯ так понимаю нужно перевести экранные координаты в мировые.
Да.

KokonНо как это сделать не пойму.
Например, с помощью метода Unproject. Берём 2 точки в экранных координатах:


Переводим их в мировые координаты, вызывая метод Unproject для каждой:


Полученные 2 точки задают луч, в мировых координатах. Где-нибудь на этом луче можете разместить новый объект.
(Код не компилировал, нет SDK под рукой.)

KokonВ гугле искал, но в основном все примеры на выбор объекта
Примеры на выбор (picking) объекта обычно используют метод Unproject.

Kokonи в основном на с++, а мне бы хотелось найти пример на c#
Тут от языка мало что зависит, различия будут чисто синтаксические.

Kokonи именно перевод координат.
Метод Unproject как раз и делает перевод координат. Или вы хотите вручную всё сделать, то есть самостоятельно реализовать аналог этого метода?

2 Kokon:

Одна точка на viewport-е (в экранных 2D-координатах) -- это целый луч в мировых координатах, проецирующийся в эту точку. Вот near/far как раз и вычисляются, чтобы узнать этот луч. (near (после Unproject) -- точка на ближней плоскости отсечения, far (после Unproject) -- точка на дальней плоскости отсечения) Кстати, если проекция перспективная, то near можно вообще не вычислять, а в качестве начала луча взять позицию камеры (cam_pos в коде ниже). Вам надо как-то дополнительно решить, где на этом луче разместить новый объект. Например, если хотим разместить новый объект на расстоянии 10 мировых единиц от камеры:


(Код не компилировал. Кстати, C#-код лучше обрамлять tag-ами [ src C# ] [ /src ].)
Или можно находить пересечение этого луча с какой-нибудь плоскостью, чтобы новый объект появлялся на этой плоскости.

KokonЕсли делаю Unproject с Matrix.Identity,
В данном случае так и надо, ведь нужна точка в мировых координатах. Вот если бы была нужна точка в локальных координатах какого-нибудь объекта, тогда да, надо было бы при вызове метода Unproject в параметр world передавать мировое преобразование координат этого объекта.