[Zеня]

Я думаю, что это зависит ещё и от угла преломления лучей, т.е. лучи солнца отражаются от дома, под острым углом, в твою сторону. И этих лучей по всей видимости больше, чем тех, которые направлены от солнца прямо на тебя. Это напрямую связано с так называемой высотой солнца, и этим же объясняется тень, которая за домом.
Примерно так.
А на счёт "лупы" и "теплоотдачи" - тоже, несомненно верно. И ещё можно придумать множество таких факторов.