いや処理は増えないんじゃない?
バニラでも「Y=●の場所にブロックが有る」という検出はされてるからこそ影ができるワケで
地表から50ブロック以上離れたら明度減少処理から除外するみたいな具合にすればいいんだろうし
むしろ負荷が減りそう(完全な素人目線)