土地のセットバック部分に防護壁やフェンスを建てるのってダメ?

ググるとダメっていう人もいるしOKって言う人もいるし良くわかんねー。