Sønder Broby Sogn, Svendborg Amt