不太清楚題主說的領導布置的任務是什么任務，如果是和工作相關的，應該不會牽扯到其他，因為是工作本職，你也應該盡力去完成。如果是和工作不相關的，你可以和領導說明，在保證本職工作完成的前提下再去做。如果因為這些事情耽誤本職工作，可能領導依舊會認為是能力問題。