法官在履行职责时必须严格遵守法律和法律规定的程序，确保公正审判。如果法官违反法律或滥用职权，他们可能会受到控告。然而，法官通常受到司法豁免的保护，这意味着在其职责范围内行使裁量权时，法官不会轻易受到控告。但如果法官严重违反法律或职业道德，他们可能会受到司法调查和纪律处分，并可能会失去法官职位。因此，法官并不是完全不担心受到控告，但相对来说，他们受到的司法保护更多一些。