Unsafe в Rust предполагает, что программист сам берет на себя ответственность следить за безопасностью некоторых участков кода. То есть, вы поверх вашей unsafe-системщины создаете свою безопасную обертку - некую структуру или модуль с безопасным внешним API, абстракции в Rust либо совсем бесплатные, либо стоят очень дешево. Дальше пользуетесь ею и компилятор автоматически обеспечивает вам безопасность в местах вызовов. В этом смысл  unsafe. Если вам такое не нужно (потому что вы не умеете/не можете/не хотите в абстракции и API, а императивная лапша - ваш стиль жизни), то да, Rust лучше тогда не использовать.