柴油机在零下的温度环境下如果没有采取适当的保护措施，确实有可能因为低温而受损。对于柴油机来说，-3度的温度虽然不算极低，但如果未进行放水措施，冷却系统可能会冻结，导致发动机部件受损。因此，如果柴油机在没有放水的情况下暴露在零下3度的环境中，确实有可能因为冻结而损坏。为了避免这种情况，建议在低温环境下使用柴油机时采取相应的保护措施，如添加防冻液或使用其他保温措施。