没有携带行驶证不能直接在窗口处理违章。在处理交通违法时，您需要提供有效的行驶证和驾驶证。行驶证是证明车辆合法上路的证件，而驾驶证则是证明您具备驾驶资格的证明。如果您没有携带行驶证，可能需要通过其他方式证明车辆的所有权或合法性，例如提供车辆登记证书等文件。因此，建议您在处理交通违法前先准备好相关的证件和文件。