是的，北京电动自行车需要上牌。根据《北京市非机动车管理条例》规定，自2018年1月1日起，本市对电动自行车实施注册登记管理。车主应当自购买之日起15日内，携带购车发票、车辆所有人身份证明等材料，到公安机关交通管理部门申请登记。未注册登记的电动自行车，不得上路行驶。