Von welchen die auszogen, Fluchthilfe zu organisieren