少年歌手大奖赛的裁判小组由若干人组成，每名裁判员给歌手的最高分不超过10分。第一名歌手演唱后的得分情况是：全体裁判员所给分数的平均分是9.64分；如果只去掉一个最高分，则其余裁判员所给分数的平均分是9.60分；如果只去掉一个最低分，则其余裁判员所给分数的平均分是9.68分。求所有裁判员所给分数中的最低分最少可以是多少分？这时大奖赛的裁判员共有多少名？