放校内还是托管机房,看四项:数据分档后哪些不出校、有没有人值守、规模会不会变大、预算是否算全。常见做法是先在校内用一体机试点,再决定是否托管。
要点速览
- 放哪里和选什么模型是两件事,判断依据不同
- 学生信息、教务、教研、公开资料分四档定去向
- 校内无人能及时处理告警时,要认真考虑托管
- 常见路径:校内一体机试点,扩容再上托管机房
- 预算要把场地、供电、散热、带宽和人员算进去
学校私有化部署大模型,放校内机房还是托管机房,没有统一答案。可以按四项来判断:数据里哪些资料必须留在校内;运维上校内有没有人处理断电、散热和网络故障;扩容上使用人数会不会在一两个学期内明显增加;预算里有没有把场地、供电、散热、带宽和人员成本算进去。多数学校比较稳妥的做法是先在校内放一台一体机,做小范围试点。确认用得起来以后,再决定把更高规格的服务器放进托管机房,或者采用校内与托管混合的方式。
放在哪里,和选什么模型是两件事
很多学校在讨论私有化部署时,会把两个问题放在一起谈:用哪个模型,以及设备放在哪里。其实这两件事的判断依据不同。
选模型看的是任务类型、授权条款和硬件能否跑得动,这部分可以参考私有化部署大模型有哪些?先按五项标准筛。放在哪里看的是另外几件事:
- 数据去向;
- 日常由谁维护;
- 以后能不能加设备;
- 长期花多少钱。
把两件事分开,有一个直接的好处:模型以后可以换,放置位置却牵涉场地改造、网络规划和管理制度,改起来成本更高。所以位置问题值得在采购前单独讨论清楚。参与讨论的部门建议包括信息中心、教务、学生工作和财务。
数据:先把资料分档,再定哪些不出校
学校的资料大致可以分成四档,每档对放置位置的要求不一样:
- 学生信息:身份信息、成绩、家庭情况、健康与心理记录等。这类信息属于个人信息,其中不少涉及未成年人,受《中华人民共和国个人信息保护法》约束。一般建议保留在校内,或者先不纳入大模型可检索的范围。
- 教务资料:课表、排考安排、学籍办理流程、内部通知。敏感度中等,但往往和学生信息交织在一起,入库前要先清理。
- 教研资料:教案、课件、校本课程、试题库。试题在使用期内需要保密;教案和校本课程属于学校积累的成果,通常希望只在校内或受控环境中使用。
- 可公开资料:招生简章、校规校纪、公开的课程介绍。这类资料放在哪里都问题不大,适合做试点阶段的入库内容。
这里有一个概念需要先说清楚。托管机房里的服务器归学校所有,账号和数据由学校控制,但设备物理上在校外场地。所谓“不出校”可以有两种理解:
- 物理位置和网络边界都在校内;
- 只要求数据由学校自己掌控。
学校需要在制度层面先定下采用哪一种。如果学校的数据管理要求明确前两档资料不得存放在校外,那么承载这部分资料的设备就只能放在校内。不管放在哪里,网络安全等级保护(等保 2.0)方面的要求都要一并考虑。
运维:断电、散热、网络故障谁来处理
校内机房常见的情况有几种:
- 平时由信息中心一两位老师兼管,周末和寒暑假无人值守;
- 遇到全校停电检修,设备往往要跟着停;
- 机房空调是普通空调,夏天高负载时温度不好控制。
一台一体机放在这样的环境里通常能用。但如果后面要长时间运行算力较高的服务器,对供电和散热的要求会明显提高。
托管机房的分工不一样。机房负责供电冗余、精密空调、网络接入和现场值守;学校负责服务器上的系统、模型、知识库和账号。选托管时要问清几件事:
- 故障时学校通过什么通道远程登录和管理设备;
- 需要现场操作时,机房人员能做哪些动作,如何下单,如何留记录;
- 机房计划内维护如何提前通知,会不会影响开学、考试等关键时段。
判断标准可以很简单:如果校内找不到一个能在半小时内响应设备告警的人,就要认真考虑托管。
扩容:从一体机试点到机房服务器,中间怎么迁移
试点期的用户往往只有一个教研组或一个年级。一台放在校内机房或机房一角的 AI 一体机通常就够用。
等到全校教师都要用,或者要接入更多应用,就要考虑性能更高的机房级服务器。这类设备对供电、散热和机柜空间的要求,很多校内机房满足不了,放进托管机房更合适。
从校内一体机迁到托管机房的服务器,建议按下面的顺序准备:
- 整理试点期的模型版本、参数配置和调用记录,作为迁移基线。
- 导出知识库资料和分档标记,确认哪些资料可以随迁移去托管机房,哪些继续留在校内。
- 迁移账号与权限,核对教师、管理员、学生(如果开放)各自能看到什么。
- 规划访问入口的切换,例如校内网络如何通过专线或加密通道访问托管机房。
- 保留回退方案:新环境验证通过之前,校内一体机先不下线。
如果试点期和扩容后用的是同一套系统和模型管理方式,迁移时主要变化在硬件和网络入口。知识库和权限可以按清单搬迁,重新配置的工作量会少一些。这一点在试点选型时就值得考虑进去。
预算:场地、供电、散热、带宽和人员是否算进去
不少学校做预算时只算设备采购价,放在校内看起来“不用额外花钱”。实际上有几项隐性成本需要单列:
- 场地:机房是否需要改造,承重、防火、门禁是否到位;
- 供电:是否需要增加专用回路、不间断电源,电费按什么口径分摊;
- 散热:现有空调能否满足长期高负载,是否需要更换或增加;
- 带宽:校外访问、远程维护是否需要额外线路;
- 人员:谁值守、谁巡检、谁处理故障,这些工作占用多少工时。
托管的费用结构相对透明,通常按机柜或 U 位、电力、带宽计费,但要按年持续支出。把两边的成本都按三到五年摊开比较,结论往往和只看采购价时不一样。
三种常见组合:适用条件与自查事项
校内一体机试点
适用条件:刚起步、用户少,资料以可公开和教研资料为主。
自查事项:
- 校内机房的电源和网口是否就绪;
- 设备放在哪个位置不影响散热;
- 谁负责日常开关机和巡检。
部署前的准备可以参考AI一体机部署前要准备什么?场地、网络、数据、人员四项清单。
托管机房集中部署
适用条件:使用人数多、需要长期稳定运行、校内机房条件有限,或者多个校区需要共用一套服务。
自查事项:
- 学校数据管理制度是否允许相关资料存放在校外机房;
- 校内到托管机房的访问链路如何保障;
- 远程管理和现场代操作的流程是否写进合同。
校内与托管混合
适用条件:既有不能出校的敏感资料,又需要较大算力。常见做法是把学生信息相关的检索和处理留在校内设备上,把面向全校的通用答疑、教研辅助放到托管机房。
自查事项:
- 两边的权限是否一致;
- 资料分档标记是否清楚;
- 出现问题时,由哪位技术人员负责排查故障在哪一侧。
润迅在这里能做什么
润迅提供的私有化部署由三层组成:
- 放在学校现场的 R30 AI 一体机,适合校内试点;
- 放在机房的 R500 AI 服务器,提供更高规格的算力;
- 上面运行 XunOS(AI 操作系统)和 MaxModel(模型统一管理平台),负责模型接入、路由和调用审计。
试点期和扩容后可以沿用同一套系统和模型管理方式,便于按上文的步骤迁移。
在应用层,MaxKnow 可以用来搭建校本知识库,按资料分档设置谁能检索什么。教育场景的具体应用可以看 MaxEdu。
需要托管时,润迅自建并运营的两处数据中心都可以放置学校的服务器:前海云位于深圳宝安,1400+ 机柜,按 T3+ 标准建设;田心位于深圳罗湖,400+ 机柜。
还要说明责任边界。AI 在学校场景里只承担资料整理、答疑草稿、初步审核和风险提示;成绩评定、教学安排和管理决策,由教师和学校人员判断并确认。这一点建议在上线前写进使用规范。
行动建议:放置位置自查清单
在和服务商接触之前,可以先在校内把下面这份清单过一遍:
- 资料分成了哪几档,哪几档按学校制度不得存放在校外。
- 校内机房的供电、散热、承重和网络是否满足长期运行。
- 周末和假期有没有人能响应设备告警。
- 试点范围是谁,用多久,用什么标准决定能否扩大。
- 如果扩容,准备放在校内还是托管机房,迁移和回退怎么安排。
- 预算是否包含场地、供电、散热、带宽和人员,是否按三到五年计算。
- AI 输出由谁复核,哪些事项只由教师和学校人员决定。
清单过完以后,建议先选一个具体场景做小范围验证,方法可以参考私有化部署大模型试点怎么做?一个场景四条标准先验证。
如果想了解润迅在教育场景的部署方式和托管安排,可以查看润迅教育行业解决方案,或拨打业务热线 400-854-5566,沟通学校的具体情况。
常见问题
学校私有化部署大模型必须放在校内吗?
不一定,要看学校制度对数据存放位置的要求。学生信息等敏感资料如果规定不得存放在校外,承载这部分资料的设备就放校内。通用答疑、教研辅助等内容可以放在托管机房,服务器归学校所有,数据由学校控制。
放在托管机房,学校的数据安全吗?
托管机房负责供电、散热、网络和值守,服务器上的系统、账号和数据由学校管理。关键是在合同里写清远程管理通道、现场代操作流程和记录方式,并结合等保 2.0 等要求做好访问控制。
学校试点大模型用一体机够不够?
试点期用户通常只有一个教研组或年级,资料以公开和教研内容为主,一台放在校内的 AI 一体机一般够用。等到全校使用或接入更多应用时,再评估是否需要机房级服务器。
从校内一体机迁到托管机房要做哪些准备?
整理模型版本与配置,导出知识库及分档标记,迁移账号权限,规划访问入口切换,并保留回退方案。新环境验证通过之前,校内设备先不下线。
大模型能帮老师评成绩吗?
成绩评定不交给 AI。AI 在学校场景只做资料整理、答疑草稿、初步审核和风险提示。成绩评定、教学安排和管理决策由教师和学校人员判断并确认,建议在使用规范中写明。