Windows数据科学环境搭建：12年架构师避坑与高效配置

　　去年四月那会儿，我被叫起来三次——都是Windows数据科学环境挂了的破事儿。第一次是凌晨两点，开发说Jupyter Notebook突然连不上，我原以为又是证书过期，结果登录跳板机一看，好家伙，磁盘inode爆了。那机器上装了十几个Python环境，每个都带自己的conda包，光numpy就三个版本，inode占满跟玩似的。运维同事在旁边吃泡面，汤汁溅到终端上，我盯着那行'No space left on device'，心里直骂娘——这破事儿在Linux上早该被监控告警了，可Windows的PerfMon？呵，谁爱看谁看。

　　第二次是早上六点，开发说训练任务卡在99%不动。我原以为是GPU内存泄漏，结果远程进去发现swap分区被占满——Windows默认的虚拟内存设置根本扛不住数据科学场景。更绝的是，有个僵尸进程卡着CUDA上下文，杀都杀不掉，最后只能重启。开发在电话里喊'这得损失多少算力啊'，我盯着屏幕右下角跳动的时钟，心想：你早听我的用WSL2+Docker，至于现在？可老板不让，说'Windows生态更友好'——友好个屁，友好到半夜爬起来修垃圾配置吗？

　　第三次是中午十二点，开发说数据同步失败。我原以为是网络问题，结果查日志发现是NTFS文件系统权限冲突。那机器上同时跑着本地脚本、远程SSH和共享文件夹，权限混得跟麻花似的。我蹲在机房改ACL，冷风机在头顶嗡嗡响，外卖袋子上的水汽滴到键盘上，屏幕上的权限列表闪得我眼疼。运维同事凑过来看，说'要不直接格式化？'我差点把键盘砸他脸上——格式化？里面还有三个正在跑的任务呢！

　　后来我总结了，Windows搞数据科学，优胜劣汰太明显了。那些用Anaconda默认配置的，三个月必爆；用PyCharm直接跑项目的，半年必卡；用系统自带Python的，一年必换机器。反倒是那些肯花时间调优的——比如把conda换成mamba，把虚拟内存设成物理内存的1.5倍，把共享文件夹权限锁死的——活得久。可问题是，谁愿意花这时间？开发要赶进度，老板要降成本，运维要省事，最后全堆到我头上。

　　我原以为Windows的图形界面能省点事，结果坑更多。比如那个'资源监视器'，看着挺唬人，可关键指标（比如inode使用率）根本不显示；比如'任务管理器'，GPU监控延迟高得离谱，等发现卡顿时，任务早挂了；比如'事件查看器'，日志乱得像垃圾场，找条有用的信息得翻十分钟。最搞笑的是，有次开发说'机器变慢了'，我查了半天发现是Windows Defender在实时扫描numpy的.so文件——这功能在Linux上早该被排除了，可Windows？呵，它觉得所有文件都可能有毒。

　　跟老板争执过几次，我说'要么用WSL2，要么用Linux服务器'，他总说'Windows更符合用户习惯'。我差点笑出声——用户习惯？用户习惯半夜爬起来修环境吗？用户习惯看任务卡在99%吗？用户习惯被权限问题卡三天吗？后来我学乖了，不再硬刚，而是做了套'Windows数据科学环境自检清单'：磁盘空间、inode使用率、swap分区、GPU驱动、Python环境数量、共享文件夹权限……每项都标红标黄标绿，开发自己看着办。效果？至少现在半夜被叫的次数少了——不是环境变好了，是他们学会看清单了。

　　开发同事里有个老哥，特固执，非说'Windows的IDE更好用'。我原以为他只是嘴硬，结果有次看他代码，好家伙，直接在系统Python里装包，连虚拟环境都不用。我问他'不怕冲突吗？'，他特淡定地说'大不了重装'。我盯着他屏幕上的'pip install tensorflow'，心想：这老哥怕是没经历过环境炸了的绝望。后来他机器真炸了，找我帮忙，我花了两个小时才把环境恢复——从那以后，他见我就喊'师傅'，再也没提过'IDE更好用'。

　　云厂商的工单系统也坑。有次环境挂了，我提交工单说'Windows服务器inode爆满'，他们回'请提供详细日志'。我上传了PerfMon截图，他们回'请描述具体操作步骤'。我写了五百字，他们回'问题已转交二线'。二线等了四小时，回'建议升级磁盘'。我差点摔手机——升级磁盘能解决inode问题？后来我自己远程进去，用'fsutil'命令扩了inode池，十分钟搞定。云厂商？呵，他们连Windows的inode是啥都不知道。

　　现在我最怕两件事：一是开发说'环境又慢了'，二是老板说'再优化下成本'。前者意味着我要花半天查性能瓶颈，后者意味着我要在垃圾配置上再抠出点资源。有时候躺在床上，脑子里还在过监控指标——磁盘、内存、CPU、GPU、inode、swap……像念经似的。开发同事说我'太较真'，我说'不较真的话，半夜被叫的就是你'。他笑笑，没说话——他知道我说的是实话。

文章配图，仅供参考

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!