文科生坐拥 20 台高配服务器,该怎么好好利用?

2020-01-13 21:14:05 +08:00
 leoballacl

有点标题党了,事实是这样的,我正在某学校文科学院担任研究助理。大数据的火热让不少文科专业也开始跟风,我所在的实验室的设备确实给力,20 台服务器,每台服务器有 256G 内存,4T 固态硬盘存储。

然而管实验室的老师是文科出生,Linux,Python, Spark, Hadoop 等都只是了解功能,技术细节并不懂。我们实验室之前有另外一名专职的科研助理,他统计学背景的,爬虫做得不错,服务器在跑的几个爬虫任务都是他一手搭建的。不过最近他离职了(毕竟 IT 公司给的薪资比学校高多了),爬虫的任务时不时出现问题还要找他远程帮忙解决。

前段时间我们的服务器被学校的网络中心检测到有僵尸网络入侵,我们找供应商帮忙看是什么原因。搞了半天最后也只能“治标不治本”地进行 IP 封锁而已。

杂七杂八地说那么多,我也不知道我想说什么,我只是觉得好暴殄天物啊,200 万的机器,监测环境没有,用户管理一团糟。数据分析现在我们用单机就能暂时解决了,分布式系统都没怎么利用。

我好愧疚啊,毕竟这些机器都是国家掏的钱,并不能做到物尽其用。听说今年还有一百万的经费下来,要购置一批 GPU 服务器。

各位 V 友对我有什么建议吗?我也是纯文科生,熟练使用 R 语言,Python 入门。我应该怎样做才能提高这些服务器的利用效果,例如我们的服务器需要装什么东西好让服务器运转地更合理科学?我应该努力学习哪些方面的知识?多说一句,我的研究方向是计算社会科学。

我现在用着实验室内存 500G,价格 20 万的工作站发帖,感觉硬件条件好到让我这小白好惭愧。

10534 次点击
所在节点    服务器
51 条回复
passluo
2020-01-13 21:21:53 +08:00
和学校信息中心商量下,部署一套 OpenStack,利用校园内网分发点资源给有兴趣的同学们做试验用。
leoballacl
2020-01-13 21:33:45 +08:00
@passluo 这有点算公益活动了,我估计管实验室的老师暂时不会同意的。
askfermi
2020-01-13 21:38:51 +08:00
找 EECS 系合作发 paper,借他们用? 实在找不到的话可以和我们合作发:)
manami
2020-01-13 21:46:14 +08:00
挖矿(逃
io123
2020-01-13 21:47:10 +08:00
挖个矿?
leoballacl
2020-01-13 21:59:28 +08:00
@askfermi 那些专业的硬件设备更好。。。你们什么专业的呀?有什么好的研究计划吗?
leoballacl
2020-01-13 22:00:03 +08:00
@manami 不懂。。。。而且,学校的网络中心会有监控?
rayhy
2020-01-13 22:05:15 +08:00
什么学校啊!这么豪气。。我们这专门搞深度学习的各种缺服务器。。
0gys
2020-01-13 22:06:10 +08:00
搞个大型 cg 渲染。配置好环境,用网上素材或者原文件跑。或者自己学一学电影特效
xiaotongxue
2020-01-13 22:08:02 +08:00
羡慕,什么学校啊
mnssbe
2020-01-13 22:09:50 +08:00
为了折腾而折腾,没有需求创造需求,挖矿好像挺适合这个场景的
wtks1
2020-01-13 22:15:32 +08:00
这年头连运营商都因为缺钱而导致新增设备不足了,楼主这学校真壕啊
leoballacl
2020-01-13 22:22:35 +08:00
@mnssbe 也不能说没有需求吧。你看我们被僵尸网络攻击了,防护系统一团糟,用户管理也只是很原生态的命令行操作,大数据平台只搭了 Hadoop 和 Spark。还有很多东西可以做,我是想请教各位有什么我可以做的,有什么是我可以请老师让专业的人在做的。
ArJun
2020-01-13 22:23:27 +08:00
这年头除了带宽一般都性能过剩了
leoballacl
2020-01-13 22:23:28 +08:00
@xiaotongxue 沿海某双非。。。
miao666
2020-01-13 22:26:08 +08:00
我提供算法和代码,能付费帮我运算吗?
WinG
2020-01-13 22:27:10 +08:00
你可以了解下门罗 XMR
vakara
2020-01-13 22:30:51 +08:00
找找学校内有没有一些计算机相关兴趣的 team 给他们分享点吧,会很感激的。
或者你可以拿来学学比如 openstack openshift kubernetes 等,很适合,说不定还可以写点文章修电 bug 为社区做点贡献。
leoballacl
2020-01-13 22:31:12 +08:00
@miao666 我们是不会接受商业合作的。我们的研究都是基于学术目的的。我们的合作机制还很不完善,所以暂时不能跟你们合作。或者你可以提个建议,我们应该建个什么系统,软件,这样可以方便我们和其他人的合作同时又不影响我们自己日常服务的工作?
leoballacl
2020-01-13 22:33:45 +08:00
@vakara 好的,谢谢你的建议。把资源免费给别人用同时不影响自己日常使用,有什么好的管理系统吗?还是简单地新建个临时用户?纯小白,不懂问一句。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/637623

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX