生信分析所需的服务器计算平台

打印 上一主题 下一主题

主题 992|帖子 992|积分 2986

一般分析生信数据,根本上都需要在大型服务器上去处理,以及实行使命;
一则是linux系统便利,二则是生信测序大数据普通PC难以处理,
这篇博客的标题就在于如何解决服务器需求的标题,包括云VPS
1,实验室有矿,大概就是做计算的,反正有服务器
2,看看能不能在导师帮助下到计算组趁一个服务器账号,
3,超算平台看看能不能跑;
好了,废话不多说了,写这篇博客就是为相识决白手发迹的case标题:
1,R:

(1)pc上的R+Rstudio,换其他的R的IDE也可以,前提自己pc够叼
(2)在线平台:
①rstudio官方在线平台https://posit.cloud/,每周限时(配置比较鸡肋)
②intel devcloud:
没有sudo以及root权限,用不了Rstudio-server,但是可以R+jupyter作为IDE。
安装R很简单,用mamba search装最新版的r-base;
装jupyer并配置为IDE:只需要在jupyter中安装R内核IRkernel即可;
教程参考:
https://mp.weixin.qq.com/s/O0Xxlvr-R-lLkMOZUgTUAQ
https://mp.weixin.qq.com/s/WhDYzzXYTIL3ScPIjKZ0pw
https://mp.weixin.qq.com/s/1tRMd-ONTutDG9zW-TGb6w
https://mp.weixin.qq.com/s/UFq_GwkA671nOsd9poGoLw
(https://notebooks.edge.devcloud.intel.com/)

但是注意!!!
Jupyter中并不能正常安装R包,目前个人亲测有效的方法是:
jupyter当前的情况env中,在命令行中mamba search并安装R包,比如说
  1. mamba search ggpubr  #实际上linux中的R包会比较有特征性,例如r-ggpubr,或者直接以bioconductor为前缀,这一点实际也可以去bioconda搜R包
  2. mamba install -y r-ggpubr=最新版本
复制代码
大概可以直接去bioconda频道检察,
大概可以去对应R包的github官网等,

总之,要注意不要在命令行中进入R,做install.packages(),是不进入R编辑器直接在表面linux中用mamba搜刮并安装!
总之,涉及到R包的管理安装之类,同一在表面情况中mamba举行,然后就可以打开同一情况下的jupyter开始玩耍了!
jupyter+R补充了没有rstudio-server的图像IDE的缺点,虽然没有rstudio做的好,但是没有sudo/root权限的最佳上策。
③google colab:https://colab.research.google.com/
能够以jupyter情势运行R
2,python:

(1)pc上的vscode,或anaconda(带jupyter)
(2)在线平台:
①google colab(也可以作为深度学习的暂时炼丹炉):进一步可以付费pro
②intel devcloud:装或不装jupyter都有
③kaggle等数据分析平台
3,服务器:

(1)intel devcloud:
参考https://wzfou.com/devcloud-apponfly/
https://srv.pub/archives/intel-devcloud.html(参考如何极致max化)
https://51.ruyo.net/17346.html
https://blog.csdn.net/hhhny/article/details/130309683
https://xtrojan.org/server/vps/intel-developer-cloud.html
https://makerpro.medium.com/%E5%85%88%E8%A9%A6%E5%86%8D%E4%B8%8A-intel-devcloud%E5%8A%A9%E4%BD%A0%E9%9B%B2%E7%AB%AF%E9%A9%97%E8%AD%89ai%E4%BD%88%E7%BD%B2-%E5%85%8D%E8%B2%BB-87ec29595177
没有ssh,只能web IDE;
但是没有sudo以及root;
恐怕也不能挂在背景nohup运行使命,1次只能10h,估计只能人一直待在前台监控使命运行,不能离开;
暂时1次周期内数据没有丢失;
所以建议你的使命是小使命,而且是卑鄙的使命,最好是日结的使命,做好每一步的数据备份!

如何长期(按理来说,2023年做srtp时间的春季,4月左右,到现在的2024年的9月份,现实上就是已经做到了1年,1年,虽然说变动了账号,但是理论上来说,已经是5年的20%,大概可以说大论文1年也差不多了,对于硕士而言一般是研二左右开题,那根本上应该差不多够维持了;)
但理论上来说,应该是120也就是4个月左右的账号就会收回,所以5x12/4=15,也就是至少需要开15个账号(mail)。

也有说法是3个月就收回,所以5x12/3=20,需要开20个账号;
所以买贵点你的科学上网工具,
多注册几个微软以及google邮箱,
浏览器隐私模式等;
以及经常去注册mail里延长时间,
之后实时备份中心卑鄙数据,即时的狡兔三窟。
可参考博客,如何注册多个google以及edge邮箱账号。
https://mp.weixin.qq.com/s/d-gGvS4rH3BTYDa3CBW-hw
https://mp.weixin.qq.com/s/Vq9GSKg6EDOP9FJQ0HIuhg
(2)google colab:命令行模式注意下语法,可以付费上pro
https://colab.research.google.com/
(3)free云服务器VPS等:
https://51.ruyo.net/tag/%E5%85%8D%E8%B4%B9%E4%BA%91%E6%9C%8D%E5%8A%A1%E5%99%A8
参考:一搜一大把
https://mp.weixin.qq.com/s/MQ7C2KzhMja9u0heHCqE-g
https://mp.weixin.qq.com/s/XgoIldK0nge4N8yoZPP8mg
https://mp.weixin.qq.com/s/0dnrwZpg1nw29s4eCqpnEQ
(4)最稳妥的:就是租云服务器
租好之后设置好pc端的mobaxterm,以及移动端的termius;
大概是自己组建,看经费
(5)生信分析服务器一般的配置:
固然如果有钱的话也可以去一些公众号上去租云服务器:

参考https://cloud.tencent.com/developer/article/2229763
https://mp.weixin.qq.com/s/13gITQLdZUaV9ac1kV4nyQ
最低配置:
16核/32线程,128G内存,8T硬盘
具体配置查询命令可以参考别的一篇博客:
https://blog.csdn.net/weixin_62528784/article/details/142183872?spm=1001.2014.3001.5501





免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

泉缘泉

金牌会员
这个人很懒什么都没写!
快速回复 返回顶部 返回列表