找回密码
 新注册用户
搜索
楼主: vardrag

[分享] 屯包真不是人干的事

[复制链接]
发表于 2016-11-7 17:25:23 | 显示全部楼层
vardrag 发表于 2016-11-7 16:12
实践一下,再说我囤个十天八天也很可观啊

大神辛苦一下,你要是真屯了十天八天的,team china 拿个名次肯定没问题
回复

使用道具 举报

 楼主| 发表于 2016-11-7 18:07:29 | 显示全部楼层
flybike007. 发表于 2016-11-7 17:25
大神辛苦一下,你要是真屯了十天八天的,team china 拿个名次肯定没问题

第一次囤包主要是积累经验,忙了两天还没囤完,晚上继续

评分

参与人数 1基本分 +8 收起 理由
flybike007. + 8 很给力!

查看全部评分

回复

使用道具 举报

发表于 2016-11-7 18:45:13 | 显示全部楼层
vardrag 发表于 2016-11-7 18:07
第一次囤包主要是积累经验,忙了两天还没囤完,晚上继续

怎么操作的?我调了20天也存不了多少,感觉很快会算完。
回复

使用道具 举报

发表于 2016-11-7 21:37:14 | 显示全部楼层
段小猫 发表于 2016-11-7 12:27
你积分第一的项目是什么啊?

我吗?我第一的是DRT,那个项目已经停掉了,想当年nobodyk大叔就是靠这个项目维持在世界前三的~
回复

使用道具 举报

 楼主| 发表于 2016-11-8 00:50:49 | 显示全部楼层
freestman 发表于 2016-11-7 18:45
怎么操作的?我调了20天也存不了多少,感觉很快会算完。

最原始的方法,装N个操作系统分别囤包。
其实我犯了个很大的错误:一个操作系统不够的机器应该是分期分批囤包,算完一个系统接着囤。就跟平时计算是一样,基本上不会有算力浪费,而且随时囤包在上传的时候也不会那么拥堵。最好是一次囤两个系统,防止有些机器半夜算完,毕竟不可能24小时盯着。
但我机器太多,分散在几个地方,总想毕其功于一役。短时间大量的请求很容易碰到各种限制,而且手动囤包非常耗精力,半天半天地坐在那盯着好几台电脑,感觉真是一言难尽。

自动分配的任务与你的CPU基准测试结果只能说是有关,囤包上限并不总是=性能(每天计算量)X预设天数。还有其它限制:只有32线程以上的机器才能碰到1000这个上限,否则就算你1秒完成一个任务,线程数不够一样不行。
所以最基本的是用NCPUS去扩充线程数量,但是这种操作损失算力而且容易出错(我的APU机只要这样搞就完全是错误)甚至造成死机,内存不够还不行,只能是用于囤包,以后要及时调回去。
每次更新提供的任务数量上限因项目而异,OET可以超过300,ZIKA好象就200。
OET之类的保质期只有10天,更高的设置我怀疑是否有用。
大规模(10W左右)的囤包真是个系统工程啊,我这次充其量能囤个9天,还有1天基本上算浪费了。

不想这么拼就囤7天MCM好了,肯定比你囤OET分多。


回复

使用道具 举报

发表于 2016-11-8 01:20:31 | 显示全部楼层
虚拟机屯包是不是容易操作一些?直接接完了包换系统就行吧?不过就是人累点儿还得往回换……

就是假设一下……这回我是没办法屯包了,远程回比PPT都卡……
回复

使用道具 举报

 楼主| 发表于 2016-11-8 09:21:33 | 显示全部楼层
nekoko 发表于 2016-11-8 01:20
虚拟机屯包是不是容易操作一些?直接接完了包换系统就行吧?不过就是人累点儿还得往回换……

就是假设一下 ...

也就是差个重启,而且VBOX之类的好像只有32个线程。
回复

使用道具 举报

发表于 2016-11-9 05:38:48 | 显示全部楼层
vardrag 发表于 2016-11-7 03:11
windows不知道行不行,linux搞不来啊

今天压缩了一把,废了20多个算完的包……还有30多个没算的包,哭死了。可能是多留了一个文件,被识别成同一个电脑了。
回复

使用道具 举报

 楼主| 发表于 2016-11-9 09:49:19 | 显示全部楼层
iwait 发表于 2016-11-9 05:38
今天压缩了一把,废了20多个算完的包……还有30多个没算的包,哭死了。可能是多留了一个文件,被识别成同 ...

一两个包测一下嘛
回复

使用道具 举报

发表于 2016-11-9 10:31:36 | 显示全部楼层
vardrag 发表于 2016-11-8 00:50
最原始的方法,装N个操作系统分别囤包。
其实我犯了个很大的错误:一个操作系统不够的机器应该是分期分批 ...

这样搞会把人累到吐的
回复

使用道具 举报

 楼主| 发表于 2016-11-9 10:55:06 | 显示全部楼层
本帖最后由 vardrag 于 2016-11-9 11:07 编辑
horst1981 发表于 2016-11-9 10:31
这样搞会把人累到吐的

其实我一开始是冲着OET的鸡血任务(效率是win的4-6倍)去的,只是给几台主力机装了系统,正好有比赛就扩大到所有I7以上的机器(笔记本除外)。
趟了几次雷之后,效率已经提高很多了,明年五项赛如果可以囤包相信就不会如此狼狈了。
我这里有个很奇怪的问题:一定要嗑药(NCPUS)的机器囤包很快,几百几百下载,一会儿就满了;主力机就慢吞吞的,一次只给44个任务,囤1K要一个钟,而且需要不断嗑药才能维持,我怀疑是不是进黑名单了。
很多东西都是趟过雷才知道,其实我多装一倍操作系统囤OET可能更块,一般更新4次就行了。
回复

使用道具 举报

发表于 2016-11-9 20:38:39 | 显示全部楼层
楼主加油!

nekoko阿姨在调试阶段已经日产9000小时了! eruda.png


坐看大神火拼的我
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 新注册用户

本版积分规则

论坛官方淘宝店开业啦~

Archiver|手机版|小黑屋|中国分布式计算总站 ( 沪ICP备05042587号 )

GMT+8, 2024-4-30 22:28

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表