2021-11-08 简读文章三篇

论文题目:RDMA Congestion Control: It’s Only for the Compliant
文章时间:2021年10月前
会议/期刊:CLOUD21
作者背景: 杜克大学
笔记时间:2021年11月08日周一
论文地址:https://danyangzhuo.com/papers/CLOUD21-RDMA.pdf

通过用户的恶意操作,获取不正当的流量优势,提出了攻击的方法和可能的解决方案
对比的主要两个CC算法,DCQCN和HPCC


论文题目:Memory Demands in Disaggregated HPC: How Accurate Do We Need to Be?
文章时间:2021年11月,应该是最近的文章吧
会议/期刊:未知,谷歌学术推荐
作者背景: 巴萨罗那超算中心
笔记时间:2021年11月08日周一
论文地址:http://paul-carpenter.org/vieira2021pmbs.pdf

研究,当HPC环境中的内存变为Disaggregated memory时,会有什么影响。
将内存化为内存池,计算通过内存池来获取存储资源。用ordinary load-store instructions /RMDA来传输输数据。
工作是用slurm的模拟器来做的,模拟的插件是自己先前的工作
F. V. Zacarias, P. Carpenter, and V. Petrucci, “Improving hpc system throughput and response time using memory disaggregation,” in 2021 IEEE 27th International Conference on Parallel and Distributed Systems(ICPADS). IEEE, 2021.
[21] “Disaggregated memory slurm simulator and allocation policy.” https://github.com/felippezacarias/slurm simulator, 2021, accessed: 2021-04-08

方法论

  1. 模拟的作业数据集:CIRNE Comprehensive Model [23]
    W. Cirne and F. Berman, “A comprehensive model of the supercomputer workload,” in Proceedings of the Fourth Annual IEEE International Workshop on Workload Characterization. WWC-4 (Cat. No. 01EX538). IEEE, 2001, pp. 140–148

  2. 扩展内存过估计的模拟器
    (1)按照固定比例过估计
    (2)独立同分布的过估计

  3. 对系统吞吐的影响

4.内存过估计和响应时间的关系

相关工作

1.内存解耦

  1. 资源分配
  2. 获取/定价机制

结论

Disaggregated Memory 是正在发展的新技术,可以灵活细粒度的分配物理内存。HPC用户如要使用Disaggregated Memory的话,需要用户对自己作业的内存使用情况有个正确的估计,错误的估计会导致吞吐量和延迟的问题,我们根据假设做了多种的实验。
本文是研究如何将Disaggregated Memory引入HPC的一个前导工作,用户如果能提供准确的内存使用数据,应该得倒奖励,奖励可以是优先级,并行作业数量,或者更大的分配核。

有一说一,这个论文的图,确实没看懂。


论文题目:PREP: Predicting Job Runtime with Job Running Path on Supercomputers
文章时间:2021年08月前
会议/期刊:ICPP 2021
作者背景: 西南科技大学,超算中心
笔记时间:2021年11月08日周一
论文地址:https://dl.acm.org/doi/abs/10.1145/3472456.3473521


利用作业的运行文件路径作为预测作业的一个参数,效果可以达到预测88%
随机森林才82%

future work,深挖作业日志提高预测准确率。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,294评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,780评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,001评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,593评论 1 289
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,687评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,679评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,667评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,426评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,872评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,180评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,346评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,019评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,658评论 3 323
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,268评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,495评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,275评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,207评论 2 352

推荐阅读更多精彩内容

  • ![Flask](data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAAW...
    极客学院Wiki阅读 7,241评论 0 3
  • 不知不觉易趣客已经在路上走了快一年了,感觉也该让更多朋友认识知道易趣客,所以就谢了这篇简介,已做创业记事。 易趣客...
    Physher阅读 3,414评论 1 2
  • 双胎妊娠有家族遗传倾向,随母系遗传。有研究表明,如果孕妇本人是双胎之一,她生双胎的机率为1/58;若孕妇的父亲或母...
    邺水芙蓉hibiscus阅读 3,699评论 0 2
  • 晴天,拥抱阳光,拥抱你。雨天,想念雨滴,想念你。 我可以喜欢你吗可以啊 我还可以喜欢你吗可以,可是你要知道我们不可...
    露薇霜凝阅读 1,213评论 1 2