《電子技術應用》
您所在的位置:首頁 > EDA與制造 > 業界動態 > 揭秘20000個VCS任務背后的“搬桌子”系列故事

揭秘20000個VCS任務背后的“搬桌子”系列故事

2021-04-14
來源:電子工程專輯
關鍵詞: 新思科技 VCS EDA

  新思科技(Synopsys)家的VCS,在半導體行業使用率極高,背景我們就不多說了。

  對經常跑EDA或其他算力密集型任務的用戶來說,在深度掌握本行業業務知識及熟練運用常見EDA工具以外,通常還需要在技能樹上點上一門技能——IT,就是怎么(順利)使用機器把手里的任務給(高效)跑完。

  他們的IT技能升級打怪之旅一般分為三個階段:

  第一階段:單機單CPU核,單任務

  第二階段:單機多CPU核,多任務

  第三階段:多機多CPU核,多任務

  據我們觀察,很多用戶都已經處在第二階段。

  但是,依然有部分用戶尚處在第一階段,比如我們今天的實證主角。

  我們之前的六篇實證都直接一步到位——上云后。

  HSPICE │ Bladed │ Vina │ OPC │ Fluent │ Amber

  今天我們看看上云前的幕后系列,又名:搬桌子的故事。

  用戶需求

  某IC設計公司運行EDA仿真前端設計和后端設計的分析任務,進行機電一體芯片技術的開發。現有機房設備較為老舊,共有8臺單機,需要同時服務數字和模擬兩個研發部門。

  隨著公司業務的發展,相關部門負責人幾乎同時反饋業務峰值時計算資源嚴重不足,排隊現象嚴重。

  實證目標

  1、fastone平臺是否能有效提升VCS任務運行效率?

  2、fastone平臺是否能有效提升本地機器資源利用率?

  3、fastone平臺是否支持大規模VCS任務自動化穩定運行?

  實證參數

  平臺:

  fastone企業版產品

  應用:

  Synopsys VCS

  適用場景:

  數模混合電路仿真

  系統:

  Red Hat Enterprise release 5.7(Tikanga)

  實證結果

  我們先來看看用戶自己跑20000個任務和我們來跑的效果:

  大規模任務驗證 20000個任務

  我們將本地機房的8臺單機構建為一個統一管理的集群,運行20000個VCS任務的時間是用戶自己所需時間的約1/50。

  3.png

  實證過程:

  1、用戶使用一臺單機C1運行20000個VCS任務,耗時40485分鐘;

  2、將本地機房的所有8臺單機構建為集群A,使用集群A運行20000個VCS任務,耗時809分鐘。

4.png

  用戶按常理推斷,本地機房共有8臺單機,將所有機器一起來運行大規模VCS任務的時間大概應該是使用一臺機器機耗時的6-7倍(理想值為8倍,但由于存在長尾任務,存在一定差異)。

  但實證中50倍的提升大大超出了他們的預期。

  中間發生了什么?

  回到我們開頭說的三個階段——

  第一階段:單機單CPU核,單任務

  單任務狀態下的單機單核,就是一個任務只在一臺機器上的一個CPU上跑。不管這臺機器其實有幾個CPU,反正就只用一個。資源利用率極其低下,可以說是暴殄天物。

  再細一點,這里其實還有個1.5階段:單機多CPU核,單任務。效果類似。

  假設給你幾個人(CPU核),完成一個叫做“搬桌子”的任務。

  單任務的處理方式分為單進程和多進程:

  單進程的處理方式是:

  不管你有幾個人,同一時間永遠只有1個人在搬整張桌子,其他人在圍觀。

  5.png

  多進程的處理方式是:

  先拆桌子。比如把一張桌子拆成4個零部件,分給4個人來同時搬,有的搬桌子腿,有的搬桌面等等,搬得最慢的人決定任務的完成速度。

  但是,哪怕你有8個人,一次也只有4個人在搬。

  搬完一張桌子再搬下一張,依次往復。

 6.png

  補充一個背景信息:2009年4月,新思科技就發布了VCS的多核技術,通過將耗時的計算處理動態地分配至多個CPU內核來突破芯片驗證的瓶頸,從而提高驗證的速度。

  也就是說,應用十多年前就支持單任務多進程了,現在這個技術的名字叫Fine-Grained Parallelism,FGP。

  7.png

  第二階段:單機多CPU核,多任務

  多任務狀態下的單機多核,就是多個任務能同時在一臺機器上的數個CPU上跑,受制于單臺機器的最大核數,目前最多也就96個核了。

  我們繼續講“搬桌子”。

  上一階段的多進程處理方式,存在一個明顯的問題。哪怕你有8個人,一次也只有4個人在搬。搬完一張桌子再搬下一張。

  這就很不合理了。

  于是我們在此基礎上改進了一下。

  在你有8個人的情況下,一張桌子4個人搬,我們可以同時搬兩張桌子啦。這樣可以明顯加快任務的完成速度。

  但是,單臺機器的總CPU核數就是上限了。

  8.png

  當然這一階段還是會存在一些問題,會出現有人突然跳出來跟你搶人或者你也搞不清楚哪些人現在有空來幫你。

  因為資源使用的不透明和缺乏有序管理,會出現不同人對同一資源的爭搶,任務排隊等現象。同時,你會發現資源利用率還是不高。

  不少用戶已經處在這一階段。

  我們看看從第一階段到第二階段的實際VCS驗證效果:

  應用并行化驗證

  400個任務

  對VCS進行多任務并行化處理后,一臺單機運行相同VCS任務的時間縮短為原先的15%-16%,極大提升了運行效率。

  實證過程:

  1、使用一臺單機C1(8核)運行400個VCS任務,耗時806分鐘;

  2、使用一臺單機C2(8核)運行400個VCS任務,耗時793分鐘;

  3、對VCS應用進行多任務并行化處理后,使用一臺單機C1(8核)運行400個VCS任務,耗時130分鐘;

  4、對VCS應用進行多任務并行化處理后,使用一臺單機C2(8核)運行400個VCS任務,耗時122分鐘。

 9.png

  第三階段:多機多CPU核,多任務

  多任務狀態下的多機多核,就是多個任務能同時在數臺機器的數個CPU上跑,這個我們稱之為集群化管理,一般都需要有調度器的參與。

  關于調度器的相關知識,看這里:億萬打工人的夢:16萬個CPU隨你用

  前面講到我們已經可以同時安排搬兩張桌子啦。

  但其實,如果你的機器足夠多,人(CPU核)足夠多,你完全可以同時搬更多的桌子。

  10.png

  這個時候,必然要面臨一個如何調兵遣將的問題。

  這么多機器,這么多任務,怎么順利一一配置、啟動、關閉,提高整體資源利用率,最好還能自動化管理等等。這就需要一點技術了。

  至于云上資源的大規模動態化調度和管理,要更加高階一點。

  在《生信云實證Vol.3:提速2920倍!用AutoDockVina對接2800萬個分子》中,我們最多調用了10萬核CPU資源對整個VS數據庫進行虛擬篩選。

  11.png

  當集群達到如此規模之后,手動管理是不可想象的。

  而且云上資源跟本地不同,往往是個動態使用的過程,有時候甚至要搶。

  更不用說還要考慮不同用戶在不同階段的策略和需求。

  我們看看從第二階段到第三階段的實際VCS驗證效果:

  集群化驗證

  400個任務

  由2臺單機構建的集群運行相同VCS任務的時間為單機的約60%,并實現了自動化資源管理。

  實證過程:

  1、使用一臺單機C1(8核)運行400個VCS任務,耗時130分鐘;

  2、使用一臺單機C2(8核)運行400個VCS任務,耗時122分鐘;

  3、將C1和C2構建為集群B,使用集群B運行400個VCS任務,耗時75分鐘。

  12.png

  最后,我們回顧一下,我們到底做了哪些事:

  應用并行化:從單任務到多任務

  fastone幫助用戶實現了應用并行化,可以充分使用一臺單機上的全部CPU資源,確保了最大的計算效率。

  資源集群化:從單機到集群

  fastone幫助用戶實現了集群化管理,讓多臺機器能夠并行化運行VCS任務,實現了數據、應用、資源的統一化管理。

  規模自動化:從400個任務到20000個任務

  用戶希望在面臨大規模VCS任務時,上述方案的穩定性能夠得到充分驗證。

  fastone幫助用戶充分驗證了20000個VCS任務場景下,能夠自動化規模化地調度資源高效完成任務,滿足用戶需求。

  到現在為止,我們成功幫助用戶從單機單任務單進程運行的階段大幅度跨越到了大規模任務自動化集群化運行階段。

  萬事俱備,下一步,上云。

  我們的前兩篇EDA云實證可以了解一下:

  《從30天到17小時,如何讓HSPICE仿真效率提升42倍?》

  《國內最大規模OPC上云,5000核并行,效率提升53倍》

  本次EDA行業云實證系列Vol.7就到這里了。

  下一期的EDA云實證,我們聊Virtuoso。

  請保持關注哦!

 

本站內容除特別聲明的原創文章之外,轉載內容只為傳遞更多信息,并不代表本網站贊同其觀點。轉載的所有的文章、圖片、音/視頻文件等資料的版權歸版權所有權人所有。本站采用的非本站原創文章及圖片等內容無法一一聯系確認版權者。如涉及作品內容、版權和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經濟損失。聯系電話:010-82306118;郵箱:aet@chinaaet.com。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
亚洲黄色天堂| 欧美亚洲视频一区二区| 国产精品久久久久久五月尺| 免费日韩视频| 另类激情亚洲| 狂野欧美性猛交xxxx巴西| 久久精品人人| 久久不射中文字幕| 久久精品99国产精品日本| 欧美一区二区三区四区在线| 亚洲欧美韩国| 欧美一级免费视频| 久久国产一区二区三区| 久久久噜噜噜久噜久久| 久久手机免费观看| 另类尿喷潮videofree| 欧美不卡一区| 欧美国产精品人人做人人爱| 欧美1区3d| 欧美精品久久久久久| 欧美激情精品久久久久久蜜臀 | 欧美电影免费观看大全| 免费在线观看日韩欧美| 欧美成人免费在线视频| 欧美日本不卡视频| 国产精品成人在线观看| 国产精品国产三级国产a| 国产精品成人国产乱一区| 国产精品久久久久久久久久尿| 国产精品久久久久久影视| 国产精品视频成人| 国精品一区二区三区| 亚洲福利国产精品| 亚洲精品视频在线观看网站| 99这里只有精品| 午夜欧美不卡精品aaaaa| 久久精品一二三区| 亚洲九九爱视频| 亚洲在线电影| 久久精品夜色噜噜亚洲a∨ | 国产精品狼人久久影院观看方式| 国产精品女同互慰在线看| 国产在线欧美日韩| 亚洲人午夜精品免费| 一区二区三区高清在线| 玖玖视频精品| 国产精品自拍网站| 欧美视频在线视频| 国产一区白浆| 亚洲七七久久综合桃花剧情介绍| av成人免费在线| 欧美专区一区二区三区| 99爱精品视频| 欧美在线999| 欧美国产日本| 国产精自产拍久久久久久蜜| 在线观看视频亚洲| 亚洲午夜av在线| 亚洲第一天堂av| 亚洲午夜av| 久久尤物视频| 国产精品va在线| 精品成人在线| 亚洲一区二区三区免费视频| 亚洲国产精品99久久久久久久久| 一本色道久久综合亚洲精品不 | 国产综合婷婷| 99国产精品99久久久久久| 香蕉久久一区二区不卡无毒影院 | 欧美在线亚洲在线| 欧美激情视频免费观看| 国产九区一区在线| 亚洲人成啪啪网站| 欧美在线www| 99精品欧美一区二区三区| 欧美一区二区三区四区视频| 欧美黄色网络| 国模精品一区二区三区色天香| 99伊人成综合| 亚洲日本理论电影| 久久久99国产精品免费| 欧美午夜精品久久久久久浪潮| 永久域名在线精品| 亚洲欧美国产日韩中文字幕| 99在线精品视频| 蜜桃精品久久久久久久免费影院| 国产精品剧情在线亚洲| 亚洲国产成人在线| 久久国产视频网| 午夜影院日韩| 欧美日韩综合不卡| 亚洲国产一区二区在线| 欧美专区日韩专区| 亚洲私拍自拍| 久久夜色精品国产亚洲aⅴ| 久久综合一区二区| 国产日本欧美视频| 一区二区欧美视频| 一区二区激情| 欧美大片免费看| 狠狠网亚洲精品| 欧美一级网站| 午夜老司机精品| 欧美午夜精品一区| 亚洲精品自在久久| 99精品热视频| 欧美国产日韩在线| 在线国产精品播放| 欧美一级黄色录像| 欧美一区免费视频| 国产酒店精品激情| 亚洲欧美一区二区在线观看| 亚洲一区精品视频| 欧美视频在线观看免费| 亚洲精品欧美日韩专区| 99视频有精品| 欧美美女操人视频| 亚洲乱码久久| 亚洲视频每日更新| 欧美午夜激情小视频| aaa亚洲精品一二三区| 中文在线资源观看网站视频免费不卡| 欧美—级在线免费片| 亚洲人成在线观看网站高清| 日韩视频永久免费观看| 欧美绝品在线观看成人午夜影视| 最新国产拍偷乱拍精品| 日韩一级裸体免费视频| 欧美日韩一区二区精品| 一本大道久久a久久精二百| 亚洲一区二区三区777| 国产精品久久久久久久久久免费看| 亚洲视频在线看| 午夜精品理论片| 国产日韩欧美精品在线| 欧美亚洲在线播放| 久久久久www| 一色屋精品亚洲香蕉网站| 亚洲片在线观看| 欧美精品国产| 一区二区三区日韩欧美精品| 亚洲欧美综合v| 国产亚洲欧洲997久久综合| 久久国产精品久久w女人spa| 麻豆国产精品一区二区三区| 亚洲国产综合视频在线观看| 在线午夜精品自拍| 国产精品丝袜xxxxxxx| 欧美在线观看视频一区二区三区| 久久久人成影片一区二区三区| 在线观看日产精品| 亚洲视频电影图片偷拍一区| 国产精品视频精品| 亚洲第一中文字幕| 欧美精品一区二区视频| 国产精品99久久久久久www| 久久精品噜噜噜成人av农村| 在线不卡中文字幕| 亚洲视频一区在线| 国产一区二区三区在线观看网站 | 欧美性猛交xxxx乱大交蜜桃| 亚洲欧美www| 老色鬼精品视频在线观看播放| 亚洲国产岛国毛片在线| 亚洲男同1069视频| 狠狠色噜噜狠狠色综合久| 亚洲精品一区二区在线| 国产精品福利在线观看| 午夜精品久久久久久99热软件| 久久精品国产一区二区三| 1000部精品久久久久久久久| 亚洲视频一区在线观看| 国产字幕视频一区二区| 一区二区三区国产在线观看| 国产日韩在线播放| 99精品热视频| 国产综合第一页| 亚洲伊人久久综合| 狠狠狠色丁香婷婷综合久久五月| 99在线精品观看| 国产真实乱子伦精品视频| 亚洲视频一区| 伊人成人在线| 午夜久久久久| 亚洲精品乱码久久久久久按摩观| 欧美在线影院| 亚洲狼人精品一区二区三区| 久久久久久97三级| 在线中文字幕一区| 欧美黑人在线观看| 欧美在现视频| 国产精品卡一卡二卡三| 亚洲乱码国产乱码精品精| 欧美日韩免费区域视频在线观看| 欧美一区二区观看视频| 欧美日韩一级黄| 最新中文字幕亚洲| 国产主播喷水一区二区| 亚洲欧美精品在线| 日韩午夜电影在线观看|