我们的龙芯2号--胡伟武(转载自中科大BBS) 发信人: chensun (无欲则刚), 信区: CS 标 题: 我们的龙芯2号--胡伟武 发信站: 瀚海星云 (2003年12月15日22:32:51 星期一), 站内信件 2003年10月16日深夜，喧嚣了一天的计算所北楼终于沉寂了下来，我独自坐在北楼105 房间忐忑不安地等待着。刚才还有郑为民和一个学生跟我在一起，几分钟前我派他们到后 面的芯片小楼取逻辑分析仪去了。与北楼隔着一个篮球场的芯片小楼里还有10来个课题 组的弟兄，他们都象我一样忐忑不安地等待着。 17日凌晨0点30分，楼道里传来了有节奏的脚步声，在空旷而寂静的楼道里显得特别有力 。脚步声越来越近，我的心一下子提了起来，咚咚的脚步声象敲在我的心上，因为我知 道，我们的狗剩2号回来了。 105房间的门被推开，张珩风风火火地闯了进来，手里抱着一个方盒子。他是我专门派 到上海去封装厂家取狗剩2号芯片回来测试的。我们小心翼翼地打开盒子，几十片狗剩2 号 芯片象等待检阅的士兵一样整齐地排列在专用的包装盒里。一个电话拨到芯片小楼，不 到两分钟，105房间就聚集了六、七个人，他们都是下午刚刚成立的联调组的成员。 我挑了几个芯片，在用万用表对芯片进行一些简单的静态测试后，从中选了一个芯片放 到子卡的插槽中盖好，并把子卡插到主板上。小心地按了一下电源开关，显示屏上没有 动静，心里一阵紧张。试了几次后，换一个子卡，放上芯片后插到主板上，一按电源开 关，显示屏一阵跳动，串串字符如约而至。我们一阵欢呼，刚才提到嗓子眼的心放回到 心窝里先。 在启动了一个简单的BIOS系统以后，开始启动LINUX操作系统，一切都很顺利。1点10 分 ，屏幕上出现了LINUX操作系统的登录提示符“login:”。在拿到芯片的40分钟后，刚才 等待时的紧张心情一扫而光。我们赶快打电话到芯片小楼告诉在那里等候的其他同学。 钟石强还给我的妻子发了个短信，今晚她也在等待我们的消息。几分钟后狗剩2号收到了 出世后的第一个祝福。 4点30分，狗剩2号通过了其他的测试。我们用装有狗剩2号的计算机在我们CPU组的内 部 BBS上灌了狗剩2号出世后的第一瓢水，并发了几封EMAIL。我决定狗剩2号的第一次联 调 先告一段落，拿出放了很久的硅谷的一个朋友送的一瓶XO在芯片小楼的会议室里每人半 纸杯庆祝了一下。喝完酒后大家兴致不减，根据事先的约定又打车到天安门广场看升国 旗并去毛主席纪念堂向毛主席报告。今年是毛主席诞辰110周年，我们这款芯片的名字就 叫MZD110。 6点25分，我们又一次站在天安门前的国旗杆下，看着红彤彤的国旗在国歌声中冉冉升起 。去年在接受《东方之子》节目采访时，他们曾问我在狗剩1号研制成功后看升国旗时心 里想什么，我那时真忘了想什么了。这次我试图去想一些有意义的事情，比如什么豪言 壮语之类的。可是面对国旗，脑袋里一片空白，只是在国旗猛地串上杆顶的那一刹那， 24小时前杨利伟走出神舟5号舱门冲大家挥手的画面突然出现在我脑海中，以至于在去前 门吃早饭的路上这个画面还久久浮现在面前，挥之不去。 在2002年9月28日龙芯1号的发布会上，李国杰所长曾经引用《易经》中的话说：“万物 生于有，有生于无”。如果说狗剩1号解决的是从0到1的问题的话，那么狗剩2号要解决 的是从1到10的问题，即狗剩2号的性能至少是狗剩1号的10倍以上。事实上这也是我们 在 申请中科院知识创新工程重大项目和863计算机软硬件主题重点项目时唐志敏提的指标。 在这两个项目厚厚的申请书和合同书中，我只记住了两个数字，一个是主频500MHz以上 ，一个是SPEC CPU2000的值达到300分以上。从承担项目之日起，这两个数字就象两个 紧 箍咒一样紧紧地箍在我的头上（我一直认为这个项目是863项目中立得最成功的项目之一 ，只用两个数字就把要做的事情表达得足够清楚了）。 从现在看来，主频500MHz以上还好办一些，下死工夫总是可以做到的，用0.13微米的工 艺更是容易做到。难的是SPEC CPU2000的分值达到300分以上。所谓SPEC CPU2000，就 是 一组国际公认的标准测试程序，用这组程序在目标机器上运行，根据实际运行时间算出 该计算机的运行速度指标。这种标准测试程序从SPEC CPU89、SPEC CPU92、SPEC CPU95 、到SPEC CPU2000已经发展了好几期。其中SPEC CPU2000覆盖的应用面最广，包括文 件 压缩、FPGA布局布线、编译器、组合优化、国际象棋、文字处理、计算机视觉、编程语 言、解释器、数据库、布局布线模拟器、量子动力学、浅水模型、三维势场求解、偏微 分方程、三维图形库、计算流体动力学、图象识别/神经网络、地震波传播模拟、计算化 学、数论/素数测试等等，光源代码就有上百万行。打分的标准是把这组程序在Sun公司 一台300MHz的四发射Untra Sparc II 上运行的时间做为标准运行时间，其分值为100分 ，其它机器运行时间跟标准时间相比算出相应的分值。一般来说，现在较流行的四发射 的主流RISC处理器象Alpha 21264、MIPS R12000、IBM Power III等在400MHz到500MHz 的 情况下SPEC CPU2000的分值可以达到300分左右，而Pentium III在800MHz时SPEC CPU20 00的浮点分值才200多分。狗剩2号要达到300分，至少要与1GHz以上的PIII或PIV的 性能 相当。因此，虽然做500MHz虽然也不容易，但更难的是SPEC CPU2000的分值达到300 分以 上。 提高处理器的性能，提高主频和优化软硬件结构不可偏废，光强调主频和光强调结构都 是不行的。就象要把100根木头从A地扛到B地，甲每10分钟一个来回，每次扛1根木头； 乙每20分钟一个来回，每次扛4根木头；丙60分钟一个来回，每次扛6根木头。我们不能 根据甲跑得快（主频高）就说甲的性能最高，也不能根据丙每次扛得最多（每拍执行的 指令多）就说丙的性能最高，性能是一个综合的东西。当然，还有其它要考虑的因素， 如甲乙丙三人每小时的报酬（处理器的功耗、面积）等。 虽然狗剩1号的成功对我们来说是一个巨大的进步，但有一件事我一直深引以为恨，那就 是狗剩1号的性能没有达到预想的目标。虽然主频不低，但跑起程序来比起类似结构的R ISC处理器以及相同主频的PII还有一些差距。SPEC CPU2000的分值也不高。我曾经整日 整夜地泡在机房运行各种测试程序，并试图通过软件优化的方法提高性能。虽然取得了 一些效果，但不理想。后来的性能分析表明，有些狗剩1号性能瓶颈其实完全是可以通过 简单的优化克服的，可惜当时项目推进得太快，没有时间做充分的性能分析和优化。这 件事使我极其郁闷，因此把性能分析不够作为狗剩1号设计过程的一个重要教训，并发誓 在狗剩2号的设计中要一血前耻。知耻近乎勇，后来狗剩2号步步为营的性能分析果真为 狗剩2号提高性能发挥了巨大作用。 在中科院领导对我们承担的龙芯2号重大项目进行立项审查的会上，李老师、唐志敏和我 在向院党组汇报后准备离开时，江院长追出来跟李老师说：“李院士，我就把宝压在你 身上了”。在863计算机软硬件主题专家对我们承担的龙芯2号项目进行立项审查的会上 ，我做完报告后，专家组组长怀进鹏老师曾声色俱厉地说：“胡伟武，这个项目是863计 算机软硬件主题最大的项目，完不成任务提头来见!”这两件事给我很大的触动，让我想 起上甘岭战役前夕彭德怀曾对秦基伟说：“我们要对朝鲜的历史负责”。 狗剩2号的设计在狗剩1号tapeout前就开始筹划，主要是唐志敏和我围绕我们申请的中科 院和863的项目进行调研并确立在2004年项目结束时SPEC CPU2000的分值达到300分的 目 标，并在此基础上确定64位结构和4发射的目标。根据项目目标及狗剩1号研制的经验和 教训，我们确定了狗剩2号研制的如下三条设计原则。 一是充分发挥结构设计优势和软硬件协同的设计原则。即通过处理器中各个层次的并行 性开发来提高性能。这些并行性包括指令级并行、数据级并行以及线程级并行。其中指 令级并行主要是四发射结构的实现，即在指令流水线的任何一个阶段每拍都执行四条以 上的指令。为了有效发挥多发射通路的效率，必须实现充分的乱序执行技术，减少指令 间的互相等待。数据级并行性的开发主要是通过SIMD的技术实现向量指令。线程级并行 性包括单处理器的多线程技术以及多处理器的多线程技术。狗剩2号在并行性开发上主要 开发指令级并行技术，并通过把浮点部件与媒体处理共用的方法实现数据级并行的SIMD 技术。软硬件协同主要指通过编译优化及硬件对编译器的支持提高性能，既不片面追求 复杂的硬件大包大揽，也不把沉重的优化负担完全压在编译器身上。编译器对提高性能 十分重要，我们曾有这样的体会：在同一台机器上，用不同编译器编译出来的同一个程 序，运行时间竟相差75%。 二是以物理设计指导结构设计的原则 首先，流水线的最大逻辑路径不是由体系结构设 计的需要来确定，而是由物理设计的要求来确定。即先确定每一级流水线的最大延迟并 在此约束下进行结构设计。其次，在做结构设计时，心中要有物理设计的概念，即要明 白相应的逻辑在物理上是什么样的。在狗剩2号设计过程中，结构设计人员至少做到网表 级。 三是设计和实现方法上稳扎稳打的原则 首先，重视Cycle-by-Cycle的C模拟器的设计并 把C模拟器作为详细结构设计的文档是我们在狗剩1号开发过程中形成的一条最重要的经 验，即“可执行的结构设计”的概念。在设计初期就通过充分的仿真与验证不仅不会影 响进度，而且会加快进度。此外，狗剩2号的功能设计和物理设计也分成几步。第一步， 还是采用标准单元设计，只在很有限的局部做全定制（如寄存器堆），主频200-300MHz 以上，功能上不实现二级CACHE，争取尽快完成流片。第二步，功能上增加二级CACHE 接 口或/及DDR接口等，物理设计上使用更多的宏单元，但设计方法还是基于标准单元的方 法，主频在300-400MHz以上。第三步，功能上增加对多处理器系统的支持，在更多的地 方使用全定制单元或使用全定制流程，主频争取在400-500MHz以上。狗剩2号最后的流片 将以全定制为主。 狗剩2号的设计包括结构设计、逻辑设计以及物理设计三个阶段，这三个阶段互相重叠， 其中结构设计阶段和狗剩1号的设计也有所重叠。 狗剩2号的结构设计断断续续地进行了好几个月。刚开始是在2002年四、五月份在进行狗 剩1号物理设计的同时对狗剩2号的系统结构进行了初步的考虑。在对市场上的主流处理 器如Alpha 21264、MIPS R10000、Ultra Sparc III、Power III、HP PA8700、PIV、IA 64等及学术界的主要工作进行调研的基础上基本确定了狗剩2号的寄存器重命名、动态调 度以及运算部件的架构。到六、七月份随着狗剩1号物理设计和系统开发工作的展开，狗 剩2号的结构设计几乎停了下来。那时候我们组一共只有二、三十号人，很多人员的工作 都是重叠的，根本没有力量同时做两件事情。 在2002年7月中旬狗剩1号tapeout之后，利用等待芯片回来的时间把狗剩2号的结构设计 再次提上日程。7月15日研究生部的靳晓明老师打电话叫我到在四川广元召开的研究生学 术研讨会上做个特邀报告，本来应该是徐志伟老师做的报告，徐老师临时有事去不了因 此派我救场。唐志敏已经告诉靳老师我刚tapeout一个芯片，应该有空，所以推也推不掉 。开完会后还要去九寨沟，需要三、四天才能回来。我走之前临时决定把狗剩2号的部分 设计人员带到广元，准备在路上对狗剩2号的结构进行讨论。我和中科院研究生院的两位 老师一起坐火车头天走，安虹老师、张福新和范东睿坐飞机第二天走，几乎同时到的广 元。那时候我女儿正在放暑假，我爱人在狗剩1号tapeout之后刚到一个公司上班，因此 我把6岁的女儿也一起带上了。 后来的事实证明我临走前做的决定是十分正确的，在广元和九寨沟的几天效率极高，基 本确定了狗剩2号的结构框架。那几天我们白天根据会务组的安排活动，晚上讨论狗剩2 号的结构，并且根据讨论结果形成狗剩2号结构设计的初步文档，每天都到凌晨一、二点 。由于处理器的寄存器重命名以及动态调度结构已经基本确定，因此讨论的重点是取指 和访存部件的结构。 在从广元去九寨沟的路上我和范东睿坐在汽车的最后一排讨论狗剩2号的取指和译码部分 的结构，汽车在路上颠簸了一整天，我们也讨论了一整天。取指与译码部分的设计空间 很大，包括采用何种转移猜测算法、多发射情况下如何消除转移指令后面的延迟槽、取 指及转移猜测是以指令为单位还是以发射块（四条指令）为单位、转移猜测是在取指还 是在译码阶段进行、修正BHT和BTB的时机、如何提高指令CACHE的性能、以及指令 TLB和 数据TLB的关系等。其中如何消除转移指令后面的延迟槽讨论的时间最长，主要是对传统 的BTB方法和Alpha 21264中采用的line prediction方法进行反复的比较和分析。我从小 就喜欢坐比较颠簸的汽车，汽车越颠精神越好，范东睿精神也不错，因此一路上效率极 高。晚上8点汽车到达九寨沟时，狗剩2号的取指部分架构已基本确定。 访存部分的结构比取指部分复杂。一方面，它是与操作系统关系最密切的部分，其功能 是否完善是支持通用操作系统的关键因素；另一方面，它是提高处理器性能的核心部件 之一。如果CACHE访问效率不高，流水线的其它部分设计得再好也没有用。这一点在狗剩 1号中我们已经有所体会。学术界与企业界都对如何提高访存性能作了大量研究，设计空 间很大，核心问题包括如何降低流水线延迟、如何提高CACHE命中率和降低由于CACHE 不 命中引起的等待延迟、以及如何解决访存的RAW、WAR、和WAW相关等等。在随后的几 天中 ，我们对这些方面进行了反复的权衡和讨论。直到在回北京的火车上才有比较粗的思路 。 有意思的是，一路下来，我女儿看我们的工作，耳濡目染，对CPU设计也有了自己的心得 。直到今天我问她什么是CPU，她还说“CPU就是在一张纸上画些方框，然后用线和箭头 把这些方块连起来，再涂上点颜色，写上一些字，最后一烧，烧出一个亮晶晶的小方块 ”。最近我女儿经常在用狗剩2号做的Linux PC上玩游戏。我告诉她这就是我们在九寨沟 画的方框“烧”出来的，她感到很诧异。 在2002年8月10日狗剩1号首片调试成功之后，狗剩2号的设计工作又慢了下来，全组的 主 要力量放在了狗剩1号的系统开发上面。虽然由于狗剩1号的系统开发和性能分析耽误了 一些时间，但我自己在狗剩1号上玩了近一个月后有很大的收获。尤其是对性能和主频的 关系有了更深入的认识。比如，对于有一些访存密集的应用，主板频率83MHz而CPU频率 250MHz时的性能还不如主板频率100MHz而CPU频率200MHz的性能。现在想起来，一 个处理 器的性能就象一个城市的交通系统的吞吐率，可能由于某几处的堵塞而影响整个城市的 吞吐率，只要把这几处疏通了，虽然花的力气不大，但吞吐率会极大地提高。 2002年9月28日狗剩1号发布会后，狗剩2号的设计工作全面展开。10月2日，我带着张 福 新和李祖松到母校中国科大利用十一长假进行狗剩2号的C模拟器封闭开发，顺便向母校 报告一下我们的工作。在科大借了半间原来的库房呆了一个多星期，基本完成了C模拟器 的代码编写。在对结构进行细化的过程中发现了好多原来没有考虑到的问题。对于这些 问题我们有时候争辩得很激烈。例如在转移猜错取消时需要判断正在执行的指令中哪些 是该转移指令前面的，哪些是该转移指令后面的，张福新和李祖松的观点是参照MIPS R 10000使用的方法，而我觉得那个方法太麻烦，希望有更简洁的方法。我们一直争论了两 天，在争论的过程中互相启发，终于找到了一种简洁而高效的方法。 2002年10月8日回北京时狗剩2号的C模拟器已经基本成型。我们继续在我的办公室进行 半 封闭式的开发，主要是继续完善C模拟器并开始调试。那段时间我们每周只有二、四、六 晚上休息，其它时间都在调试。调试过程中也调动组里的其它人写了不少测试向量。11 月中旬在C模拟器中成功启动LINUX操作系统，开始对C模拟器进行性能优化以加快模拟 速 度并用C模拟器对狗剩2号的结构进行性能分析。 在此期间以及以后的几个月内，我们在C模拟器上运行了完整的SPEC CPU2000的几乎所 有 程序以及八十年代比较流行的性能测试程序dhrystone和whetdstone等，对狗剩2号的性 能进行初步的分析。在运行上述程序过程中还发现了不少设计上的bug和考虑不周的地方 。印象比较深刻的是由于访存操作的乱序执行导致两个或多个访存操作之间互相替换CA CHE块并引起死锁。另外一件印象比较深刻的是MIPS指令系统规定转移指令的延迟槽指 令 不能是转移指令，否则处理器的行为不确定，但我们在C模拟器中发现在我们的设计中如 果转移指令的延迟槽指令也是转移指令时也会导致处理器死锁。虽然这是由错误的程序 引起的，但也是结构设计考虑不周的地方，对于错误的程序我们可以给出错误的结果， 但不能把机器搞死。 由于张福新和李祖松的加入，狗剩2号的C模拟器比狗剩1号完善很多，包括checkpoint 在 内的很多功能都加到模拟器中，此外，C模拟器的运算速度也大大提高了。张福新还顺手 开发了不少小工具。 2002年11月底，我觉得C模拟器已经基本稳定，就召开了狗剩1号总结以及狗剩2号部署 的 会议，全面部署狗剩2号的RTL设计工作。 2002年12月初我们组建了RTL设计的队伍，由于我们人手有限，RTL编写的人员都是从 各 组抽调的，我自己也负责寄存器重命名和几个队列模块。狗剩2号的RTL设计大致可以分 为三个阶段。 第一阶段为设计阶段。从12月初开始大家花了约半个月的时间了解狗剩2号的结构，同时 我开始进行顶层模块的设计，主要是每个模块的互连关系、接口总线及触发器的定义。 12月28日完成顶层模块的设计并启动各模块RTL的编写。由于有Cycle-by-Cycle的C模 拟 器作为参照，2003年1月14日就完成所有模块RTL的编写并编译通过，1月21日成功运 行第 一条指令。在此基础上，经过三天三夜的努力，到1月25日成功运行狗剩1号中使用的包 括所有MIPS指令的一段功能测试程序。由于2002年春节没有放假，因此1月25日后全组 放 假。 第二阶段为联调阶段。春节后开始在RTL仿真环境上运行LINUX操作系统。经过连续一个 多星期的努力，2月18日成功运行LINUX操作系统。在狗剩1号的联调过程中，在运行 LIN UX后，整个流水线的设计就基本上没有发现什么问题，只发现了部分与浮点有关的问题 。但在狗剩2号中，运行LINUX后试图运行whetdstone时碰到了巨大的困难，甚至一度出 现停滞不前的情况。因为错误出现在调用动态库的过程中，而且没有动态库的源代码无 法调试。不得已我组织RTL编写人员于3月7日和8日进行了两天的封闭式自查。通过自 查 发现了大大小小20多个错误，使运行whetdstone的联调取得突破性的进展。后来我们又 进行了两次封闭自查，只发现一、二处小错误。 第三个阶段为调整和优化阶段，这个阶段是狗剩2号逻辑设计的关键阶段。与联调阶段相 比，优化阶段发现的bug较少，但根据对RTL进行综合以及用C模拟器进行性能分析的结 果 对整个设计的延迟、面积、性能进行了持续的优化。通过初步的优化，狗剩2号的延迟降 低了一倍多，面积降低了30%以上，相同频率的性能提高了30%以上。在这个阶段的每一 周都充满了激动人心的改进，深刻体会到精益求精的道理。孔子说“食不厌精”，处理 器设计更是如此。用1%的工夫可以完成一个正确的设计，但需要用99%的工夫来优化它。 在狗剩2的RTL优化过程中，我们总结了三条经验。第一条是精益求精的经验。做一个正 确的设计和做一个精品的设计是有很大区别的。为了做到精益求精，思想上要永不满足 ，执着改进。碰到复杂的问题，不能满足于用复杂的方法来解决，要努力把问题简单化 再用简单的方法来解决。第二条经验是在执着于细节的理解和把握的同时退后一步进行 的全局的观察和思考是十分必要的。在狗剩2号的优化中有很多都是在项目的推进过程中 退后一步进行文档整理、看文章、或封闭自查时得到的启示。对设计的微观了解和宏观 把握是不可偏废的。如果对设计的细节不做一定的了解，则在整理文档或看文章过程都 比较虚，不会有灵感出现；反之，如果过于执着于细节，则可能只见树木，不见森林， 忽略了一些大的改进。第三条经验是以事实为依据的经验。对设计进行持续的性能分析 、物理综合、以及仿真验证为狗剩2号的改进和改正提供了大量了事实依据。在根据事实 进行设计和改进时，一定要在大量的事实和数据的基础上（小量的、不具有代表性的不 行）对事实进行深入的分析，弄清楚隐藏在这些事实后面的、本质的东西，这样做的设 计和改进才是最优的。 与RTL设计和验证同时进行的是FPGA验证环境的建设。在这个方面我犯了个错误。由于 觉 得有了狗剩1号的FPGA验证的经验，狗剩2号的FPGA验证应该没有问题，因此只让范 宝峡 一个人负责FPGA验证工作。没想到由于狗剩2号的规模较大，设计也更加复杂，导致FPG A验证困难重重。主要困难是由于在一片FPGA中放不下，需要多片FPGA，而且多片FPGA 之 间互连信号太多需要在每片FPGA接口处进行倍频传输。此外由多发射引起的多端口寄存 器堆也难以在FPGA中实现。到4月下旬我才意识到FPGA验证方面投入的力量很不够并 加强 了这方面的力量。直到6月下旬狗剩2号的第一个芯片tapeout之前的半个月，才完成FPG A验证工作并通过FPGA验证及时地发现了设计中的一个错误。 在进行处理器结构和逻辑设计的过程中，其它方面的工作也在同时展开，包括王剑和郑 保建带领的狗剩1号系统的继续开发以及狗剩2号软件环境的开发，郑为民带领的狗剩2 号 主板的开发，许彤、赵继业、钟石强、张珩负责的物理设计和验证方法的总结和研究等 等。 就在狗剩2号的RTL设计过程中，SARS在北京肆虐，并给我们极大的考验。那时候所里 的 政策是所里不统一放假，但各个部门可以根据自己的具体情况放假。我和唐志敏商量后 决定我们采取一定的预防措施并适当减轻工作强度。我们要求凡是乘坐公共交通系统上 下班的都不来上班，晚上9点前必须下班，每天的中饭和晚饭由室里统一安排在办公室吃 。至于外界的来访，所里早就不允许进入北楼了。此外，所里和室里都给我们发放了有 关的预防药物，我们自己也买了一些。在这段日子里，虽然我们的进度被迫放慢了一些 ，但依旧不断地向前推进。我在为全国人民面对灾难时众志成城战胜非典的精神所鼓舞 的同时，也为全组在这么困难的情况下坚守岗位所感动。 2003年3月份我们开始部署狗剩2号中用到的一个9个端口的寄存器堆的全定制设计。为 了 保险，我们部署了两套方案来设计寄存器堆。首选方案是请一个大公司帮我们做这个寄 存器堆，同时作为与中科院微电子中心的合作请微电子中心设计同样的寄存器堆作为备 选方案。由于首次流片主要是对设计的正确性和结构性能进行验证，因此首次流片除了 寄存器堆外还是用ASIC的设计方法，并准备用中科院EDA中心的Synopsys工具进行布局 布 线以减少购买EDA工具的费用，因此在5月份之前物理设计组的人员也对Synopsys的工具 进行了进一步熟悉。 2003年5月份开始狗剩2号的物理设计正式展开。从5月初到6月中下旬，我们对使用的 方 法和流程进行了反复的试验、比较和确定，尤其是关于是否使用层次化设计方法、使用 何种Wireload Model、以及Floorplan的方案等进行了反复的试验和尝试，并最后确定方 法和流程。到6月底时确定了布局布线的方案并基本完成了布局布线，与流片厂家TSMC 联 系好准备在7月10日前tapeout。本来一切都在“掌控之中”，但随后发生的两件事情却 大大出乎我们的意料。 第一件事情是在6月底完成FPGA验证平台建设后，在用该平台运行SPEC CPU2000程序 进行 性能分析时有一个程序的浮点结果有时正确有时错误。由于其它程序都运行正确，而且 操作系统对虚地址CACHE支持部分还有bug，因此刚开始我没有认为RTL有问题。7月2 日下 午，张福新在机房中说了一句话：“我觉得还是RTL有问题”，这句话使我心烦意乱，放 下正在看的布线工具文档，决定要把这个事情搞清楚。在随后的几十个小时中，我们使 用FPGA验证、C模拟器、以及RTL仿真对这段出错的程序进行追踪。终于在7月4日早 上找 到了一个RTL的bug。好在问题只涉及局部的设计，我们修改完RTL后通过手工修改网表 花 了一天就完成了ECO的布局布线。 一波未平、一波又起。刚想歇会儿，负责全定制寄存器堆仿真的王林楠报告说寄存器堆 不能正常工作。我刚开始不相信，因为为我们设计寄存器堆的C公司是业内非常有名的大 公司。但不同的仿真结果都说明寄存器堆有问题。我们花了两三天才说服C公司的设计人 员认识到设计错误并且改正过来。此后我们又对寄存器堆做了更多的仿真，并跟一个工 具的bug斗争了几天几夜。在此期间，微电子中心的黄令仪老师给了我们极大的支持，否 则我们不会这么快对寄存器堆的设计有深入的了解。 由于这两件事情的发生，到7月14日我们终于把狗剩2号的第一个设计tapeout到TSMC 时， 我们已经连续在机房不分昼夜地干了十几天。但由于在临tapeout前曾经发现寄存器堆设 计的问题，因此tapeout之后也不敢松懈，继续对寄存器堆进行分析和仿真。由于EDA工 具对较大规模的模拟电路没有有效的支持，主要依靠设计者的经验，我们也请一些电路 设计高手帮我们进行分析。经过一个多礼拜心惊肉跳的检查，在排除了一系列可能存在 的问题后，最后一个关于电源地规划的问题成为我们关注的焦点，也成了我在此后的几 十天中的一块心病。设计者似乎在这方面有疏忽，在最离谱的地方，几十毫安的电流只 用了0.28微米的地线。我们与C公司的工程师联系时，他们觉得没有问题，反而说过多的 电流会通过衬底流掉。这时候我们在很多高手的指点下已经对全定制设计有所了解，觉 得这个问题比较严重，因此在与C公司反复交涉得不到他们的积极配合后决定起用备份方 案，再做一个流片。刚好黄老师她们做的寄存器堆也已经完成了。我们把已经tapeout的 第一个芯片叫做狗剩2号的A方案，把准备做的叫做B方案。 在我跟李老师和唐志敏提出再做一个流片后，他们提出这次可以在SMIC流片，因为刚好 Artisan为SMIC做的库在6月份发布了。事实上，李老师在去年就提出狗剩2号在SMIC 流片 ，我不干。这次我也是不大愿意，因为我那时对SMIC不了解。李老师说，我们自己希望 别人支持民族产业，用我们的芯片；而我们自己不支持大陆厂家，怎么行。我还是不愿 意。后来有一次在所里培训时碰到李老师又说起了这件事。他说：“不管SMIC的工艺怎 么样，总得有人去试，大不了不成功，下次再来”。我说：“要的就是您这句话”。因 此就定下来8月份在SMIC流片。 我们在7月30日下午拿到SMIC的库，那时侯离tapeout只有两个星期了，而且SMIC的库 还 存在不少问题，我们不得不一边发现并修改库的bug一边把物理设计向前推进。这真是做 得最辛苦的一次物理设计，连续的熬夜搞得我们吃饭也没胃口，每天只在晚饭时吃一顿 。室里的刘凤芹老师看我们不去食堂吃饭，每天早上都熬一些紫米粥来给我们喝，我爱 人有时候晚上也给我们熬些鱼汤什么的。8月10日下午布完线后心里塌实了一些，我和钟 石强、杨旭去四环志新桥边上的一个粥铺吃晚饭，才觉得饿坏了。吃完后数数桌上竟有 17个空盘子，出来时撑得腰都弯不下来，三人一路走回中关村。 布完线后我们又根据分析的结果做了些手工调整修复信号完整性问题和进一步降低延迟 ，并修复了DRC和天线的问题。到8月12日中午LVS经过几次修改也基本通过，我们觉 得差 不多了。那天正是农历七月半，因此在加上guard ring后趁计算机做最后的LVS检查时我 和钟石强、杨旭去天安门广场瞻仰毛主席去，可惜那天下午纪念堂没开，我们只好绕纪 念堂一圈回来，路上猛然想起今年是毛主席诞辰110周年，于是约定把明天tapeout的这 个芯片的起名叫MZD110。 回到所里时没想到刚才LVS运行的结果还是有错。于是赶快对刚加的guard ring进行检查 。guard ring是围绕芯片最外边的一圈保护环，奇怪的是加上guard ring后LVS检查就显 示芯片里边的逻辑有错，去掉guard ring后再检查芯片里边的逻辑又没错。那天晚上一 直在找这个问题，黄老师也跑过来帮我们一起找。第二天天亮后就要tapeout了，但一直 到后半夜还搞不定。眼看时间一分一秒地过去，真是又困又累又着急，几乎要放弃。快 天亮时王林楠重做的guard ring做好了，又折腾了几次LVS检查终于通过，这时候清晨的 阳光已斜斜地照进机房。把文件传给SMIC后我们又取回来再做一次LVS和DRC。计算机 在 运行时，我和杨旭斜靠在椅子上等待。杨旭说：“昨天晚上真怕睡着，我有时候靠在椅 子上歇一会儿，看见你们躺下了就赶忙起来，怕咱们三人都睡着了就不知道睡到什么时 候了”。这句话让我十分感动，因为昨晚最困的时候我自己也是一直用这个念头强撑着 不敢闭眼。那时候我们已经连续十几天没有正常休息而且莫名其妙的问题搞得我心力交 瘁，我第一次感到人的体能是有极限的，人的精神是会崩溃的，真想一觉睡过tapeout的 时间算了。我仰头看着天花板，好不让杨旭看见我的眼泪，很动情地说：“杨旭，你有 这样的责任心，以后在我们这里肯定前途无量”。杨旭是刚从微电子中心毕业后到我们 这里来工作的，他还没有到所里报到，就先来跟我们一起苦熬。 我经常把我们课题组比做一个硬骨头连队，把自己比做连长。在狗剩1号流片成功后，我 这个连长得到了很多本来应该属于全连的荣誉，包括获得“中国青年五四奖章”并受到 总书记的接见，而每天跟我一起冲锋陷阵的兄弟们什么也没有。我真是愧对他们。 去年在狗剩1号tapeout之后，我曾经说，我觉得三个都能成，如果两个成功也可以接受 ，如果只有一个成功我会觉得比较失败，如果全部不成功那就没有天理了。但狗剩2号t apeout之后，我对A方案和B方案都没有必胜的信心。但不管最后结果怎么样，有两点是 肯定的。一是全组已经尽了最大努力，Godson-2的设计比Godson-1辛苦得多，难度大得 多。在狗剩1号发布会后狗剩2号的工作才全面铺开，10个月后我们就完成了这么复杂的 设计，没有全组兄弟们玩命的工作是不可能做到的。二是即使流片不成功，我们已经有 了很好的基础，以前的至少90%的工作没有白费，即使这次不成以后总会成功的。 9月5日下午我在丝毫没有准备的情况下收到了狗剩2号的A方案的芯片，当晚我组织了联 调，虽然在加电后很快就能够启动一个简单的BIOS系统，但系统运行得很不稳定。在连 续三天的调试后，我们虽然得到了一些有用的结论，如验证了跨时钟域的信号握手机制 ，但一直无法让系统稳定运行，因此我决定终止继续联调并给李老师和唐志敏发EMAIL报 告了这一情况。 虽然由于寄存器堆的问题我已经对A方案的流片不抱太大的希望，但真正面对这个结果时 还是很难受。那阵子我经常坐在机房里，痴痴地看着寄存器堆的版图发呆；或者独自呆 在办公室，想想过去一年中我们在实验室里度过的日日夜夜，狗剩1号发布后我们立即马 不停蹄地展开狗剩2号的设计甚至在非典期间也不敢松懈。狗剩2号的设计比狗剩1号复杂 得多，连续的加班也惨烈得多。在这段日子里，我自己每周的工作时间都在80小时以上 ，而课题组的不少同学比我还多。多少次为了一个小问题而夜不能寐，多少次为了一个 小细节而殚精竭虑；每一个进步的脚印都充满了汗水，每一点进展都是心血的凝聚。竟 得到这样一个结果，心里十分难受。 我和唐志敏十几年的兄弟，基本上是心意相通的，点滴的想法我都跟他讨论，点滴的进 展和挫折他也都知道，有些大的决策一起做出。因此，A方案流片的失败，我跟他还是坦 坦然的。虽然李老师见到我象没事似的（也许他觉得这样会让我少些压力），但这样让 我更不安，本来我希望他骂我一通或者安慰我一下，可惜没有。这段日子我觉得最对不 住的还是邓书记。在我们研制狗剩2号的日子里，她给了我们很多的特殊照顾，包括我们 的办公环境以及我自己和课题组里员工和学生的生活条件，我一直说书记是我们的活菩 萨。因此这段日子我自己都觉得不好意思见她，有时候在路上碰到，我就远远地绕开走 。 由于狗剩2号A方案的流片失败，我们更加迫切地等待B方案流片的结果。这种等待有时 候 让我坐卧不宁，必须时时刻刻地找事情做心里才好受一些。因此在这个阶段我们对狗剩 2号B方案的结构和RTL继续进行优化（真算是化悲痛为力量）。不仅延迟又降低了0.5ns ，而且通过对存储层次的改进，相同主频下性能也提高了很多。 在SMIC完成流片后，我们得到了封装厂家的大力支持，以最快的速度完成了封装。 我又派专人去上海立等芯片的封装结束并把芯片直接取回来，这种在煎熬中等待的日子 我是一刻也不想过了。好在天道酬勤，在拿到芯片的40分中内我们就用狗剩2号把操作系 统启动了起来。此后，我们又化了大约三个礼拜针对狗剩2号虚地址CACHE和猜测执行的 特点把操作系统搞稳定。 现在，基于狗剩2号的Linux-PC已经稳定运行了一个多月。目前的狗剩2号最高频率为30 0MHz，功耗1W-2W，成品率约为80%左右。在性能方面，在联调的第一天我们只把狗剩2 号 的主频调到133MHz时已经明显感觉到比266MHz的狗剩1号还要快很多。狗剩1号不能 胜任 的许多应用，包括流媒体的软解压、GNU 2.4的支持、Mozilla浏览器、Open Office办公 软件等重量级的应用，在狗剩2号中都能比较流畅地运行。尤其是流媒体的软解压，我曾 经化了三天三夜进行软件优化来提高狗剩1号软解压的效果，但最后还是差一点；把狗剩 1号勉强能软解压播放的一个mpeg文件在200MHz的狗剩2号上播放，只要23%的CPU。 而对 于标准的MP3播放，狗剩2号只要不到1%的CPU就应付裕如了。通过使用SPEC CPU2000 对狗 剩2号的性能分析表明，相同主频下狗剩2号的性能已经明显超过PII的性能，是狗剩1号 的3-5倍。 我曾经终日坐在用狗剩2号做的计算机前，玩着各种游戏，使用各种重量级的软件来感受 狗剩2号的性能。虽然对于有些大型的应用软件还感到有些迟钝，但我们的狗剩2号已经 明显表现出她作为PC机中使用的CPU的资格和风范。每当我在狗剩2号上玩着LINUX PC 中 的各种游戏，想想一年前玩狗剩1号时觉得性能不理想时的郁闷心情，真是我这一年来最 爽的体验。 狗剩2号的性能提高主要来自先进的结构设计，包括四发射和乱序执行结构的设计。而乱 序执行的关键技术是狗剩2号结构设计的重点和难点，四发射的RISC结构如果没有乱序执 行技术的支持是发挥不出效率的。例如典型的定点程序中平均每六、七条指令就有一条 转移指令，意味着在四发射结构中每两拍就有一条转移指令。如果等转移指令的目标地 址确定再进行后面的取指，意味着每取两拍指令就得等五、六拍甚至更多才能继续后面 的取指。又如，做一个简单的加法需要两个操作数，而如果这两个操作数都需要从内存 中（即主板上的内存条）取回来，那么在做这个加法之前，需要至少上百拍的时间为这 个加法准备数据。指令乱序执行的核心思想就是减少各种相关引起的等待，充分发挥处 理器的效率。主要做法包括：（1）转移猜测，即在转移指令目标尚未确定的时候，根据 过去转移指令执行的历史猜测该转移指令的转移方向和转移目标，并根据猜测的结果进 行后续指令的取指，为处理器提供连续稳定的指令流。如果最后发现猜测错误，则取消 猜错的转移指令后面的指令。（2）动态调度，即在前面的指令由于操作数未准备好而等 待时，后面的操作数已经准备好的指令可以越过前面的指令先执行。（3）寄存器重命名 ，即指令运算后先写到一个临时的寄存器，等确定该指令不会被取消后再写到真正的目 标寄存器中去。这样做的好处除了便于前面指令发生例外或转移猜错时取消外，还避免 了由于两条指令写同一个寄存器时的等待。 此外，访存指令的乱序执行又有新的特征。除了通过增大CACHE和对CACHE进行有效的 组 织尽量提高CACHE命中率并降低CACHE访问的延迟外，还需要对访存指令进行乱序执行 以 提高效率。访存指令乱序执行的关键技术包括：（1）Non-blocking技术，即在前面的访 存指令由于CACHE不命中进行长延迟的存储访问时，后面的指令可以继续访问CACHE。 （ 2）Memory Disambiguation技术，即在存数和取数指令都乱序执行的情况下，保证取数 指令都能取回它前面的最近一条对同一地址的存数指令所存的值。比如如果一条取数指 令在一条存数指令之后且两条指令的地址相等，但取数指令先访问CACHE，也要保证取数 指令取回该存数指令的值；又如如果一条取数指令在一条存数指令之前且两条指令的地 址相等，但存数指令先访问CACHE，也要保证取数指令取回原来CACHE中的值，而不是 存 数指令新存的值。（3）Load Speculation技术，即在取数指令访问CACHE后，它前面的 存数指令地址还没有确定（即取数指令从CACHE中取回的值有可能是错误的），先把取数 指令从CACHE中取回的值送给后续的指令用，如果后来发现它前面的存数指令和该取数指 令访问的是同一个单元，再取消该取数指令后面的指令。（4）Write Buffer技术，由于 存数指令也是乱序执行的，存数指令所存的值不能立即写到CACHE或内存，而是要根据存 数指令在程序中的次序写到CACHE或内存。 在乱序执行的结构中，虽然指令执行是乱序的，但开始和结束是有序的。指令在译码和 寄存器重命名后就放在一个有序的队列中，由该队列来记录每一条指令的执行阶段并有 序地结束指令。即指令在流水线中是有序进入、乱序执行、有序结束。 狗剩2号的主要结构特点包括，64位设计，7-10级流水线，包括取指、译码、重命名、发 射、读寄存器、执行写回、提交等，其中乘除、浮点操作、以及访存操作在执行写回阶 段需要多拍。四发射结构，最多可以有64条指令乱序执行。共有5个功能部件，包括定点 ALU1（完成定点加减、逻辑、移位、转移），定点ALU2（完成定点加减、逻辑、移位、 乘除），浮点ALU1（完成定点加减、转换、转移），浮点ALU2（完成乘除、开方），以 及访存部件（完成访存、系统管理、数据传送）。通过对浮点指令fmt域的简单扩充，浮 点部件可以执行完整的定点指令以及4路SIMD的媒体指令。在乱序执行方面，转移猜测使 用混合预测+Gshare + BTB + RAS的转移猜测方式；通过物理寄存器到逻辑寄存器映射进 行寄存器重命名，定点浮点寄存器堆各为64项；动态调度方面定点和浮点保留站各16项 ，Reorder Buffer为64项。 在存储管理方面，TLB为64项全相联，每项两页，页大小在4KB-4MB之间可变。此外， 有 一个独立的8项的指令TLB是数据TLB的子集。与狗剩1号一样，在TLB中增加可执行 位，防 止缓冲区溢出攻击。数据CACHE和指令CACHE各为32KB，二路组相联。最多允许32个 访存 操作的Non-blocking访问，访存相关在访存队列中通过全相联的查找解决，避免了象Al pha 21264或MIPS R10000中碰到访存相关时需要重新发射。实现load-speculation，允 许前面的store操作未确定的情况下执行load操作并返回结果。Cache失效时实现关键字 优先访问，以减少访存等待，Uncached操作实现uncached accelerate算法加速I/O访问 。 目前的狗剩2号只是我们所承担的项目的阶段性成果。它的作用主要体现在四个方面。一 是对目前的处理器核设计进行验证；二是用于进行性能分析以及对性能分析方法的改进 ；三是验证新的物理设计方法和生产厂家；四是提前提供软件开发平台，为LINUX PC的 正式推出做好准备。现在看来，这几个目的都达到了。 我们的下一步目标是在目前狗剩2号的基础上把性能再提高到现在的3-5倍，并利用明年 完成的狗剩2号做一台每秒运算一千亿次的计算机。我还是博士生时唐志敏曾经带我到中 科院网络中心去算题，有一次他隔着玻璃指着一台计算机对我说，这台就是从日本引进 的计算机，现在系统管理的权限还在日本人手里，增加一个用户都要它们批准，什么时 候我们自己做一台比它还快的计算机，就放在这台计算机边上，告诉它们这台机器就是 用来做核模拟的。所以做一台自己的高性能机是我学生时期的梦想，虽然现在国内最快 的高性能机已经达到每秒几万亿次，但我一定要圆这个梦。 计算所的一位研究员曾经说过，创新工作一个重要特征就是这个工作让人感到“狠”。 我觉得，狗剩1号“狠”的地方就是进度快，从零开始，用了不到一年半的时间完成一个 通用处理器的设计；而目前的狗剩2号“狠”的地方就是在结构上对性能的大幅提高。我 相信，更“狠”的还在后头。 2003年11月30日于中国科大 --