1. 
      
        

           當(dāng)前位置:首頁>軟件介紹>評審技術(shù)在高質(zhì)量軟件開發(fā)中的應(yīng)用 查詢:
      欧美大香蕉免费看 | 黄色高清视频在线观看 | 日本久久精品一区 | 欧美日韩一级二级三级 | 亚洲男人天堂av 亚洲视频无码在线 | 无码成人在线 | 这里只有精品视频国产 | 懂色av| 国产青青操视频 | 夹夹夹一区二区 | 99re成人精品视频免费看 | 色婷婷成人网 | 韩国毛片在线 | 插逼喷水视频 | 欧美日韩激情在线一区二区三区 | 影音先锋美女被操 | 奇米第四色狠狠 | 高清一级片在线播放 | 国产成人在线免费观看视频 | 美女扒开粉嫩尿囗的桶爽www | jZZijZZij亚洲日本少妇 | 精品色欲 | 日韩一区二区在线观看 | 欧美日韩免费A片 | 校园激情一区 | 久久人妻免费视频 | 日本黄色免费视屏 | 国产操屄 | 韩国黄色一级视频 | 欧美操逼视频在线免费观看 | 日本中文字幕有码 | 成人性生交A片免费看网 | 天天精品| 一级片在线视频播放 | 四虎影院永久在线 | 视频一区二区三区四区五 | 啪啪干| 欧美成人手机免费在线观看 | 日韩精品久久久 | 精品日韩人妻无码一区二区三区四区 | 国产伦精品一区二区三区免费下载 | 西西444WWW无码视频 | 免费一级无码婬片A片APP直播 | 在线国产黄色视频 | 青青青在线视频 | 国产91 白丝在线播放 | 色婷婷激情网站 | 囯产精品久久久久久久久久久久久久 | 自拍骚妻| 日韩一级在线观看免费 | 男人天堂视频在线观看 | 日本黄色视频在线观 | 狼人香蕉香蕉在线28 | 国产精品成人久久久久 | 一本色道久久综合亚洲精品久久 | 人人插人人射 | 北条麻妃黄色视频 | 亚洲精品一级 | 丁香五月婷婷网 | 免费手机在线看日韩 | 豆花视频免费观看18 | 日韩日屄视频在线免费观看 | 亚洲中文字幕视频在线观看 | 欧美大屌网 | 黄色电影视频在线 | 青春草在线视频免费观看网站 | 我要操操操 | 在线成人视频网站大香蕉在线网站 | 欧美大屌操B | 可以免费看黄的网站 | 亚洲伦精品 | 人操操操操操人人人 | 2026国产精品 | 台湾中文字幕 | 韩国理论电影麻豆 | 999色综合 | 国产操逼网络 | 麻豆乱婬一区二区三区 | 男人的天堂黄片 | 日本一区二区视频在线 | 日韩午夜毛片 | 色老板免费视屏 | 亚洲国产成人在线播放 | 激情综合网激情五月天 | 中文字幕日韩人妻久热 | 大操影院| 日 韩 福利 资源 | 狠狠躁日日躁夜夜躁 | 亚洲高清视频在线看! | 成人免费视频 国产免费麻豆网站 | 婷婷五月视频在线观看 | 老熟女乱伦| 黄色成人在线看 | 鲁鲁日韩成人免费视频 | 息子无码一区二区三区免费 | 2017大香蕉 | 影音先锋91麻豆 | 亚洲依依成人网 | 97天天干人操 | 免费黄网在线观看 | www深夜成人 a√在线 | 激情乱伦网站 | 91丨国产丨白丝 | 亚洲黄色视频播放 | 免费A片国产毛无码A片 | 豆花视频网站入口18 | 大鸡巴操小逼视频 | 91丨九色丨国产在线 | 欧美日日操 | 亚洲成人电影导航 | 天天日天天干天天日 | 中文人妻无码一区二区三 | 午夜艹逼 | 国产成人精品在线 | 色天堂影院| 国产香蕉精品视频 | 成人视频网 | 99热超碰在线播放 | 黄色艹逼视频在线观看 | 91青青草在线观看 | 一区二区不卡 | caoporen | 中文字幕aaa | 国产无套精品一区二区 | 不卡天堂网 | 韩国无码一区 | 91大神在线看 | 色花av| 综合激情网五月 | 无码在线精品视频 | 中文字幕aaa | 久久,久久成人电影 | 久久久三级学生妹A | 日韩无码免费 | 91成人电影在线 | 欧美成人免费网址 | 操女明星爽不爽操死你操得爽死你 | www.xxqepv日逼打炮 | 无码成人影音先锋 | 欧美成人无码一级A片蜜芽 | 亚洲欧美成人在线视频 | 真正免费av | 欧美日韩中文字幕在线观看 | 91麻豆精品无码一区二区三区 | 黄色成人A片 | 尤物网址| 日本在线免费A∨视频 | 国内精品视频免费观看 | 婷婷午夜精品久久久久久性色AV | www豆花视频 | 九九色在线免费观看 | 婷婷丁香五月色 | 一区二区三区四区在线播放 | 五月丁香婷婷激情网 | 久久人人爽人人爽人人片aV东京热 | 成人免费看性爱大片密芽 | 亚洲欧美在线免费观看 | 女人19毛片A片久久19软件 | 特色黄色片 | 全部孕妇丰满孕妇孕交 | 免费成人视频在线豆花 | 欧美精品三级片在线 | 国产精品视频导航 | 少妇高潮日韩 | 亚洲电影区 | 啪啪啪免费网址 | 内射视频网 | 久久久免费黄色 | 综合亚洲色区 | 蜜臀久久精品久久久久宅男 | 天天人人摸 | 国产做a精品 | 性爱无码在线 | 4438欧美日韩 | 久久午夜视频 | 国产视频大全 | 毛片寻小小 | 7799天天综合网精品 | A一级黄色片在线看 | 国产三级片在线网站 | 丁香婷婷五月综合小说99在线 | 逼特逼在线播放 | 九九九视频网站 | 亚洲欧美国产毛片在线 | 一区二区三区网站 | 人人操人人射人人色 | 久久久大学生毛片 | 久久无码一区 | 国产又粗又硬视频 | 97男人的天堂 | 1234视频看看日本在线 | 亚洲无码 高清视频 | 久久精品视频观看 | 亚洲少妇网站 | 国产免费自拍 | 日韩破处 | 国产精品 内谢 | 黄色片国产精品 | 亚洲日韩在线播放 | 射久久久久久 | 黄色视频免费看 | 操逼网在线视频 | 影音先锋av成人电影 | 天天日天天色天天干 | 91av成人在线播放 | 久久人人爽人人爽人人片 | 欧美日P视频 | 2024中文字幕在线 | 六月婷婷六月 | 亚洲高清无码视频下载 | 99免费视频 | 99精品视频在线观看 | 最新无码国产精品色在线看 | 日韩爱爱网址 | 国产素人无码 | 欧美高清橾逼网免费观看 | 欧美精品国产动漫 | 国产亲子乱一区二区 | 欧美一级手机在线免费 | 18禁www| 国产刺激高潮 | 精品成人18秘 亚洲AV蜜臀 | 亚州看片 | 久久久久成人片免费观看蜜芽 | 999小视频 | 丁香五月婷婷六月 | 激情丁香婷婷 | 人善交videoS欧美3D | 成人网视频在线 | 国产成人黄片视频 | 一级爱爱片 | 亚洲中文综合 | 日韩乱码人妻无码超清蜜桃丨 | 欧美色乱论视频 | 日本高清不卡视频 | 日本a天堂 | 嫩草视频| 7799精品天天综合网 | 亚洲AV无码成人精品区 | 国产婬荡交换XXXⅩ | 日韩AV一区二区三区四区 | 特级丰满少妇一级AAAA爱毛片 | 日韩A片电影 | av天堂中文版 | 精品婷婷色一区二区三区蜜桃 | 麻豆porn | 午夜男女啪啪网站 | 天堂中文视频在线 | 99久久精 | 男女AA视频 | 尻屄在线观看 | 国产草逼视频 | 欧美黄片免费播放 | 日韩Aⅴ高清 | 精品国产91乱码一区二区三区 | 中文字字幕在线中文 | 亚洲人成小说 | 区美XXXXX在线 | 欧美第一草草 | 69成人精品 | 日逼免费观看视频 | 日逼视频网站免费观看 | 亚洲最大黄色电影 | 午夜久久久无码视频 | 免费亚洲免费 | 久久青青草香蕉手机视频在线 | 日本高清无码手机在线毛片 | 午夜香蕉网 | 蜜桃秘 无码一区二区三区 | 麻豆成人AV一二三区在线播放 | 小黄片在线看 | 九九精品成人 | 国产裸体美女网站 | 亚洲免费a视频 | 啪啪啪视频免费 | 人操久久 | 国产在线播放福利 | 成人Av色在线 | 伊人大相蕉在线视频 | 精品无码少妇一区二区三区 | 天天干夜夜干 | 777婷婷天堂综合区色吧 | 亚洲日韩久久 | 欧美特黄一区二区三区 | 国产久久视频精品影视 | 久久久午夜福利视频 | 韩国三级在线视频网址 | 成人片黄网站色在线视频 | 黄色免费视频 | 色婷婷www | 羞羞偷拍视频 | 熟女乱伦AV| 夜夜干天天操 | 99*精品全部 | 欧美色图成人影片 | 精品自拍AV| 成人午夜啪免费视频在线观看软件 | 国产成人无码AV一区二区网站 | 久久久无码电影 | 狠狠综合久久 | 波多野结衣网在线 | 成人中文在线视频 | 日韩A片一级无码免费 蜜桃 | 精品999www | 四虎AV极速 | 亚洲乱伦黄色小说视频网址 | 12一15女人a毛片13 | 国产一级a毛一级a看免费观看 | 成人在线黄色视频网站 | 影音先锋男人资源av | 91视频美女 | 玖玖九九99 | 国精产品一区二区三区糖心269 | 国产又粗又猛视频 | 色福利在线观看 | 777婷婷| 日本熟妇无码一区二区 | 日本一级黄色视频 | 日韩操逼大片 | AV电影亚洲 | 三级日韩 | 日韩一级免费看 | 操逼AV最新地址大全 | 人人澡人人舔 | 六月丁香久久 | 黄性视频| 亚洲免费专区 | 狠狠狠干 | 草草影院国产第一页 | 成人免看一级a一片A片 | 日韩淫淫网 | www.艹逼 | 成人无码久久久久毛片 | 人人操人人操人人操人人操 | 影音先锋三级理伦电影 | 免费v片| 美国A级毛片 | 伊人久热aV | 黄视频大几吧操逼 | 国产欧美亚洲精品 | 成人做爰黄 片视频免费看 | 一区二区无码 无修正 | 婷婷成人娱乐网 | 99中文无码 | 青娱乐在线免费 | 桃色网站在线 | 蜜桃网址一区在线观看 | 久久嫩草精品久久久久 | 欧美成人在线不卡视频 | 成人午夜天天爽 | 偷拍视频青青草 | 日韩在线中文字幕视频 | 2024AV中文在线播放 | 操屄自拍 | 日本人妻XXXX | 国产黄色电影网 | 骚婷婷欧美| 亚洲无码视频免费在线观看 | 国产美女被靠精品 | 人妻app | 蜜芽成人网站 | 无码一区二区三 | 黄色A片播放 | 欧美插插影院 | 午夜福利人人妻人人澡人人爽 | 男女成人 免费视频在线播放 | 豊満な五十路熟女 | 国产免费资源 | 亚洲最大的黄色网址 | 男女无遮无挡一区二区爱豆视频 | 国产电影无码 | 亚洲一色在线 | 日本一区二区三区在线观看网站 | 青娱乐精品视频日美 | 国产成人九九六六六 | 粉嫩99精品99久久久久久桃色 | 亚洲第一网站视频香蕉视频 | 亚洲丁香五月激情 | 日产精品久久久久 | 黄色精品视频 | www.啪啪| 老黄网站 | 亚洲AAA网| 2019人人操 | 黄色在线视频免费观看 | 自拍激情网址 | 天堂网在线最新版www中文网 | 青娱乐国产视频自拍 | 久久亚洲精品中文字幕不卡一区 | 国产操视频| 被扒开腿猛进入爽爽A片软件 | g国产欧美一区二区精品性色超碰 | 经典无码一区 | 伊人成人娱乐网 | 真实夫妻操逼视频 | 日韩在线看片网站 | 新www视频亚洲 | 狠狠干AV | 强欧美小嫩苞第一次免费视频 | 免费成人在线观看视频 | 男女操逼高清视频 | 黄色免费看日本 | 国产精品av在线观看 | 激情视频激情五月天 | 秦岚毛片一区二区三区 | 中文字幕不卡 | 男女系列视频福利网站 | 色情片免费看 | 人人操人人操人人操人人操人人操 | 国产一区二区免费在线观看 | 天天干天天干天天干 | 水蜜桃视频免费观看 | 91麻豆影院 | 亚洲观看黄 色 网 | jjzz欧美 | 水蜜桃精品 | 日本一 级 黄 色 视频 | 神马午夜精品95 | 日欧操逼电影 | 欧美黄色片免费看 | 麻豆三级电影视频 | 国产做爰视频免费播放 | 精品无无码一区二区 | 亚洲高清无码中文字幕视频 | 最近2019中文字幕mv第三季歌词 | 亚洲一级毛片 | 91久久婷婷国产 | 蜜乳一区二区 | 天天操天天曰天天爱 | 日韩一级国产电影 | 亚洲成人无码网站 | 国产精品麻豆果冻莉莉 | 乱伦电影影音先锋 | 一級免費网站 | 欧美日韩高清 | 特黄妇女AA毛片 | 日韩欧美东京热 | 国产成人精品视频在线 | 九九九成人网 | 亚洲天堂AV网站 | 97精品超碰一区二区三区 | 蜜芽成人在线 | 韩国精品在线播放 | 精品91美女 | 精品人妻一区二区三区日产乱码 | 台湾在线无码视频 | 日韩操比视频 | 青娱乐在线视频免费观看视频 | 思思热精品在线视频 | 俺来也成人免费视频 | 性爱无码片AV | 少妇无码喷水久久 | 日本无码一级A片毛 | 一级录像在线免费播放 | 无码中文字幕无码视频在线观看 | 色拍拍最新网址 | 亚洲女同在线 | 日日干夜夜操天天肏 | 欧美大香蕉在线 | 插操视频 | 国产伦精品一区二区三区成人片 | 久久综合久久鬼色 | 大香蕉视97| 精品人妻伦一二三区蜜桃 | 操逼动态视频 | 亚洲黄色在线播放 | 国产无码精品电影 | 国产黄色A片三级熟女 | 99精品色| 免费搞黄网站。 | AV天天艹 | 中文字幕高清无码在线视频 | 小泽玛利亚性爱视频 | 99热这只有精品66 | 日肏黄色一级片 | 一级电影国产 | 欧美精品18videosex性欧美 | 久久久免费精品国产 | 操逼不卡 | 亚洲成人黄色电影 | 五月丁香花综合网 | 色图av | 俺去AV | 91精品久久久久久久久久 | 成人在线三级片 | 美女交叉免费视频啪啪 | 台湾激情中文网 | 黄色毛片儿| 九色视频自拍 | 99久热手机视频免费观看 | 激情无码内射 | 欧美三级片网站在线 | 色哟哟精品无码 | 97大香蕉网 | 91视频最新网址 | 色视频国产在线 | 亚洲字幕成人中文在线观看 | 久日韩精品小视频 | 婷婷五月丁香久久 | 玖玖精品一区二区 | 欧美淫秽视频免费看 | 九九精品国产 | 黄色无码影视 | 国产一区二区三区四 | 青青草成人在线免费观看 | 无码影音| 亚洲无圣光豆花 | 亚洲无码视频在线观看免费 | 99精品A√ | 六月丁香激情 | www.666.日本高清 | 日韩A√中文字幕在线 | 在线免费看黄色片 | 日韩欧美中文在线无线码视频在线看免费版 | 青娱乐国产视频 | 北条麻妃视频一区二区 | 国产蜜臀秘 入口 | 欧美专区在线观看 | 99视频免费在线 | 亚洲精品456 | 韩国一级毛片 | 白领诱惑免费福利 | 一级黄色录像视频 | www爱射AV | 亚洲成人性爱av 亚洲成人综合日本 | 亚洲奇米影视 | 免免费国产AAAAA片牛牛影视 | 日韩美女邪恶啪啪啪网站 | 伊人大香蕉电影网 | 萝莉操逼视频 | 国产在线网| 欧美变态拉屎操逼网站 | 人日人欧美在线 | 二区在线视频 | 日韩高清无码小电影 | 免费看黄色片国产馆 | 亚洲天堂黄片 | 69视频免费在线观看 | 天天操成人电影 | 婷婷人人爽 | 天天干视频在线 | 日韩无码第十页 | 在线直接看黄 | 欧美性爱午夜视频 | 免费黄色成人视频网站 | 欧美在线精 | 中国老熟女重囗味HDXX | 国产V视频在线观看 | www.色天堂 | 一级黄色天堂 | 欧美中日韩在线 | 久久久夜色精品亚洲在线播放 | 又黄又嫩的视频网站 | 中文字幕一区在线观看视频 | 88国产精品视频一区二区三区 | 国产女处被破www免费 | 日韩在线综合 | 亚洲av大全 | 精品性视频 | 色婷婷婷婷色 | 大香蕉成年人视频 | 亚洲精品aaa | 干BBB| 日本黄色影院在线 | 免费一级无码成人片 | 在线看国产| 天天天天爽爽天干 | 伊人麻豆伊人 | 中文字幕在线观看免费视频 | 大香蕉操逼逼 | 免费毛片网站 | 国产免费AV片在线无码免费看 | 久草视频大香蕉 | 黑人草逼视频 | 国产精品久久久久久久久久久久久久 | 一级特黄60分钟免费看 | 韩国毛片在线 | 97色色欧美 | 伊人成综合网 | 豆花成人视频在线观看 | 竹菊av一区二区三区四区五区 | 激情网五月天 | 熟女乱伦视频 | 日本巨乳一级A片 | 日韩人妻精品无码 | 欧美日韩亚洲国产a | 特级西西444www大胆免费看 | 伊人婷婷成人网 | 欧美成人三级精品 | 无码无套少妇毛多18PXXXX | 国产女人操逼打咆视频 | 国产中文另类 | 8050网午夜影院 | 伊人网成人综合 | 亚洲在线观看免费视频 | 免费在线看黄网站 | 日韩福利一区二区三区 | 鸡巴美女91 | 囯产精品无码成人久久久 | 色悠久久久 | 日韩视频第一页 | 久久人妻网站 | 黄色一级亚洲视频 | 爱爱免费视频网址 | 粉嫩小泬BBBB免费观看 | 天天爱天天色 | 囯产精品久久久久久 | 日逼网站123 | 黄色片在线免费 | 全部孕妇毛片丰满孕妇孕交 | 亚洲AV色香蕉一区二区三区 | 鸥美超逼视频 | 日本天堂免费a | 国内性爱网站 | 日韩三级在线播放 | 97视频自拍 | 簧片大全免费观看视频了6666 | 成人色图视频 | 黄色av影视 | 69精品人人人人人 | 日日爱av | 七月婷婷 | 午夜AA | 日本A电影在线 | 日本阿v免费观看 | 欧美,三级黄 | 四虎在线无码 | 精品人妻一区二区免费蜜桃视频 | 夜夜爽妓女8888视频免费观看 | 午夜神马福利片 | 国产乱伦毛片张雪馨 | 久久人人爽人人爽人人片aV东京热 | 久久青青操 | 中文字幕第21页 | 免费A级毛片在线播放不收费 | 国产精品久久久久久久久咪咪 | 最新国产日韩 | 亚洲成人无码AV | 日逼一级片 | 婷婷在线成人视频精品 | 欧美成人精品欧美一级 | 无码天天av天天爽 | 婷婷五月丁香激情 | 乌克兰一级操逼片 | 夜色88V精品国产亚洲 | 操逼视频网站在线观看 | 亚洲1区无码 | 黄色片大全 | 午夜婷婷福利 | 特级艺体西西444WWw | 91麻豆精品在线观看 | 色呦呦在线视频 | 精品99色| 亚洲综合免费观看高清 | 操逼的免费视频 | 日本乱轮视频 | 看一级黄片视频 | 一级A色情| 91精品XXX | 日本国产高清视频 | 国产一区视频在线播放 | 超级A片在线观看 | 4080yy午夜理论片成人 | 国产成人在线免费观看视频 | 91丨豆花丨国产熟女 熟女 | 五十路老熟女 码视频 | 日本动漫操逼一区二区 | 操逼av在线 | 免费视频播放一区二区 | 色秘 乱码一区二区三区色欲 | 西西444WWW无码大胆图 | AA网址| 成人网站视频 | 日韩18页 | 大香蕉东京热 | FC2清純18歲在线播放 | 韩国一区二区三区四区 | 九九综合在线资源伦理 | 7777国产 | 天堂俺去俺来也WWW色光网 | 亚洲色区在线 | 永久免费 看片!在线观看 | 无码黄色电影 | AV天天操| 免费看的A片 | 天天操天天摸天天日天天爱 | 一级片日本| 国产一级av在线网站 | 波多野结衣一区二区三区国产精品 | 日本阿v免费观看 | 在线看黄色小电影 | 超碰人人人人 | 人人操人人操人人操人人 | 最近2019中文字幕第一页 | 在线a片免费观看 | feifeibebe | www.天堂av | 韩国成人啪啪无码高潮 | 插逼国产视频 | 欧美日本AA | 91 国产 爽 黄 | 天天爱天天谢天天鲁 | 伊人操逼 | 国产主播第一页 | 操久久免费视频 | A片的视频 | 外网成人视频 | 黄色成人毛片 | 亚洲国产高清视频 | 亚洲中文无码在线 | 91av资源网 | 成人三级在线观看 | 大香蕉思思精品在线 | 免费一级黄色视频 | 免费肏逼视频 | 国产久久综合 | 精品一区一区三区四区 | 大粗鸡巴久久久久 | 免费看国产黄色 | 孕妇╳ⅹ孕交XXX | 亚洲自拍手机在线 | 乌克兰性爱视频 | 欧美三级片视频在线观看 | 懂色AV成人 | 一个人看的区二区不卡视频 | 精品国产探花 | 无码三级视频 | 豆花视频AⅤ一区二区三区 | 丝袜足交91 | 一级α片免费看刺激高潮视频 | 日韩二级片视频 | 午夜福利男女 | 无码一二三 | 91九色视频网站 | 日韩AV一区二区三区四区 | 中国成人黄色网址 | 大香蕉超碰在线 | 亚洲无aaa | 国产精品高潮久久久久久无码 | 久久国产一区 | 99在线亚洲 | 国产精品久久久久久久久久久久午夜片 | 亚洲无码影音先锋 | feifeibebe | 久伊人狠狠干 | 夜夜操狠狠操 | 家庭乱伦欧美性爱一区二区三区。 | 亚洲黄色电影在线 | 麻豆成人久久久 | 日韩在线视频第一页 | 操比视频网站 | 老妇人一区二区三区 | 亚洲欧洲一区二区三区 | 91性爱在线观看 | 国产一区二区yy精品无码毛片 | 精品一区二区三区四区五区六区七区八区 | 在线无码骚骚 | 考逼免费网站 | 日本免费不卡一区 | 人人操人人干人人 | 一区二区三区四区五区免费看 | 天天视频有没有黄色。 | 亚洲成人无码网站 | www夜夜撸 | 大香蕉伊然在亚洲91 | 欧美在线| 国产免费一区二区三区最新不卡 | 国产三级視频 | 国内精品国产成人国产三级 | 美女高潮视频 | 国产精品久久久久久久久久青青 | 国产毛片毛片毛片毛片毛片 | 91成人精品一区在线播放 | 小處女末发育嫩苞电影 | 俺去拉官方二区三区 | 成人a片在线免费观看 | 国产毛片成人网站 | 久久久精品国产 | 视频一区二区无码久久 | av天堂导航 | 无码三级视频在线观看 | 黄色片免费视频草逼草逼草逼草逼草逼 | 亚洲国产精品久久 | 美女扒开超粉嫩的尿囗让人桶91 | 日韩黄色一级网站 | 国产9在线观看 | 影音先锋成人在线 | 亚洲免费观看在线 | 欧美精品在线观看网站 | 日韩一级a免费在线视频 | 欧美乱伦网站 | 成人无码区免费A片在线软件 | 国产情趣视频 | 亚洲中文无码视频 | 精品无码系列 | 国产豆花在线 | 黄色片网站免费观看 | 日韩无码三级片免费播放 | 第一福利在线 | 久久成人三级片 | 中文天堂av | 操皮视频 | 男女日皮视频免费 | 亚洲 变态 欧美 另类 精品 | 91视频国产精品 | av中文字| 人人插人人撸 | 永久免费的啪网站免费 | 爆操小逼 | 啪啪啪网站免费观看 | 火爆全网嫖妓达人金先生约战极品S空 | 欧洲性爱AV | 中文字幕人妻无码蜜桃 | 免费观看靠逼视频网战 | 777中国盗摄偷拍0000 | 一级a黄色视频 | 综合久久狼人 | 美女操逼网站免费 | 天天日天天 | 青娱乐国产AV | 91成人篇 | 一级AV黄色片 | 色中色在线视频 | 操逼视频免费试看 | 日本人妻在线视频 | 麻豆亚洲一级女 | 亚洲中文字幕在线观看免费视频 | 日韩婬乱片A片AAA真人视频 | 大香蕉在线精品视频 | 韩国久久一级片 | 思瑞土豪视频大全 | 午夜福利10000 | 青青草视频网 | 国产高清肏屄自拍 | 三级做爱网站 | 偷偷操不一样的久久 | 国产98色在线 | 大香蕉一区二区 | 天天搞天天射 | 天天撸在线不卡 | 婷婷天堂站| 青青草在线视频黄色 | 天天操天天撸视频免费 | 色骚综合| 毛片大片| 草逼小视频无码 | 真人操色俺来也 | 欧美黄片视频。 | 欧美成人激情在线 | 黑人大阴道视频在线观看 | 亚洲欧美手机在线 | www,亚洲黄色片 | 爱逼逼网| 精品国产毛片 | 欧美日韩一区二区三区四区 | wwwww黄色 | 中文字幕一区二区三区精华液 | 色五月婷婷丁香五月 | 日本亚洲黄色视频 | 欧美性爱区第一页 | 99爱视频免费在线观看 | 国产亚洲精品久久久久动 | 蝌蚪窝自拍一区 | 中文字幕亚洲无码视频 | 天堂资源视频 | 久久Y成人电影 | 麻豆蜜桃69无码专区 | 天天干天天色 | 亚洲第一香蕉视频在线观看 | 国产主播中文字幕 | 激情丁香5月 | 91成人精品 | 国产成人毛片 | 成人黄色在线观看 | 国产成人大香蕉在线免费 | 一级a一级a爰片免费免免水l软件 | 大香蕉xxxx | 69视频网站 | 波多野结衣AV免费观看 | 人妻在线播放视频 | 影音先锋每日最新av | 91视频乱伦 | 爱情岛成人亚洲WWW论坛 | 91视频久久久久久 | 操逼大鸡吧 | 黄色的网站久久 | 日本在线欧美 | 豆花视频免费观看无码 | 免费黄色在线观看 | 苍井空一区 | 欧美内射视频播放 | 最新天堂中文在线 | 一级特黄妇女高潮AA片免费播放 | 神马影院午夜福利视频 | 亚洲女人操B | 日本A电影在线 | 麻豆操逼毛片视频 | 男人美女一起搞基视频网站 | 中文字幕在线亚洲 | A片小视频 | 黄片网站进入 | 狠狠人妻久久 | 青草网址 | 久操新在线 | 亚洲人人草 | 男女激情操逼一区福利网站 | 黄色电影一级免费 | 人妻人人操 | 美女内射网站 | 国产一级A黄色片在线 | 大香蕉伊人在线视频免费看 | 操逼视频a片 | 黄色一级视频免费看 | 大鸡巴久久 | 嗯啊啊网站 | 黄片视频在线免费观看 | 是先锋男人的网站 | 日本一级婬片A片免费播放一 | 日日爱爱影院 | 青青草黄色免费视频 | 中文字幕欧美日韩在线视频播放 | 色婷婷六月 | 国产 乱伦 av | 678五月丁香亚洲 | 黄片免费视频在线 | 成 年 人 黄 色 视频 网站 久久久 | 理论片在线午夜视频 | 国产在线最新地址 | 人人看人人摸人人插 | 在线观看免费黄色视频网站 | 久久人人妻人人做人人玩精品 | ww亚洲 | 国内9l 自拍九色啦视频 | 免费电影日本黄色 | 日本一极黄色 | 久操视频免费看 | 欧美在线aaa | 大焦久久| 婷婷视频 | 亚洲AV成人一区二区三区不卡 | 欧美性爱无码视频 | 亲子乱伦一区二区三区 | 99好逼网 | 艹逼视频网站 | 免费伦片A片在线观看警官 | 手机看片久草 | 亚洲天堂高清 | 久久肏逼网 | 欧美三级黄 | 国产资源影音先锋 | 男女www | 亚洲综合激情 | 一区二区三区无码免费观看 | 天天艹夜夜爽 | 欧美午夜福利在线观看 | 欧美精产国品一区二区区别 | 日韩黄色免費在线视頻 | 成人做爰A片一区二区app | 亚洲阿v视频 | 欧美 亚洲 日韩 国产 高清 | 国产片婬乱18一级毛片视頻 | 最新黄色免费视频 | 免费黄色影片 | 亚洲男女啪啪视频 | 国产看逼逼 | 欧美一级免费黄片 | 欧美操大逼视频 | 好吊视频一区二区三区四区 | 日本不卡久久 | 91欧美在线 | 亚洲a片在线 | 婷婷在线干在线色 | 大香蕉现现伊人 | 内射久久视频 | 欧美亚洲成人电影 | 九九热这里只有精品12 | 天天干,天天日,天天插,人人人透 午夜久久精品嫖妓av一区二区三区 | 日韩逼| 蜜桃传媒入口 | 对白av | 性三级视频 | 色婷婷视频观看 | 色色色香蕉 | 狼人综合在线视频 | 婷婷五月在线 | 操一操撸一撸 | 人人爱人人看人人搞 | 在线无码av下载 在线无码高清播放 | 日韩一区二区视频 | 岛国AV免费看 | 欧美一级欧美三级在线观看 | 中文字幕在线官网 | 国在线播放 | 人人摸人人干人人色 | 黄色一级片在线看 | 欧美另类激情总和网 | 99热黄色| 国产免费AV在线 | 日本一级A片在线观看视频 | 依依成人综合 |
           

        評審技術(shù)在高質(zhì)量軟件開發(fā)中的應(yīng)用
        評審技術(shù)在高質(zhì)量軟件開發(fā)中的應(yīng)用郭華摘要軟件質(zhì)量和開發(fā)進(jìn)度一直是軟件開發(fā)成功關(guān)鍵的因素,而在實(shí)際工作中只有少量項(xiàng)目能按計(jì)劃完成,進(jìn)度要求往往迫使開發(fā)組無法保證軟件質(zhì)量,最終許多項(xiàng)目因?yàn)橘|(zhì)量問題無法投入使用。軟件評審作為一種軟件產(chǎn)品驗(yàn)證的活動,能夠及早地從軟件產(chǎn)品中識別并消除缺陷,從而減少后期的返工,加快開發(fā)進(jìn)度,提高產(chǎn)品質(zhì)量。作為一種十分有效值得推廣的評審方法,在軟件過程改進(jìn)中起到了非常大的作用,同時軟件評審也是CMM等級3的關(guān)鍵過程域。本文描述了正式和非正式的多種軟件評審技術(shù),包括臨時評審、桌查、輪查、結(jié)隊(duì)編程、走查、小組評審和審查等,并系統(tǒng)地介紹了最正式、最嚴(yán)格、最有效的軟件評審——審查的整個過程,包括制定評審計(jì)劃、指定評審角色、做評審準(zhǔn)備、召開評審會議和驗(yàn)證分析等過程。高質(zhì)量要求的軟件,如電信軟件、銀行證券軟件等,它們對可用性要求非常,因此對軟件質(zhì)量的要求非常嚴(yán)格。作者通過將評審技術(shù)應(yīng)用在高質(zhì)量軟件開發(fā)過程中,在實(shí)際開發(fā)過程中確定了評審的質(zhì)量標(biāo)準(zhǔn)和準(zhǔn)入、準(zhǔn)出條件,并針對數(shù)據(jù)采集、分析做了嚴(yán)格的控管,建立了質(zhì)量可預(yù)測的軟件開發(fā)過程體系,為有效地項(xiàng)目評估、質(zhì)量保證和項(xiàng)目管理提供了可靠依據(jù),從而保證了軟件項(xiàng)目的成功。關(guān)鍵詞:軟件評審、審查、開發(fā)過程、軟件、質(zhì)量、定量一、軟件評審1.1缺陷的產(chǎn)生缺陷指軟件工作產(chǎn)品中的一種情況,它將導(dǎo)致軟件產(chǎn)生不令人滿意或非預(yù)期的結(jié)果。在開發(fā)過程中缺陷隨時可能產(chǎn)生,問題在于什么時候發(fā)現(xiàn)它,并為此產(chǎn)生多少糾正成本。。根據(jù)一些企業(yè)返工度量的報導(dǎo),缺陷返工率可達(dá)到整個開發(fā)工作量的40%~60%。缺陷在軟件開發(fā)的任何階段都可能會被引入。項(xiàng)目過程包含了許多可以識別缺陷、消除缺陷的過程。“識別缺陷”和“消除缺陷”本來是兩個不同的過程,但在這里為了簡便統(tǒng)一用“消除”來代表它們。潛在的缺陷越大,用來消除它所花的費(fèi)用越高。因此成熟的軟件開發(fā)過程在每一個可能會引入潛在缺陷的階段完成之后都會開展質(zhì)量控制活動。這些為了消除缺陷的活動包括:需求評審、設(shè)計(jì)評審、代碼走查、單元測試、集成測試、系統(tǒng)測試以及驗(yàn)收測試等。一個缺陷如果保持沒有被發(fā)現(xiàn)的時間越長,則以后糾正此缺陷的花費(fèi)越大。缺陷越早發(fā)現(xiàn)、越早解決,則所花費(fèi)的成本越低。因此我們應(yīng)該盡量在前期發(fā)現(xiàn)、識別并解決缺陷問題。2、缺陷的識別根據(jù)一些企業(yè)返工度量的報導(dǎo),缺陷返工率可達(dá)到整個開發(fā)工作量的40%~60%。在軟件開發(fā)過程中,軟件評審和軟件測試是保證軟件質(zhì)量的兩種主要手段和方法。測試可以識別可執(zhí)行系統(tǒng)中的缺陷,而評審不僅可識別可執(zhí)行系統(tǒng)中的缺陷,且能識別不能被執(zhí)行的文檔或人為產(chǎn)物。測試和評審的比較1)表現(xiàn)形式測試的表現(xiàn)形式有:單元測試、集成測試、系統(tǒng)測試、用戶驗(yàn)收測試評審的表現(xiàn)形式有:審查、小組評審、走查、結(jié)對編程、同級桌查、輪查、臨時評審2)工作對象測試的工作對象為:可執(zhí)行系統(tǒng)(指編譯后可運(yùn)行的程序)評審的工作對象為:需求規(guī)格說明書、架構(gòu)(概要)設(shè)計(jì)文檔、詳細(xì)設(shè)計(jì)文檔、項(xiàng)目計(jì)劃、項(xiàng)目過程文檔、源代碼、系統(tǒng)界面、測試計(jì)劃、測試用例和數(shù)據(jù)、用戶手冊3)識別缺陷的階段測試識別缺陷的階段:測試階段(編碼完成后)評審識別缺陷的階段:需求階段、設(shè)計(jì)階段、編碼階段、測試階段4)識別缺陷的成效測試的成效:最多識別軟件所有缺陷中30-35%的缺陷評審的成效:最多識別軟件所有缺陷中70-75%的缺陷5)識別缺陷的成本測試的成本:識別一個重要缺陷平均花費(fèi)15-25小時評審的成本:需求階段識別一個重要缺陷平均花費(fèi)2-3小時;設(shè)計(jì)階段識別一個重要缺陷平均花費(fèi)3-4小時;代碼評審階段識別一個重要缺陷3-5小時;測試計(jì)劃評審識別一個重要缺陷3-5小時6)解決缺陷的成本測試的成本:消除一個重要缺陷平均花費(fèi)30-80小時(包括識別缺陷時間)在開發(fā)后期才能識別缺陷,成本較高評審的成本:需求及設(shè)計(jì)階段消除一個重要缺陷5-10小時;代碼評審階段消除一個重要缺陷5-15小時更傾向于在開發(fā)前期識別缺陷,成本較低7)投入回報比較(1)航天飛機(jī)搭乘項(xiàng)目:在設(shè)計(jì)或代碼評審時消除一個缺陷的成本為1美元,在系統(tǒng)測試時為13美元,交付使用后為92美元(Paulketal,1995)。即13~92:1(2)電信公司審查發(fā)現(xiàn)和糾正一個缺陷的平均費(fèi)用為200美元,客戶驗(yàn)收測試發(fā)現(xiàn)的缺陷平均花費(fèi)4200美元(BoehmandBasili2001)。即21:1某研究表明,客戶使用過程中發(fā)現(xiàn)、糾正與需求相關(guān)的缺陷的費(fèi)用是比需求開發(fā)階段發(fā)現(xiàn)和糾正同樣缺陷的費(fèi)用的68~110倍(Boehm1981;Grady1999)。即68~110:1(3)印度Infosys公司經(jīng)驗(yàn)表明:在代碼審查上多花費(fèi)一天,這個產(chǎn)品就有期望在后期修改缺陷節(jié)省3-6天。即3~6:13、軟件評審概念1.3.1定義軟件評審,是指在軟件開發(fā)過程中,由參與評審的人員對軟件開發(fā)文檔或代碼進(jìn)行評審或檢查,幫助查找缺陷和改進(jìn)。軟件評審的工作包括:1)檢驗(yàn)產(chǎn)品是否滿足以前的規(guī)范,如需求或設(shè)計(jì)文檔;2)識別產(chǎn)品相對于標(biāo)準(zhǔn)的偏差;3)向作者提出改進(jìn)建議;4)促進(jìn)技術(shù)交流和學(xué)習(xí)。軟件評審涉及評審的組織機(jī)構(gòu)、管理、準(zhǔn)則、類別、內(nèi)容、文件和要求等。一般要求在軟件研制階段的里程碑點(diǎn)進(jìn)行軟件評審。評審的主要類別有:軟件定義評審、軟件需求評審、概要設(shè)計(jì)評審、詳細(xì)設(shè)計(jì)評審、軟件實(shí)現(xiàn)評審和軟件驗(yàn)收評審等。1.3.2軟件評審的分類自從25年前,IBM的MichaelFagan提出軟件審查技術(shù)以來,許多組織使用這項(xiàng)技術(shù)得到了非常卓有成效的結(jié)果。這些組織包括IBM、HP、Motorola、Raytheon、BullHN等。經(jīng)過幾十年的發(fā)展,軟件評審技術(shù)和多種項(xiàng)目管理理論相結(jié)合,已經(jīng)發(fā)展成一個龐大的體系。就總體而言,軟件評審主要分為六類:審查、小組評審、走查、結(jié)隊(duì)編程、同級桌查和輪查、臨時評審。其中審查是最系統(tǒng)化、最嚴(yán)密的評審技術(shù),嚴(yán)格規(guī)定了每個階段的角色及各自職責(zé),在質(zhì)量要求非常高的軟件開發(fā)項(xiàng)目中得到了較廣泛的應(yīng)用。在判斷采用哪種評審方法時,需考慮以下風(fēng)險因素:1)使用了新技術(shù),方法,工具的組件2)關(guān)鍵的架構(gòu)性的組件3)難以理解,卻又必須準(zhǔn)確和優(yōu)化的復(fù)雜邏輯或算法4)具有危險失敗模式的組件,而且是任務(wù)、可靠性、安全性關(guān)鍵的5)具有多個異常條件或失敗模式的組件6)不易測試的異常處理代碼7)打算復(fù)用的組件8)將作為其他組件的模型或模板的組件9)影響產(chǎn)品多個部分的組件10)復(fù)雜的用戶界面11)由缺乏經(jīng)驗(yàn)的開發(fā)者創(chuàng)建的組件12)具有高度圈復(fù)雜性的代碼模塊13)以往具有很多缺陷或變更的模塊1.3.4審查的角色、職責(zé)及步驟審查的角色主要分為評審組長、作者、讀者、評審人員、記錄者和驗(yàn)證者。部分專家認(rèn)為審查的角色還有:評審協(xié)調(diào)人。根據(jù)管理的原則,評審協(xié)調(diào)人的角色應(yīng)歸入評審組長,其職責(zé)由評審組長負(fù)責(zé)。審查的角色及職責(zé)1)評審組長(1)計(jì)劃、安排和組織評審活動;(2)和作者一起選擇評審人,并分配角色;(3)主持總體會議和評審會議;(4)提交需評審的產(chǎn)品給每一個評審人;(5)檢查評審會議的準(zhǔn)備是否充分,從而決定是否召開評審會議;(6)領(lǐng)導(dǎo)小組確定評審效果;(7)提交《評審總結(jié)報告》;(8)維護(hù)每次評審的評審記錄及來自評審總結(jié)報告中的數(shù)據(jù);(9)根據(jù)評審數(shù)據(jù)形成報告,提交給管理層、過程改進(jìn)組及評審過程的擁有者。2)作者(1)作為被評審產(chǎn)品的作者或維護(hù)者,提交工作產(chǎn)品;(2)協(xié)助評審組長選擇評審人,并分配角色;(3)陳述評審目標(biāo);(4)初步講解產(chǎn)品;(5)返工;(6)向評審組長報告返工時間和缺陷數(shù);3)讀者將工作產(chǎn)品在評審會議上用自己的語言進(jìn)行解說,測試工作產(chǎn)品的可理解性,暴露產(chǎn)品的二義性、隱含假設(shè)等各種缺陷;4)評審人員(1)在評審會議之前檢查工作產(chǎn)品,發(fā)現(xiàn)其缺陷,為參加評審會議做準(zhǔn)備;(2)記錄準(zhǔn)備時間;(3)參加評審,識別缺陷,提出問題,給出改進(jìn)建議。5)記錄者記錄評審會議中提出的問題并分類。6)驗(yàn)證者進(jìn)行跟蹤,確認(rèn)返工工作被正確執(zhí)行。審查的主要步驟有:1)評審計(jì)劃;2)總體會議;3)評審準(zhǔn)備;4)評審會議;5)修改、驗(yàn)證。二、軟件開發(fā)模型2.1軟件生命周期軟件生命周期指軟件的產(chǎn)生直到報廢的生命周期,周期內(nèi)有系統(tǒng)定義、需求分析、系統(tǒng)設(shè)計(jì)、編碼實(shí)現(xiàn)、系統(tǒng)驗(yàn)收測試、運(yùn)行維護(hù)到廢棄等階段。組織軟件開發(fā)過程的規(guī)則,就可以稱為軟件生命周期模型。一個定義良好的軟件生命周期模型,可以很好的指導(dǎo)我們的開發(fā)工作,使漫長的開發(fā)工作易于控制。事實(shí)上,我們可以任意定義自己喜歡的軟件生命周期模型。但是,如果生命周期模型定義不合理,卻會制約我們的開發(fā)過程。軟件開發(fā)人員在長期開發(fā)過程已經(jīng)總結(jié)出了幾種常用的軟件生命周期模型,我們可以根據(jù)項(xiàng)目的特點(diǎn)來選擇一個合適的模型,然后在此基礎(chǔ)上再加以裁減。這些生命周期模型是:1)瀑布模型,2)快速原型模型,3)漸增模型,4)演進(jìn)模型。其中瀑布模型是所有生命周期模型的核心和基礎(chǔ),其他模型都是基于瀑布模型發(fā)展和衍化而來。瀑布模型分為六個階段:系統(tǒng)定義、需求分析、系統(tǒng)設(shè)計(jì)、編碼實(shí)現(xiàn)、系統(tǒng)驗(yàn)收測試、運(yùn)行維護(hù)。在瀑布模型中每個階段都要有定義、工作、審查、形成文檔以供交流或備查,以提高軟件的質(zhì)量。2.2項(xiàng)目開發(fā)V模型在瀑布模型的基礎(chǔ)上,衍生出了強(qiáng)調(diào)測試活動的V模型。它把瀑布模型的測試階段進(jìn)行細(xì)分,并于前面的階段進(jìn)行對應(yīng)。細(xì)分出來的這些階段分別為:單元測試階段、集成測試階段和系統(tǒng)測試階段。在V模型中,我們可以知道:1)在需求分析階段,《系統(tǒng)需求規(guī)格說明書》確認(rèn)后,編寫《系統(tǒng)測試計(jì)劃》,準(zhǔn)備系統(tǒng)測試用例、數(shù)據(jù),對需求進(jìn)行驗(yàn)證;對應(yīng)的系統(tǒng)測試階段,執(zhí)行系統(tǒng)測試計(jì)劃;2)在概要設(shè)計(jì)階段,《概要設(shè)計(jì)說明書》確認(rèn)后,編寫《集成測試計(jì)劃》,準(zhǔn)備集成測試用例、數(shù)據(jù)等,對概要設(shè)計(jì)進(jìn)行驗(yàn)證;然后在對應(yīng)的集成測試階段,執(zhí)行集成測試計(jì)劃;3)在詳細(xì)設(shè)計(jì)階段,《詳細(xì)設(shè)計(jì)說明書》確認(rèn)后,編寫《單元測試計(jì)劃》,準(zhǔn)備單元測試用例、數(shù)據(jù)等,對詳細(xì)設(shè)計(jì)進(jìn)行驗(yàn)證,然后在對應(yīng)的單元測試階段,執(zhí)行單元測試計(jì)劃。三、評審在高質(zhì)量軟件開發(fā)的實(shí)際應(yīng)用3.1高質(zhì)量軟件開發(fā)項(xiàng)目介紹高質(zhì)量軟件,如電信軟件、金融證券類軟件等,有較嚴(yán)格的要求:可用性要求非常高,并且不會因?yàn)橄到y(tǒng)維護(hù)和擴(kuò)展而帶來運(yùn)營中斷;支持使用現(xiàn)有管理工具和標(biāo)準(zhǔn)進(jìn)行遠(yuǎn)程管理;能夠提供更出色的性能以及運(yùn)營在高可用性集群上的能力,減少任何單點(diǎn)的軟硬件失效現(xiàn)象。五個九(99.999%)意味著一個系統(tǒng)的宕機(jī)時間一年不超過5分26秒。因此高質(zhì)量軟件項(xiàng)目是一種對可用性、可靠性、穩(wěn)定性要求非常高的軟件項(xiàng)目,要求軟件能夠每周7*24工作。因此高質(zhì)量軟件開發(fā)一般采用嚴(yán)格的軟件開發(fā)過程,明確定義每個階段的質(zhì)量目標(biāo)和要求,嚴(yán)格項(xiàng)目軟件開發(fā)過程控制。我們在多個高質(zhì)量軟件開發(fā)項(xiàng)目中成功地采用了評審技術(shù),并發(fā)揮了巨大的作用。從這些項(xiàng)目的實(shí)際開發(fā)過程中,我們針對于規(guī)模從30人月——300人月,代碼行數(shù)從5萬行——30萬行的運(yùn)營支撐系統(tǒng)項(xiàng)目制定了項(xiàng)目評審流程和相關(guān)要求。3.2軟件過程定義軟件過程主要分為階段、需求分析階段、設(shè)計(jì)階段、編碼實(shí)現(xiàn)階段、測試階段(包括集成測試、系統(tǒng)測試和用戶驗(yàn)收測試)、實(shí)施階段和維護(hù)階段,項(xiàng)目管理工作橫貫于所有的階段。詳細(xì)流程見流程圖。在軟件過程中,我們定義了以下角色:1)客戶2)銷售人員3)項(xiàng)目經(jīng)理4)系統(tǒng)分析員5)系統(tǒng)架構(gòu)師6)開發(fā)工程師7)質(zhì)量工程師8)技術(shù)支持人員在規(guī)劃質(zhì)量體系時,我們參考PMBOK對項(xiàng)目質(zhì)量管理的要求,將項(xiàng)目質(zhì)量管理過程設(shè)計(jì)為三個階段:1)質(zhì)量規(guī)劃——確定質(zhì)量活動的流程和標(biāo)準(zhǔn),如軟件過程定義,質(zhì)量達(dá)標(biāo)定義等;2)實(shí)施質(zhì)量保證——編寫相應(yīng)的測試計(jì)劃、執(zhí)行測試和評審活動;3)實(shí)施質(zhì)量控制——監(jiān)控質(zhì)量保證活動的結(jié)果,判斷是否達(dá)標(biāo),如不達(dá)標(biāo),則采取相應(yīng)的風(fēng)險防范措施。立項(xiàng)及需求階段流程(圖略)設(shè)計(jì)及編碼階段流程(圖略)集成、系統(tǒng)及驗(yàn)收測試階段流程(圖略)實(shí)施維護(hù)階段流程(圖略)3.3軟件評審過程及標(biāo)準(zhǔn)定義我們在整體軟件過程中明確定義了需要軟件評審的過程及實(shí)施的方法。(圖略)3.3.1采用審查的過程采用最嚴(yán)格最系統(tǒng)的評審方法——審查的軟件過程有:1)《軟件需求規(guī)格說明書》的評審2)《概要設(shè)計(jì)說明書》的評審3)《詳細(xì)設(shè)計(jì)說明書》的評審4)代碼評審5)《單元測試計(jì)劃》的評審6)《集成測試計(jì)劃》的評審7)《系統(tǒng)測試計(jì)劃》的評審對于文檔評審以文檔頁數(shù)為基數(shù),要求每頁發(fā)現(xiàn)的缺陷數(shù)有一個目標(biāo)值,并規(guī)定了上下限的范圍。對于代碼評審以代碼行數(shù)為基數(shù),要求每千行代碼發(fā)現(xiàn)的缺陷數(shù)有一個目標(biāo)值,并規(guī)定了上下限的范圍。這個審查的缺陷數(shù)標(biāo)準(zhǔn)如下表。軟件過程審查的質(zhì)量目標(biāo)質(zhì)量目標(biāo)目標(biāo)下限上限SRS文檔Review缺陷發(fā)現(xiàn)密度(個頁):0.800.501.10HLD文檔Review缺陷發(fā)現(xiàn)密度(個頁):0.700.500.90LLD文檔Review缺陷發(fā)現(xiàn)密度(個頁):0.430.220.64代碼檢視缺陷發(fā)現(xiàn)密度(個KLOC):10.627.4313.81單元測試計(jì)劃Review缺陷發(fā)現(xiàn)密度(個頁):0.430.220.64集成測試計(jì)劃Review缺陷發(fā)現(xiàn)密度(個頁):0.700.500.90系統(tǒng)測試計(jì)劃Review缺陷發(fā)現(xiàn)密度(個頁):0.800.501.10如果發(fā)現(xiàn)的缺陷密度低于或高于質(zhì)量目標(biāo)范圍,則我們需要分析其原因,然后根據(jù)原因進(jìn)行返工或相應(yīng)處理流程。這要和實(shí)際情況相結(jié)合,具體情況具體分析:如某個開發(fā)工程師的水平和素質(zhì)非常高,他的代碼一般很少出錯,這樣他的代碼檢視缺陷密度低是屬于正常的;而另外一個工程師水平一般,但發(fā)現(xiàn)的缺陷密度也很低,但原因是屬于檢視的過程不嚴(yán)格,大家沒有時間來進(jìn)行嚴(yán)格的評審,則此時需要重新進(jìn)行檢視。3.3.2采用小組評審的過程采用小組評審的軟件過程主要包括對客戶需求的評審、項(xiàng)目計(jì)劃的評審和維護(hù)計(jì)劃的評審。對客戶需求的評審參加人員有項(xiàng)目經(jīng)理、系統(tǒng)分析員、系統(tǒng)架構(gòu)師、質(zhì)量部主管等。項(xiàng)目計(jì)劃的評審主要由項(xiàng)目經(jīng)理、系統(tǒng)分析員、系統(tǒng)架構(gòu)師、質(zhì)量部主管和部門經(jīng)理等參加,對人力資源、進(jìn)度和質(zhì)量管控等進(jìn)行評審。維護(hù)計(jì)劃由項(xiàng)目經(jīng)理、技術(shù)支持人員、質(zhì)量部主管和客戶服務(wù)人員參加,對人力資源、管控流程等進(jìn)行評審。3.3.3采用走查評審的過程需求分析過程中,系統(tǒng)分析員、系統(tǒng)架構(gòu)師相互之間的走查;設(shè)計(jì)過程中,系統(tǒng)分析員、系統(tǒng)架構(gòu)師相互之間的走查;在進(jìn)入維護(hù)階段時,作者需和維護(hù)人員進(jìn)行走查,讓維護(hù)人員能夠維護(hù)作者的工作產(chǎn)品。3.3.4采用桌查的過程采用桌查的過程主要集中在代碼提交階段,主要是經(jīng)驗(yàn)豐富的開發(fā)人員對提交的代碼進(jìn)行檢查,合格的產(chǎn)品才會提交到CVS上面。具體實(shí)施方法為:開發(fā)經(jīng)驗(yàn)較少(8年以下開發(fā)經(jīng)驗(yàn))的開發(fā)人員在提交代碼時,請經(jīng)驗(yàn)豐富(10年以上開發(fā)經(jīng)驗(yàn))的開發(fā)人員進(jìn)行桌查,沒有明顯問題后才允許提交;經(jīng)驗(yàn)豐富的開發(fā)人員提交代碼時也需另一名經(jīng)驗(yàn)豐富的開發(fā)人員桌查后提交。3.3.5采用臨時評審的過程代碼編寫階段開發(fā)工程師之間的臨時評審;其他開發(fā)階段,開發(fā)人員相互之間的臨時評審。3.3.6采用結(jié)隊(duì)編程的過程針對于需求不明確、采用迭代增量開發(fā)過程的小規(guī)模項(xiàng)目,采用編程時,建議采用結(jié)隊(duì)編程,但一般不做強(qiáng)制規(guī)定。我們實(shí)際采用極限編程思想進(jìn)行了兩個項(xiàng)目(一個內(nèi)部項(xiàng)目和一個外部項(xiàng)目)的開發(fā),實(shí)際上取得了非常好的效果。開發(fā)人員實(shí)際產(chǎn)出值達(dá)到了5000行代碼人月以上。當(dāng)然這些項(xiàng)目不太大,同時文檔編寫比較簡單。3.4審查流程定義我們規(guī)定了審查流程的定義,其他評審技術(shù)只是采用了其中的流程和管理思想。審查流程(圖略)3.5軟件評審效果分析我們強(qiáng)化了軟件評審技術(shù)后,在實(shí)際過程中取得了非常好的效果。以一個網(wǎng)絡(luò)流量分析的項(xiàng)目為實(shí)例,在第一期沒有嚴(yán)格實(shí)施軟件評審技術(shù),而第二期嚴(yán)格實(shí)施了軟件評審技術(shù),其中審查數(shù)據(jù)如下表。評審過程數(shù)據(jù)及質(zhì)量分析實(shí)例文件模塊計(jì)算基數(shù)(頁數(shù)KLOC)致命嚴(yán)重一般提示總和標(biāo)準(zhǔn)(目標(biāo)下限-上限)比例達(dá)標(biāo)與否SRS42112910310.80.5~1.10.738OKSTP58221512370.80.5~1.10.638OKHLD3441529190.70.5~0.90.559OKLLD205115929700.430.22~0.640.341OKUTP217158015950.430.22~0.640.438OKCodeReview50737215137910.627.43~13.87.580OKSITP50698112302165.653.86~8.444.320OK產(chǎn)生的效果為:1)產(chǎn)出量:單位開發(fā)人員的產(chǎn)出量由950行代碼人月(全流程)增長到1320行代碼人月(全流程),增長量為38.9%。關(guān)鍵原因在于大在減少了項(xiàng)目后期返工的工作量??紤]由于項(xiàng)目熟悉和學(xué)習(xí)曲線等的原因,實(shí)際的產(chǎn)出增長量應(yīng)該超過20%。2)產(chǎn)品質(zhì)量(遺留缺陷密度):我們從軟件系統(tǒng)的遺留缺陷率來分析系統(tǒng)的質(zhì)量情況。在半年的維護(hù)時間內(nèi),第一期代碼行為4萬行,嚴(yán)重缺陷有5個,一般缺陷有32個,嚴(yán)重缺陷發(fā)現(xiàn)密度為0.125個缺陷千行代碼,總遺留缺陷發(fā)現(xiàn)密度為0.925個缺陷千行代碼;第二期代碼行數(shù)為5萬行,嚴(yán)重缺陷有1個(屬于客戶需求問題引發(fā)的設(shè)計(jì)缺陷),一般缺陷有15個,嚴(yán)重缺陷發(fā)現(xiàn)密度為0.02個缺陷千行代碼,總遺留缺陷發(fā)現(xiàn)密度為0.32個缺陷千行代碼。因此嚴(yán)重缺陷發(fā)現(xiàn)密度改進(jìn)了84%,一般缺陷發(fā)現(xiàn)密度改進(jìn)了65.4%。3)客戶滿意度:第一期客戶嚴(yán)重不滿意,稱我們在做玩具,滿意度只有22%;第二期客戶滿意度大幅上升,稱我們是專業(yè)人士,非常敬業(yè),為他們所欽佩,滿意度達(dá)到了91%。因此滿意度提高了314%。最主要的是,我們采用了軟件評審技術(shù),規(guī)范了軟件開發(fā)過程的標(biāo)準(zhǔn),并積累了實(shí)際的軟件開發(fā)過程數(shù)據(jù),為后面的項(xiàng)目管理和過程控制提供了寶貴的軟件過程財(cái)富。四、總結(jié)和展望在實(shí)際工作中,我們以前掌握的過程數(shù)據(jù)不多,基本上一步一步摸索著前進(jìn),對于過程數(shù)據(jù)也在不斷的收集及整理中。對于評審技術(shù)而言,其中最重要的一點(diǎn)是采用多種實(shí)際工具和手段,如針對每個過程進(jìn)行評審的《缺陷檢查表》等,我們也在逐步地完善這套體系和過程數(shù)據(jù),從而為我們的過程改進(jìn)不斷提供支持。參考文獻(xiàn):[1]KarlWiegers.SevenDeadlySinsofSoftwareReviews.SoftwareDevelopment.1997.3[2]SteveMcConnell.SoftwareQualityatTopSpeed.SoftwareDevelopment.1996.8[3]沈備軍,宿為民譯.軟件同級評審.KarlE.Wiegers.PeerReviewsinSoftwareAPracticalGuide.機(jī)械工業(yè)出版社.2003.4[4]WattsS.Humphrey.IntroductiontothePersonalSoftwareProcess.人民郵電出版社.2002.10[5]盧有杰,王勇譯.項(xiàng)目管理知識體系指南(第三版).美國項(xiàng)目管理協(xié)會.AGuidetotheProjectManagementBodyofKnowledge,ThirdEdition(PMBOKGuide).電子工業(yè)出版社.2005.1[6]胡春哲,張潔等譯.CMM實(shí)踐應(yīng)用——Infosys公司的軟件項(xiàng)目執(zhí)行過程.PearsonEducation.CMMinPractice:ProcessesforExecutingSoftwareProjectsatInfosys.電子工業(yè)出版社.2002.8.1

        • 勁爆價:
          不限功能
          不限用戶
          1998元/年

        • 微信客服