2013年的暑假,距离比赛开始时间还有大约一个月的时间。
“模型的训练过程需要将所有的权重,数据和许多中间过程都放入GPU中进行处理。因而GPU的显存大小格外重要。”孟繁岐叹了口气,“即便是我们购买的旗舰690,也太小了,只有4G大小。”
比起后来被美国禁止卖给华国的A100-80G,690不说其他性能,单显存就少了20倍。孟繁岐如今只能可怜巴巴地每次使用16张图片对模型进行迭代。
“一次十六张,一次循环要接近一百万次才能更新完整个数据集。而想把模型收敛好,上百次循环又是少不了的。”
孟繁岐估算了一下,这个版本出一次结果要接近20天,最后的训练过程确实大概消耗了三周左右以收敛到现在的这个性能。
好在IMAGENET在后来基本成为了每个算法工程师必调参的练手数据集,孟繁岐自己就曾无数次刷榜,自然是轻车熟路,清楚各类参数的大概设置。
这为他至少节省了一两個月的珍贵时间。
即便一次训练需要三周之久,孟繁岐却仍旧赶在比赛开始之前就已经准备好了一版模型。
看着训练出来的模型最终性能达到了预期,孟繁岐心中的一块大石总算落地了。
这几个月来,他唯一担心的一件事情就是多年前的老框架会出一些他意料之外的问题,导致最终的结果不能和理论预期吻合。
一旦这种事情发生,找到问题所在并测试解决的代价就太大了。倘若不能够及时解决,会很大影响到他初期的规划。
眼下的结果大约在4.9%的top-5错误率,这个版本比后世论文中的性能要稍差了一丁点,但好在仍旧强于赛事方给出的人类标准了。
一般来说,比赛前是不会公布比赛所使用的具体数据的。只是IMAGENET比赛比较特殊,一千多万量级的图片,总不可能办一两次比赛就舍弃掉,不再使用。
因而每届比赛所用的数据是变化很小的,只是具体赛道,所竞争的内容和评判的方式常会有所调整。
虽说IMAGENET休赛的时期其实也可以提交结果,孟繁岐现在就可以把这个结果上传上去,夺取第一的位置,但关注度毕竟不可与赛时的激烈竞争同日而语。
();() 与此同时,唐璜也终于开始意识到事情的走向已经远远偏离了他的预料。
“我记得之前查到AlNet在这上面的准确率不到85吧,你现在这个已经特么超过95了啊。”唐璜第一次来查看结果的时候完全不敢相信这个事实。
“你确定没搞错?别忽悠兄弟啊。兄弟书读的少,很容易被骗的。”唐璜此刻的心态很复杂,很希望这是真的,但由于事情实在显得太美好,反而很难相信。
“是假的,我骗你的。”孟繁岐翻了个白眼,“我加了特技,里面都是化学的成分。”
“不会吧,我亲眼看这性能一路上收敛上来的。”唐璜又翻了翻模型训练的日志,声音之中带了三分委屈。他刚刚已经在脑补自己抱紧大腿,走上人生巅峰的场景了。
这就是患得患失的可怜人啊,不敢相信,却又害怕是假的。
“虽然我没有测试集的真实答案,但是我从训练集里划了百分之5出来没有使用,作为验证的办法。”孟繁岐对这个数据集的方差可以说是了然于胸,95%的数据用于训练,5%的数据用于测试已经是相当稳妥而保守的比例了。
请勿开启浏览器阅读模式,否则将导致章节内容缺失及无法阅读下一章。
海贼:阿卡姆肄业的小丑巴基 大明:我杨宪,真的治扬! 全职法师之魔法天赋 纵目 陨落星辰: 主宰:虫族崛起 什么叫世界名帅啊 大唐第一逆子 华娱之开局给周董上上对抗 当场怒喷哥哥,这解说不想干了? 异常魔兽见闻录 你是我的满世欢喜 火枪洗明路 神秘复苏之我没有外挂 明日方舟之铁与血 前任都是天后,我火了 天骄退婚,我提取词条修行 无限超神:抬头看见云霄天庭 自遮天世界开始 我以道种铸长生
加勒比海盗的戴维琼斯坠落海底后,竟然与一艘奇特的黑船恐怖幽灵号,重生在海贼世界的东海,并获得了能够收割恐惧情绪,来强化自身与恐怖幽灵号的能力。而他曾经身为深海阎王的大部分力量,以及海洋女神赠予的力量,都储存于鱼人岛附近的飞翔荷兰人号上,只要取回这部分力量,他将再度化身在海上引渡亡灵的不死之身!于是,一个令人闻风丧胆的船长,驱使着能吞噬船体碎片的黑暗之船,航行在疾风骤雨间,朝着鱼人岛进发,给伟大航道上的人们带去噩梦与恐慌!...
机械飞升当真不痛?血肉苦修当真无用?是什么让深空的武器堡垒静静悬浮,是什么让暴躁的怪物成群出没。为何少女失声痛哭?为何妖灵半夜叩首,血流成河?巍峨遗迹,地底火山,广袤沙漠,海面上飘着的紫色花朵。气脉极限。仙人之躯。苏北凝望着眼前的虚空巨兽我真不是你们以为的天才,不知我顶不顶的住。各位书友要是觉得我真不是你们以为的天才还不错的话请不要忘记向您QQ群和微博里的朋友推荐哦!...
在这个卡牌决斗盛行的世界,掌握力量的卡师地位崇高。可自大灾厄以来,世界各国卡师文明断层,许多鬼怪神话古籍消失在历史中。当所有人在寻找遗迹磨炼技术获得知识时,江尘已经打造出一张张独一无二的东方神话卡牌!发动卡牌!鬼门关!领域展开!忘川河!死者复生!我命令,场地卡融合,十殿阎王归位!具现吧,幽冥地府!当遮天蔽日的阴影压来时,江尘看着跪倒在地的卡师,摇了摇头。连这点威压都扛不住,太弱了。...