小米汽車取得數據壓縮網絡模型構建專利,壓縮后的小規模數據集能夠極大地減少神經架構搜索中訓練不同模型所需的計算量
時間:
小采
股票
2024年1月27日消息,據國家知識產權局公告,小米汽車科技有限公司取得一項名為“一種基于數據壓縮的網絡模型構建方法、系統和介質“,授權公告號CN111008693B,申請日期為2019年11月。
專利摘要顯示,一種基于數據壓縮的網絡模型構建方法、系統及介質,該方法包括:S100,構建用于對神經架構搜索的原始數據集進行數據壓縮的蒸餾器;S200,將蒸餾器用于合成高密度蒸餾數據;S300,將合成的高密度蒸餾數據用于進行神經架構搜索,從而搜索出最優網絡模型。本發明通過蒸餾器來壓縮數據集,通過去除用于神經架構搜索的大規模數據集中的冗余信息,將大規模數據集轉化為小規模數據集,并盡量多地保留大規模數據集中的信息。壓縮后的小規模數據集能夠極大地減少神經架構搜索中訓練不同模型所需的計算量,加速模型搜索。