賽事地址:https://www.prcv.cn/web/#/competitionsmeeting_competition_vision
打開(kāi)貨柜,取出一瓶飲料,再順手拿走兩袋零食,關(guān)門(mén)離開(kāi)。
對人來(lái)說(shuō),這是一次普通購物。對機器而言,要準確回答“拿了幾件、拿了什么”,仍要面對不少難題。
手部和身體遮擋商品、相似包裝難以區分、柜內燈光產(chǎn)生反光、拿取動(dòng)作快速連貫、多件商品同時(shí)移動(dòng)……用戶(hù)還可能拿起商品查看后重新放回。
如何讓機器真正看懂一段完整的交易視頻?
作為PRCV 2026競賽項目之一,由云從科技承辦并提供任務(wù)與數據的智能貨柜商品交易視頻識別挑戰賽,現面向高校、科研院所、企業(yè)團隊和個(gè)人開(kāi)發(fā)者公開(kāi)招募參賽者。
1萬(wàn)條訓練視頻、1000條驗證視頻、2.9萬(wàn)元獎金已經(jīng)就位。
歡迎挑戰真實(shí)零售場(chǎng)景中的視頻理解難題。
參賽隊伍需要分析一段完整的智能貨柜交易視頻,并輸出兩個(gè)結果:
本次交易共拿取多少件商品?
被拿取的具體商品SKU有哪些?
賽事僅提供原始交易視頻和交易級標簽,不提供逐幀檢測框、商品軌跡、動(dòng)作時(shí)間戳或時(shí)序標注。
參賽者可以采用視頻理解、多模態(tài)大模型、目標檢測與跟蹤、時(shí)序動(dòng)作分析、規則后處理等技術(shù)路線(xiàn),也可以組合多種方案完成挑戰。
智能貨柜正在進(jìn)入無(wú)人零售、園區補給、機場(chǎng)車(chē)站便利服務(wù)等場(chǎng)景。
真實(shí)環(huán)境中的識別任務(wù)遠比標準圖像分類(lèi)復雜:
· 手部、身體和柜門(mén)造成頻繁遮擋;
· 同品牌、同系列商品包裝高度相似;
· 塑料、玻璃和金屬包裝容易產(chǎn)生反光;
· 快速拿取導致有效識別畫(huà)面短暫;
· 多件商品可能同時(shí)移動(dòng);
· 拿取、查看、放回等動(dòng)作容易混淆。
模型既要識別商品外觀(guān),也要理解完整交易過(guò)程。
本次挑戰賽希望通過(guò)統一數據、統一任務(wù)和統一評測,推動(dòng)視頻理解、多模態(tài)大模型、細粒度商品識別、目標跟蹤和時(shí)序行為建模等技術(shù)在智能零售場(chǎng)景中落地,形成可復現、可評測、可迭代的解決方案。
本次比賽提供三類(lèi)數據:
訓練集:10000條真實(shí)智能貨柜交易視頻
開(kāi)放商品數量和SKU標簽,用于模型訓練與方案調試。
驗證集:1000條交易視頻
開(kāi)放商品數量和SKU標簽,用于本地驗證、格式校驗和提交前自測。
測試集:隱藏標簽評測
測試集僅提供視頻文件名和下載地址,不向參賽隊伍開(kāi)放商品數量及SKU標簽,由組委會(huì )統一進(jìn)行離線(xiàn)評測。
組委會(huì )還將提供官方SKU字典、標簽規范和提交樣例,統一商品標準名稱(chēng)和結果格式。
本次挑戰賽獎金總額為29000元。
一等獎1支隊伍:10000元
二等獎2支隊伍:每隊5000元
三等獎3支隊伍:每隊3000元
優(yōu)秀獎若干
獲獎隊伍將獲得競賽組織方頒發(fā)的證書(shū)。優(yōu)勝團隊擬受邀在PRCV 2026大會(huì )期間進(jìn)行技術(shù)報告、成果交流和頒獎。
賽事面向高等院校、科研院所、企業(yè)團隊和個(gè)人開(kāi)發(fā)者開(kāi)放,不收取報名費。
參賽者可以個(gè)人或團隊形式報名,每支隊伍建議不超過(guò)5人,并指定1名隊長(cháng)作為統一聯(lián)系人。
每名參賽者只能加入1支隊伍。重復組隊、冒名提交、惡意刷榜或其他影響賽事公平的行為,將被取消參賽資格或比賽成績(jì)。
報名郵箱:
prcv2026-smartcabinet@cloudwalk.com
郵件標題格式:
智能貨柜商品交易視頻識別挑戰賽_參賽隊伍名稱(chēng)
郵件正文請填寫(xiě):
· 隊伍名稱(chēng);
· 參賽單位;
· 隊長(cháng)姓名;
· 隊伍人數;
· 聯(lián)系電話(huà);
· 聯(lián)系郵箱。
|
隊伍名稱(chēng) |
|
|
|
|
|
|
參賽單位 |
|
|
|
|
|
|
角色 |
姓名 |
所屬單位 |
學(xué)歷/職稱(chēng) |
手機號 |
郵箱 |
|
隊長(cháng) |
|
|
|
|
|
|
隊員1 |
|
|
|
|
|
|
隊員2 |
|
|
|
|
|
|
隊員3 |
|
|
|
|
|
|
隊員4 |
|
|
|
|
|
|
指導老師(可選) |
|
|
|
|
|
報名表附件建議命名為:
智能貨柜商品交易視頻識別挑戰賽_參賽隊伍名稱(chēng).xlsx
報名截止時(shí)間:
2026年6月30日23:59:59
組委會(huì )確認隊伍信息并完成數據使用協(xié)議簽署后,報名正式生效。
本次比賽采用單輪賽制。
郵件將作為報名確認、數據清單發(fā)放、測試集通知、結果提交和成績(jì)復核的統一溝通渠道。
訓練集、驗證集和測試集視頻不會(huì )作為郵件附件發(fā)送。組委會(huì )將通過(guò)報名郵箱向隊長(cháng)發(fā)送Excel數據清單及下載說(shuō)明,參賽隊伍根據清單中的video_url下載原始視頻。
下載鏈接僅限參賽隊伍內部使用,禁止轉發(fā)、公開(kāi)或用于本賽事以外的用途。
測試集在結果提交截止前24小時(shí)發(fā)布,不提供任何標簽。
每條測試視頻的輸入和輸出要求如下:
輸入: 單條完整交易視頻。
輸出: 商品總件數count和商品SKU列表sku。
參賽方案無(wú)需輸出檢測框、商品軌跡、動(dòng)作時(shí)間戳或逐幀識別結果。
賽事允許使用公開(kāi)預訓練模型和公開(kāi)數據集。參賽隊伍應在最終技術(shù)說(shuō)明中如實(shí)披露外部模型、數據和工具來(lái)源。
賽事禁止使用:
· 非公開(kāi)的外部智能貨柜交易數據;
· 泄露的測試集數據或答案;
· 可能破壞比賽公平性的額外標簽;
· 針對測試集答案進(jìn)行人工硬編碼的方案。
6月15日
發(fā)布賽事信息,啟動(dòng)報名
6月30日
報名截止、參賽資格確認及數據使用協(xié)議簽署
7月1日
發(fā)布訓練集、驗證集、標簽規范、SKU字典和提交樣例
8月5日
發(fā)布測試集視頻清單,不提供測試標簽
8月6日
參賽隊伍提交測試集預測結果
8月9日
完成格式校驗、離線(xiàn)評分和異常結果復核,公布比賽排名
8月20日至22日PRCV 2026大會(huì )期間
擬邀請優(yōu)勝隊伍開(kāi)展技術(shù)交流、成果展示和頒獎
每支隊伍最多提交3次測試結果,以截止時(shí)間前最后一次有效提交為準。
參賽隊伍須提交一個(gè)壓縮包,文件命名格式為:
智能貨柜商品交易視頻識別挑戰賽_參賽隊伍名稱(chēng).zip
壓縮包內至少包含submission.csv,必要時(shí)可附readme.txt,說(shuō)明模型版本和提交備注。
submission.csv必須包含以下三列,列名區分大小寫(xiě):
· filename:測試視頻文件名;
· count:本次交易拿取的商品總件數;
· sku:拿取商品的SKU結果。
結果格式要求:
1. filename須覆蓋全部測試視頻,不得包含測試集之外的文件名;
2. count須填寫(xiě)非負整數;
3. 多個(gè)SKU使用半角加號“+”連接;
4. 同一SKU拿取多件時(shí)須重復填寫(xiě);
5. 沒(méi)有拿取商品時(shí),count填寫(xiě)0,sku填寫(xiě)NONE;
6. SKU名稱(chēng)須使用官方SKU字典中的標準名稱(chēng);
7. count應與sku展開(kāi)后的商品件數保持一致。
提交郵箱:
prcv2026-smartcabinet@cloudwalk.com
排名靠前的隊伍須按照組委會(huì )要求,補充提交完整工程代碼、模型權重、推理腳本、運行環(huán)境說(shuō)明,以及外部數據和模型使用說(shuō)明。
如提交結果無(wú)法復現,組委會(huì )有權取消該隊成績(jì)并順延名次。
比賽從商品數量識別和SKU識別兩個(gè)維度進(jìn)行評分。
逐條判斷預測的count是否與真實(shí)商品件數完全一致,再計算全部測試視頻的平均準確率。
SKU結果按照商品件數展開(kāi)后,以多重集合方式計算F1分數。
例如,同一SKU實(shí)際拿取2件,模型只識別出1件,將同時(shí)產(chǎn)生漏識別結果。若真實(shí)結果和預測結果均為NONE,該條視頻SKU F1記為1。
最終得分 = 商品數量準確率 × 60% + SKU識別F1 × 40%
如總分相同,依次比較:
1. 交易完全正確率,即商品數量和SKU均完全正確的視頻占比;
2. 有效結果提交時(shí)間,提交較早的隊伍排名靠前。
賽事數據僅限本次比賽和相關(guān)學(xué)術(shù)研究使用,禁止轉發(fā)、出售、公開(kāi)上傳或用于商業(yè)產(chǎn)品開(kāi)發(fā)。
參賽隊伍提交的算法、代碼、模型權重、技術(shù)方案及相關(guān)知識產(chǎn)權歸參賽隊伍所有。組委會(huì )僅在成績(jì)復核、結果復現、技術(shù)交流和賽事宣傳范圍內使用相關(guān)材料。
參賽隊伍應保證所提交方案及使用的數據、模型和工具不侵犯第三方知識產(chǎn)權。因使用不當產(chǎn)生的爭議,由參賽隊伍承擔相應責任。
組委會(huì )有權對異常提交、疑似數據泄露、人工硬編碼測試集答案等情況進(jìn)行復核,并取消違規成績(jì)。參賽隊伍對成績(jì)存在異議時(shí),可在組委會(huì )規定時(shí)間內提出復核申請。
聯(lián)系人:劉盛中
聯(lián)系電話(huà):18580088822
聯(lián)系郵箱:liushengzhong@cloudwalk.com
賽事報名及結果提交郵箱:
prcv2026-smartcabinet@cloudwalk.com
智能貨柜里的每一次開(kāi)門(mén)、拿取、放回和關(guān)門(mén),都包含對視覺(jué)感知、商品識別、時(shí)序理解與推理能力的綜合考驗。
1萬(wàn)條真實(shí)交易視頻已經(jīng)準備就緒。
他究竟拿走了什么?
答案,等你來(lái)解。
7月10日,2024明月湖·π全球創(chuàng )新大會(huì )人工智能大模型創(chuàng )新發(fā)展論壇在重慶兩江新區召開(kāi),論壇以“AI驅動(dòng) 智領(lǐng)未來(lái)”為主題,聚焦人工智能大模型的創(chuàng )新發(fā)展,吸引了眾多業(yè)內專(zhuān)家學(xué)者、企業(yè)家和政府代表共襄盛會(huì )。云從科技在會(huì )上發(fā)布從容智能審查大模型方案。
周一到周五9:30-18:00(北京時(shí)間)

商務(wù)合作:business@cloudwalk.com

媒體合作:Media@cloudwalk.com

渠道合作:business_partner@cloudwalk.com

人才招聘:zhaopin@cloudwalk.com