如何在notebook使用FiftyOne 可以開啟notebook?
僅包含不匹配的車輛預(yù)測的視圖。如果你正在使用本演示中的notebook版本,則將看到做出不匹配預(yù)測的最常見原因是標簽不匹配。這并不奇怪,因為所有這三個類都在超類vehicle中?ㄜ嚭推囋谌斯ぷ⑨尯湍P皖A(yù)測中常常混淆。但是,除了容易混淆之外,讓我們來看一下我們的預(yù)測視圖中的前兩個示例。
圖片右側(cè)的截斷汽車的邊框太小。預(yù)測要準確得多,但沒有達到IoU閾值。來自COCO 2017檢測數(shù)據(jù)集的原始圖像。COCO 2017檢測數(shù)據(jù)集:https://cocodataset.org/#detection-2017上面的圖片中發(fā)現(xiàn)的第一個樣本有一個注解錯誤。圖像右側(cè)的截斷汽車的真實值邊界框(粉紅色)太小。預(yù)測(黃色)更為準確,但未達到IoU閾值。
樹木陰影下的汽車預(yù)測箱是正確的,但沒有在真實情況中標出。在我們不匹配的預(yù)測視圖中找到的第二個樣本包含另一種注釋錯誤。實際上,這是一個更為嚴重的問題。圖像中正確預(yù)測的邊界框(黃色)沒有相應(yīng)的真實性。在樹蔭下的汽車根本沒有標注。手動解決這些錯誤超出了本示例的范圍,因為它需要很大的反饋回路。FiftyOne致力于使反饋回路成為可能(且高效),但現(xiàn)在讓我們集中討論如何回答有關(guān)模型性能的問題,并確認我們的模型確實經(jīng);煜财、小汽車和卡車。我們將通過重新評估合并到單個vehicle標簽中的公共汽車,小汽車和卡車的預(yù)測來做到這一點。下面的代碼創(chuàng)建了這樣一個視圖,將視圖克隆到一個單獨的數(shù)據(jù)集中,這樣我們將獲得單獨的評估結(jié)果,并評估合并的標簽。vehicle_labels = {
label: "vehicle" for label in ["bus","car", "truck"]
}
merged_vehicles_dataset = (
vehicles
.map_labels("ground_truth", vehicle_labels)
.map_labels("predictions", vehicle_labels)
.exclude_fields(["tp_iou_0_75", "fp_iou_0_75", "fn_iou_0_75"])
.clone("merged_vehicles_dataset")
)
evaluate_detections(
merged_vehicles_dataset, "predictions", gt_field="ground_truth", iou=0.75)
session.dataset = merged_vehicles_dataset
僅包含從車輛視圖克隆的合并車輛的數(shù)據(jù)集,F(xiàn)在,我們獲得了原始分割的公交車,汽車和卡車檢測以及合并檢測的評估結(jié)果,F(xiàn)在,我們可以簡單地比較原始評估中的真陽性數(shù)與合并評估中的真陽性數(shù)。original_tp_count = vehicles.sum("tp_iou_0_75")
merged_tp_count = merged_vehicles_dataset.sum("tp_iou_0_75")
print("Original Vehicles True Positives: %d" % original_tp_count)
print("Merged Vehicles True Positives: %d" % merged_tp_count)
我們可以看到,在合并公共汽車、汽車和卡車標簽之前,有1431個真陽性。將三種標簽合并在一起產(chǎn)生了1515個真陽性結(jié)果。Original Vehicles True Positives: 1431
Merged Vehicles True Positives: 1515
我們能夠證實我們的假設(shè)!盡管很明顯。但是,我們現(xiàn)在有了以數(shù)據(jù)為基礎(chǔ)的理解,可以了解此模型的常見故障模式,F(xiàn)在,整個實驗可以與其他人共享。在notebook中,以下內(nèi)容將截屏最后一個活動的App窗口,因此其他人可以靜態(tài)查看所有輸出。session.freeze() # Screenshot the active App window for sharing
總結(jié)
notebook電腦已成為執(zhí)行和共享數(shù)據(jù)科學的流行媒體,尤其是在計算機視覺領(lǐng)域。但是,從歷史上看,使用視覺數(shù)據(jù)集一直是一個挑戰(zhàn),我們希望通過像FiftyOne這樣的開放工具來應(yīng)對這一挑戰(zhàn)。notebook革命在很大程度上仍處于起步階段,并將繼續(xù)發(fā)展并成為在社區(qū)中執(zhí)行和交流ML項目的更有說服力的工具,這在一定程度上歸功于FiftyOne!感謝你的關(guān)注!該FiftyOne項目上可以在GitHub上找到。
請輸入評論內(nèi)容...
請輸入評論/評論長度6~500個字
最新活動更多
-
即日-11.13立即報名>>> 【在線會議】多物理場仿真助跑新能源汽車
-
11月20日火熱報名中>> 2024 智能家居出海論壇
-
11月28日立即報名>>> 2024工程師系列—工業(yè)電子技術(shù)在線會議
-
12月19日立即報名>> 【線下會議】OFweek 2024(第九屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會
-
即日-12.26火熱報名中>> OFweek2024中國智造CIO在線峰會
-
即日-2025.8.1立即下載>> 《2024智能制造產(chǎn)業(yè)高端化、智能化、綠色化發(fā)展藍皮書》
推薦專題
- 高級軟件工程師 廣東省/深圳市
- 自動化高級工程師 廣東省/深圳市
- 光器件研發(fā)工程師 福建省/福州市
- 銷售總監(jiān)(光器件) 北京市/海淀區(qū)
- 激光器高級銷售經(jīng)理 上海市/虹口區(qū)
- 光器件物理工程師 北京市/海淀區(qū)
- 激光研發(fā)工程師 北京市/昌平區(qū)
- 技術(shù)專家 廣東省/江門市
- 封裝工程師 北京市/海淀區(qū)
- 結(jié)構(gòu)工程師 廣東省/深圳市