什么是數(shù)據(jù)集？數(shù)據(jù)集，又稱數(shù)據(jù)集、數(shù)據(jù)集或數(shù)據(jù)集，是指由數(shù)據(jù)組成的一組集合。通常以數(shù)據(jù)集或數(shù)據(jù)集的形式。每列代表一個特定的變量。每一行對應(yīng)一個成員的數(shù)據(jù)集。它列出每個變量的值，例如對象的高度和重量或隨

什么是數(shù)據(jù)集？

數(shù)據(jù)集，又稱數(shù)據(jù)集、數(shù)據(jù)集或數(shù)據(jù)集，是指由數(shù)據(jù)組成的一組集合。通常以數(shù)據(jù)集或數(shù)據(jù)集的形式。每列代表一個特定的變量。每一行對應(yīng)一個成員的數(shù)據(jù)集。它列出每個變量的值，例如對象的高度和重量或隨機(jī)數(shù)的值。每個值都稱為數(shù)據(jù)。數(shù)據(jù)集的數(shù)據(jù)可以包括與行數(shù)相對應(yīng)的一個或多個成員。

機(jī)器學(xué)習(xí)中訓(xùn)練集、驗證集(開發(fā)集)、測試集如何劃分？需要注意什么？

首先，我們需要了解訓(xùn)練集、驗證集和測試集的含義。簡單地說：

1。訓(xùn)練集用來訓(xùn)練模型并調(diào)整相應(yīng)的參數(shù)（如權(quán)重）。驗證集用于調(diào)整模型的超參數(shù)（如體系結(jié)構(gòu)、訓(xùn)練前已確定的參數(shù)，如有多少高度）層，這就是為什么也稱為開發(fā)集的原因）

3。測試集是用來獲得最終模型的性能，比如精度

有了這個常識，你就知道怎么劃分了。例如，如果你有一個數(shù)據(jù)集，你需要先做它

，如下圖所示，只有有了這個基礎(chǔ)，測試和驗證集才有意義。

至于如何劃分，我們需要看具體案例，參考斯坦福大學(xué)的深度學(xué)習(xí)課程https://cs230-stanford.github.io/train-dev-test-split.html沒有具體的標(biāo)準(zhǔn)，但是盡量使驗證集和測試集不要太少，例如1000000個圖片集，驗證和測試集不應(yīng)小于10000，即1%。如果數(shù)據(jù)量不夠大，通常是80-10-10的比例：

注意：隨機(jī)不是完全隨機(jī)的，它需要保證可重復(fù)性

好的，關(guān)這個話題就到此為止。如果遇到類似問題，如何找到正確答案？首先，你需要找到第一手資料。與其在百度上搜索，不如直接找到基本信息。在這種情況下，斯坦福學(xué)校的課程作為輸入，所以你不會誤入歧途。

歡迎關(guān)注“行知漫步”，共同學(xué)習(xí)和探討新技術(shù)的應(yīng)用