隱藏門設(shè)計(jì) html表單有隱藏域,python爬蟲怎么post?
html表單有隱藏域,python爬蟲怎么post?現(xiàn)在很多網(wǎng)站都是這樣設(shè)計(jì)的。只有三個(gè)表格,但提交時(shí)有七個(gè)。為了抓取這樣的網(wǎng)站,python必須提交與瀏覽器相同的內(nèi)容。畢竟,爬蟲也是在模擬瀏覽器的行
html表單有隱藏域,python爬蟲怎么post?
現(xiàn)在很多網(wǎng)站都是這樣設(shè)計(jì)的。只有三個(gè)表格,但提交時(shí)有七個(gè)。為了抓取這樣的網(wǎng)站,python必須提交與瀏覽器相同的內(nèi)容。畢竟,爬蟲也是在模擬瀏覽器的行為
隱藏在表單中的項(xiàng)目可以通過瀏覽器獲取捕獲包。這些隱藏提交的項(xiàng)目大多在以前訪問過的文件中會(huì)有,偶爾會(huì)有一些找不到的東西,這與時(shí)間有關(guān)
只要爬蟲的行為與瀏覽器的行為相同,爬蟲就可以實(shí)現(xiàn)