1樓：網友
你的思路是正確的，你可以寫正規表示式把頁面裡需要的資訊提取出來。
2樓：網友
如有疑問可發私信給我。
3樓：八爪魚大資料
網頁資訊利用採集器工具也可以進行爬取，這類工具也可以實現正則格式化處理，通過正規表示式提取自己所需要的資訊，
js爬蟲如何實現網頁資料抓取
4樓：草原上之狼
如果你的**頁面經常更新，爬蟲就會更加頻繁的訪問頁面，優質的內容更是爬蟲喜歡抓取的目標，尤其是原創內容。
如果你做了許多努力仍沒有被爬蟲抓取，可以看一下老漁哥給出的兩點建議：
1、不建議站點使用js生成主體內容，如過js渲染出錯，很可能導致頁面內容讀取錯誤，頁面則無法被爬蟲抓取。
2、許多站點會針對爬蟲做優化，建議頁面長度在128k之內，不要過長。
爬蟲如何提取網頁中需要點選才能顯示的內容
5樓：匿名使用者
你可以試試forespider資料採集軟體，他有自己的js引擎，所以支援js動態生成頁面採集。
像是你說的需要點選才能顯示的內容，就是通過js寫的，那麼forespider就能採集到，建議你先下個免費版試試看，我認為還是很好用的。
python爬取網頁資訊，怎麼獲取到網頁的真實url？？
6樓：吾亦煩掏糞
首先要知道這個url是用get還是post方法，然後看看請求頭或者url有沒有攜帶什麼會產生變化的資料，你單獨請求ajax頁面的時候是要帶上這些資料的。
7樓：網友
你總不能指望我用說那兩句話把python爬蟲**爬取資訊的過程給說完吧。
python這門語言在爬蟲方面的優勢是簡單，有強大的庫，而且屬於膠水語言。
至於如何獲取自己想要的資訊，等你會寫一些爬蟲**的時候就知道了。
8樓：八爪魚大資料
網頁url可以通過獲取到html原始碼後正規表示式提取url。
python爬蟲？資料提取？
9樓：網友
理論上可以，實際要看目標網頁的情況，反爬蟲機制、js動態重新整理抓取都是比較頭疼的。
當然如果不考慮效率，selenium 之類的網頁自動化方式，通常都可以實現。
10樓：side香水
嗯嗯，可以的，爬蟲的基本功，拼接url 或者，當引數傳過去。
11樓：陽光的雷咩咩
可以做到，當然要不斷除錯才行。
12樓：八爪魚大資料
可以的，你可以用selenium之類的工具實現，如果有**基礎，可以直接抓包獲取，只要你通過瀏覽器訪問到的資料，都是可以抓取到的。
python爬蟲如何獲取網頁的js動態生成的內容？
13樓：網友
對比一下過濾和沒有過濾的標籤，看看哪些屬性不同，根據這些不同的屬性來選擇。
vb如何提取網頁原始檔資料，vb怎麼提取網頁原始碼的指定內容
可以實現,不過難了點.記得以前看過個用來讀網頁密碼的程式用vb寫的.其中用的了個比較的api函式可以讀網頁元素的.程式還在密碼找不到了 gethtmlpassword vb怎麼提取網頁源 的指定內容 如果要提取的內容有參照就好辦 用vb提取網頁中的資料 一般都是採用httpxml的。用webbrow...
如何批量獲取網頁標題，求批量提取網站標題軟體（title
我今天就在研究這個 我給整明白了 你可以用火車頭採集 只採集title資訊就可以了 最後儲存為csv格式的檔案就行 用excel就能開啟 如碧譽高果還不會，聯絡我q，名。為什麼今天不下雨。每次都這樣 即墨吧 貼吧今天我沒回家。清河吧 貼吧。今天凌晨發生乙個不可告人的秘密。博山吧 貼吧求助啊 昨天維護...
怎麼收藏網頁啊，怎麼收藏網頁
ctrl d即可 點一下工具欄下的 收藏夾 再點 新增 直接點網頁上的收藏就可以了 點過之後直接點確定 怎麼收藏網頁 pinbox 網路收藏工具，集合所有的收藏，定期整理收藏，還可以很方便的收藏網路上任何 文字，也可以一鍵匯入瀏覽器書籤，支援分類管理，拖拽卡片移到到收藏夾，多級管理，找內容也方便。頁...