wget抓取網頁內容疑問!? - Linux

Margaret avatar
By Margaret
at 2017-07-10T18:47

Table of Contents

各位板友大家好，

想請問如果要用wget抓取網頁內容該如何操作呢?
我需要抓取http://24.23.159.200:8603/頁面的內容，
但是用wget只能抓到html的標籤，
懇請板上先進提供指引，謝謝大家。

--

--
Tags: Linux

All Comments

Jessica avatar
By Jessica
at 2017-07-11T09:42
curl
Jack avatar
By Jack
at 2017-07-12T04:43
那個算是動態網頁內容，裡面有 js 語法讓瀏覽器去進行
Ingrid avatar
By Ingrid
at 2017-07-16T02:51
內容大概就是每隔一秒對某個 url 請求
timeout 1 curl http://24.23.159.200:8603/stream
測試看看
Agnes avatar
By Agnes
at 2017-07-20T09:50
謝謝二位，真的可以了!curl為什麼可以撈到後端產生的資料呢?
Poppy avatar
By Poppy
at 2017-07-21T14:43
如果我要寫個爬蟲程式，不用libcurl的話能夠做到嗎?
其實我想問的是這件事 XDDD
Delia avatar
By Delia
at 2017-07-22T00:38
這個撈動態網頁資料的方式有沒有專有名詞呢?
Madame avatar
By Madame
at 2017-07-26T14:52
主要是好像用python或node.js相對於Qt好像比較好爬蟲..
Frederic avatar
By Frederic
at 2017-07-30T19:45
但是因為需要直接用qt程式碼進行爬蟲，所以想和板友請教一下
Skylar Davis avatar
By Skylar Davis
at 2017-08-03T09:52
就只是去分析網頁的行為啊
Steve avatar
By Steve
at 2017-08-06T17:26
他做的事情就是去 http://24.23.159.200:8603/stream
Eartha avatar
By Eartha
at 2017-08-08T12:47
拉資料 然後填充到網頁裡
Edwina avatar
By Edwina
at 2017-08-11T23:54
就是說 你要的網頁只是骨架 實際上內容是用 js
Hedy avatar
By Hedy
at 2017-08-14T00:38
拉東西下來 然後填進骨架 但是 wget 不會去處理 javascript
所以你拉下來會是只有一點 html
如果你用 wget http://24.23.159.200:8603/stream 也是有的
Quanna avatar
By Quanna
at 2017-08-17T19:34
疑，對耶!wget也是有的，因為我一開始沒有加stream..
Rebecca avatar
By Rebecca
at 2017-08-22T12:00
原來有這種東西...XD
Candice avatar
By Candice
at 2017-08-25T08:26
謝謝CP64大喔 ^^

如何於 Runlevel 3 自動執行script？

Ingrid avatar
By Ingrid
at 2017-07-10T11:52
我寫了一個自動化測試的Script，它會自動執行測試後重新開機，接著繼續測試， 然後不斷循環。 由於效能考量，我想要讓它在runlevel3 (init 3)執行，但我一直找不到方法可以在 開機到runlevel 3後，自動執行我的script。 我知道可以透過system service方式，但這方式無 ...

libreoffice或openoffice轉micro office

Freda avatar
By Freda
at 2017-07-09T08:22
只是要簡單的powerpoint報告 但是老師要求交microoffice的版本 因為在ubuntu 做報告比較方便 所以只能用libre或open 想問一下 用libre還open那一個報告轉成micro版本 排版比較不會亂掉? - ...

AR242x/AR542無線網卡無法驅動？

Dorothy avatar
By Dorothy
at 2017-07-08T23:59
我用得電腦是EPC-1000HD，因為32bit所以我找了CentOS7 32bit(Altarch)灌， 只有簡單幾個工具，沒有圖形介面。 同一台電腦有裝過CentOS 6.7，ubuntu 15.4和16.04，都可以抓到網卡 就只有CentOS7不行，ifconfig -a都沒有看到。 上網看到這部 ...

新手挑練習機問題

Christine avatar
By Christine
at 2017-07-08T00:24
Vm玩ㄧ陣子，有在網路上找到ㄧ台二手實體機想練習linux 網路上找了資料，但沒有很明確的說有支援，所以問問看 Cpu:intel xeon e5430 主板：Asus p5kpl-am 顯卡：技嘉nvidia GeForce gt210 1g 請問這樣的配備可以安裝centos7嗎？ 想在問 ...

Ubuntu 16.04 雙螢幕設定

Damian avatar
By Damian
at 2017-07-07T20:58
各位大大好 小弟最近買兩個螢幕 但是設定出了問題 無法達成雙螢幕的效果 主機板是用 華碩 B150 PRO GAMING CPU是用 INTEL Core i7-6700 沒有裝顯卡 吃CPU的內顯 螢幕都是 ASUS VP247HA BIOS裡面有個混合螢幕的選項 我有開啟(enable) ...