授課講師:Kadin 老師
課程時數:2 小時 35 分鐘
上線日期:已經全數上線
100元折扣:KA100
原價
授課講師:Kadin 老師
課程時數:2 小時 35 分鐘
上線日期:已經全數上線
100元折扣
KA100
優惠價
原價
實用技術組合包:
Python 爬蟲 X Excel 自動化
組合包優惠 6 折
實用技術組合包:Python 爬蟲 X Excel 自動化
組合包優惠 6 折
=
原價
課程介紹
課程大綱
老師介紹
課前問答
這網路爬蟲課程全面涵蓋了從基礎到進階的技能,旨在幫助學生掌握數據收集與分析的關鍵技巧。
從探索網路爬蟲的基本原理,到使用 Selenium 和 BeautifulSoup 等工具自動化瀏覽和解析網頁,再到利用 Plotly 進行數據可視化,每章節都精心設計,以確保學生能夠理解和應用所學知識。
首先,學生將學習如何深入理解 HTML 結構,並使用 Chrome 開發工具輕鬆解析網頁內容。接著,他們將建立理想的開發環境,並通過 Selenium 和 BeautifulSoup 進行實際的網路爬蟲操作,自動化地收集數據。課程還包括 Pandas 基礎教學,教導學生如何高效地處理和整合數據,以及使用 Plotly 進行各種數據分析和可視化。
此外,課程特別設計了5 個實作專案,包括 Google Trends 熱門話題、電商市場調查、博客來書籍數據分析、便宜機票抓取以及 Google Map 上的旅遊景點、咖啡廳、餐廳爬蟲,讓學生能夠應用所學知識解決實際的數據抓取和分析問題。
在這一部分,我們將從最基本的開始,探索網路爬蟲的世界。首先,我們將學習如何使用 Python 和相關庫來發起網路請求,並解析 HTML 文件來提取所需數據。您將學會使用 BeautifulSoup 和 Selenium 這兩個強大的工具,來解析和自動化瀏覽網頁。同時,我們將深入 Chrome 開發工具,以及建立您理想的開發環境,確保順暢的工作流程。
Google Trends 提供了寶貴的趨勢數據,本章節將教您如何利用 Selenium 技巧來抓取各種搜尋趨勢。我們將解析和整理這些數據,並使用 Plotly 來動態可視化您的搜尋數據,以便更深入地理解和展示趨勢變化。
在電商市場調查部分,我們將探索如何從 momo 電商網站上提取產品連結清單,並抓取詳細的產品資料。這包括多頁面數據抓取和使用 Selenium 自動化遍歷網頁的技巧。最後,我們將使用 Plotly 進行數據分析,包括品牌商品總數、銷售量和價格分佈的洞察,幫助您深入了解市場動態。
博客來作為台灣最大的網上書店,有豐富的書籍資料。本章節將帶您揭開博客來的數據世界,從提取書籍 ID 清單到抓取各類書籍的詳細資料。我們將深入挖掘書籍資訊,並將所有數據整合至 Excel 表格中。最後,利用 Plotly 進行數據分析,包括評論與評分統計、書籍分類分佈及新書趨勢分析。
在本章節中,我們將探索如何使用Playwright 自動化生成機票爬蟲程式碼,以及抓取各城市的最便宜機票價格。您將學會一次性抓取多個國家各城市的機票信息,並利用 Plotly 將這些數據視覺化,使各目的地的便宜機票一目了然。
在這一章節中,我們將使用 Selenium 進階操作技巧,高效抓取 Google Map 上的旅遊景點、咖啡廳和餐廳資訊。我們將解析和整理這些數據,並使用 Plotly 進行視覺化,展示景點、咖啡廳和餐廳的評分排名和位置分佈。
這門課程將為學生提供豐富的實戰經驗和技能,這些技能不僅適用於學術研究和專業發展,也能夠應用於日常生活中的各種數據收集和分析任務。
網路爬蟲基礎
環境建置與數據處理
Google Trends
熱門話題爬蟲
電商爬蟲
市場調查
博客來
爬蟲與大數據分析
便宜機票爬蟲
Google Map
旅遊景點、咖啡廳、餐廳爬蟲
Python 程式基礎
HTML & CSS 基礎
Kadin Chung 鍾榮達
目前在公司負責系統分析與程式設計,同時也在做線上課程講師。
碩士畢業之後在外商系統整合服務公司上班多年,到自己設立軟體公司,第一個合作售出的系統是一套網路管理系統,可以幫助客戶配置,維護和測試數千台思科網路設備。
除此之外,Kadin在大型項目方面經驗豐富,例如馬拉松線上報名系統,車行租賃管理系統等。
在Kadin創業的過程中不斷地促使自己學習新的技能,並且知道什麼是「學習新技能」最有效的方法,他樂於分享一切所學的知識和實務經驗,也因為這份樂情,帶領 Kadin 來到 MasterTalks ,他將會透過高品質且有效率的方式分享他所學的一切技術和知識!
使用規則
1.找揪團、對於課程內容有疑問想詢問老師或提建議,歡迎留言。
2.內容不得涉及侮辱或具不雅文字,請勿張貼廣告,本平台保留直接刪除不適當留言之權利。
3.揪團者請自行創建並聯繫,本平台不介入干涉或負責。
4.如有看課、發票、退費申請等疑問,請參考官網【常見問題】,或連繫本平台客服信箱。