python - HJs 找樂趣

【程式工具-PYTHON】如何在vscode使用python編輯

troy801125 — Thu, 24 Feb 2022 07:44:17 +0000

在使用vscode編輯器時，需先安裝python工具 !!

安裝Python

下面給出一些常用版本的下載鏈接快速安裝python

如果你使用的是Windows 7版本，那麼是不能使用3.8及以上的版本的，建議下載3.7；此外32bit和64bit的選擇與你的操作系統對應（不出意外，現在應該都是64bit吧）

版本	下載地址
3.7 (32bit) (Win7 32位用戶建議)	https://www.python.org/ftp/python/3.7.9/python-3.7.9.exe
3.7 (64bit) (Win7 64位用戶建議)	https://www.python.org/ftp/python/3.7.9/python-3.7.9.exe
3.8（32位）	https://www.python.org/ftp/python/3.8.10/python-3.8.10.exe
3.8（64位）	https://www.python.org/ftp/python/3.8.10/python-3.8.10.exe
3.9（32位）	https://www.python.org/ftp/python/3.9.10/python-3.9.10.exe
3.9（64位）	https://www.python.org/ftp/python/3.9.10/python-3.9.10-amd64.exe
3.10（32位）	https://www.python.org/ftp/python/3.10.2/python-3.10.2.exe
3.10（64位）	https://www.python.org/ftp/python/3.10.2/python-3.10.2-amd64.exe

這裡我以Python 3.10.2，也就是最新版為例，下載完成後雙擊打開安裝包，
先勾選下方的Add Python 3,10 to PATH將python安裝路徑加入到環境變量中，然後點擊Install Now，其他東西不用修改保持默認就好

安裝完成後，點擊close關閉安裝程序，此時已經能夠在開始菜單中看到新加的程序

至此，python的安裝就完成了，完成後就可以使用python。

安裝 VScode

Visual Studio Code 是一個輕量級但功能強大的源代碼編輯器，可在您的桌面上運行，適用於 Windows、macOS 和 Linux。它內置了對 JavaScript、TypeScript 和 Node.js 的支持，並為其他語言（如 C++、C#、Java、Python、PHP、Go）和運行時（如 .NET 和 Unity）提供了豐富的擴展生態系統. 觀看這些介紹性視頻，開始您的 VS Code 之旅。

vscode官網: https://code.visualstudio.com/

vscode下載地址: https://code.visualstudio.com/Download，選擇自己對應的系統版本下載，這裡我選擇Windows下載

下載完成後，雙擊安裝，保持其默認設置即可，或者在勾選如下圖也可以

最後點擊完成，完成安裝。

@ 喜歡我的文章可以點選這觀看更多

這篇文章【程式工具-PYTHON】如何在vscode使用python編輯最早出現於 HJs 找樂趣。

[python 爬蟲寶典] 爬蟲入門、爬蟲進階資料採集

troy801125 — Thu, 15 Apr 2021 04:15:07 +0000

爬蟲經典package還是requests的呼叫功能，目前在各大網站上去請求資料回傳速度是最快的，如果網站有做一些反爬蟲的方法，可以使用header中User-Agent去訪問請求資料回來。如果需要破解驗證碼的話，可以採用selenium來仿真人去瀏覽器獲得資料，接下來部分我會手把手教你如何在網路世界中，抓取你想得到的資訊 (切記勿盜取商業資料或是做違法行為) 。

(圖為google網路上抓取)

基本上通過以上擷取方式可以解析資料

(圖為google網路上抓取) (如果有擋爬蟲可以採用selenium抓取)

這邊可以先安裝 python 分析專用編輯器 https://huijou.com/python/

這邊附上 pip 安裝網址給大家去安裝

request : https://pypi.org/project/requests/

selenium : https://pypi.org/project/selenium/

官網上可以下載任何 package

這邊示範為 個股日成交資訊

證交所在政府開放資料平台上提供了一個資料集個股日成交資訊，這裡面的資料會每日更新，並且只保留最新的資料。

第一步抓取台灣證券交易所資料

開啟 python – jupyter 請求api的網址去呼叫對方，傳送data回來

抓下後就可以看到 1127列 10行的 datafrme 型式資料

程式碼雙手奉上

#載入 package
import requests
import pandas as pd

# 透過證交所API抓取資料
url = 'http://www.twse.com.tw/exchangeReport/STOCK_DAY_ALL?response=open_dat'
tt = requests.get(link)
df_data = pd.DataFrame(tt.json()['data'])

# 修改欄位名稱
df_data.columns = ['SECURITY_CODE', 'NAME', 'VOLUME', 'AMOUNT', 'OPEN','HIGH', 'LOW', 'CLOSE', 'PRICE_CHANGE', 'TRANSACTION']

接下來就可以隨心所欲的使用它溜 !!

下篇會教導 selenium 進階篇反爬蟲處理

喜歡我的文章可以點擊這觀看更多

這篇文章 [python 爬蟲寶典] 爬蟲入門、爬蟲進階資料採集最早出現於 HJs 找樂趣。