使用python从网页中获取链接 (python开发一个网页的步骤)

感觉这个试过以后,那些个严禁复制网页内容的就不再是个烦恼了。每个网页右键会出现一个查看网页源代码的选项,看看都有些什么,这对于理解下面的代码是有用处的。

注意看类似这些行<a class="nav-link" href=https://tvm.apache.org/community>Community</a>。代码里的find字符"a"和get的"href"方法主要作用就在这里。

使用python从网页中获取链接,python开发一个网页的步骤

网页源代码

直接上代码吧:

import requests as rq
from bs4 import BeautifulSoup

url = input("Enter Link: ")
if ("https" or "http") in url:
    data = rq.get(url)
else:
    data = rq.get("https://" + url)

soup = BeautifulSoup(data.text, "html.parser")

saved = open("myLinks.txt", 'w')
for link in soup.find_all("a"):
    print(link.get("href"))
    saved.writelines(link.get("href"))
    saved.writelines("\n")

使用python从网页中获取链接,python开发一个网页的步骤

运行示意和输出的文件