如何抓取script外链的页面？
Step 1：获取script外链的URL
在需要抓取的页面中，查找所有使用了标签引用外部JS库的代码。通过查看标签的属性可以获取到对应的URL地址。
Step 2：使用Python的requests库获取网页代码
比如，我们使用requests.get方法来获取URL对应的响应内容。使用方法如下：
import requests
response = requests.get(url)
Step 3：使用正则表达式筛选出需要的内容
我们可以使用正则表达式来匹配页面中所有的
标签和
标签，并将其提取出来。
例如：re.findall(r'
(.*?)
|
(.*?)
', response.text)
为什么我们需要抓取script外链的页面？
获取更多细节信息
有些网站可能会将重要信息存放在通过 JS 脚本获取渲染出的页面中。
自动收集数据
我们可以使用Python程序来定时抓取网站上的数据，并将其下载到本地或存储到数据库中。
需要注意哪些问题？
版权问题
我们需要确认网站是否允许我们抓取其内容。否则，我们就可能面临版权问题。
抓取速度限制
有些网站可能会设置反爬虫的机制，如IP封锁、频率限制等。因此，我们需要通过一定的方法来规避这些限制。
