老师，我一使用分布式爬虫就报错：由于目标计算机积极拒绝，无法连接。我自己使用其他方式就没发现这个问题，这个是为什么呢

from urllib.request import Request,build_opener

from fake_useragent import UserAgent

from urllib.parse import urlencode

from urllib.request import HTTPCookieProcessor

login_url = 'https://www.bilibili.com/page-proxy/game-nav.html'

form_data = {

    "user":"15212123250",

    "password":"2742558764"

}

headers = {

    "User-Agent":UserAgent().random,

}

req = Request(login_url, headers=headers, data=urlencode(form_data))

handler = HTTPCookieProcessor()

opener = build_opener(handler)

resp = opener.open(req)

info_url = "https://www.bilibili.com/"

req = Request(info_url, headers=headers)

resp = opener.open(req)

print(resp.read().decode())

请问老师，代码是这是为什么?，无论是哪个网站，都是这个错误。都是哪个resp不行，之前还好好的。谢谢老师了！

老师，代码中的yield的作用是怎样的，在资料文档里看到的用法跟这个不同的，乱了

老师，你好，我按照代码文档写的代码运行出现以下出错，不知道什么原因，方便解答一下吗

from fake_useragent import UserAgent
import requests
from lxml import etree

# 发送请求
class Downloader():
    def do_download(self,url):
        print(url)
        headers = {'User-Agent' : UserAgent().chrome}
        resp = requests.get(url, headers=headers)
        if resp.status_code == 200:
            resp.encoding = 'utf-8'
            return resp.text

# 数据分析
class Parser():
    def do_parse(self,html):
        e = etree.HTML(html)
        # 写要爬取的内容的提取
        contents = [div.xpath('string(.)').strip() for div in e.xpath('//div[@class="content"]')]
        urls = ['https://www.qiushibaike.com{}'.format(url) for url in e.xpath('//ul[@class="pagination"]/li/a/@href')]
        return contents,urls

# 数据保存
class DataOutPut():
    def do_save(self,datas):
        with open('duanzi2.txt','a',encoding='utf-8') as f:
            for data in datas:
                f.write(data + '\n')

# URL管理器
class URLManager():
    def __init__(self):
        self.new_url = set()
        self.old_url = set()

    # 加入一个url的方法
    def add_new_url(self,url):
        if url is not None and url != '' and url not in self.old_url:
            self.new_url.add(url)
    # 加入多个url
    def add_new_urls(self,urls):
        for url in urls:
            self.add_new_url(url)
    # 获取一个url
    def get_new_url(self):
        url = self.new_url.pop()
        self.old_url.add(url)
        return url
    # 获取还有多少个url要爬取c
    def get_new_url_size(self):
        return len(self.new_url)

    # 获取是否还有url要爬取
    def have_new_url(self):
        return self.get_new_url_size() > 0

# 调度器
class Scheduler:
    def __init__(self):
        self.downloader = Downloader()
        self.parser = Parser()
        self.data_out_put = DataOutPut()
        self.url_manger = URLManager()

    def start(self,url):
        self.url_manger.add_new_urls(url)
        while self.url_manger.have_new_url():
            url = self.url_manger.get_new_url()
            html = self.downloader.do_download(url)
            datas,urls = self.parser.do_parse(html)
            self.data_out_put.do_save(datas)
            self.url_manger.add_new_urls(urls)

# 主函数
if __name__ == '__main__':
    scheduler = Scheduler()
    url = 'https://www.qiushibaike.com/text/'
    scheduler.start(url)

老师，安装好 ChromeDriver 后，运行代码后出现  AttributeError: module 'json' has no attribute 'dumps'

代码

# encoding=utf-8
from selenium import webdriver
# 构造浏览器
chrome = webdriver.Chrome()
# 发送请求，访问url
url = 'http://www.baidu.com'
chrome.get(url)
# 截图
chrome.save_screenshot('baidu.png')
# 获取源代码
html = chrome.page_source
# 退出
chrome.quit()

错误

老师，请问一下可以新建一个爬虫的项目，然后创建多个子文件嘛？我看老师是 一次创建一个新的项目.

老师，我现在这个网能ping通，然后我也按照您给其他同学说的，删了这个txt文件。我还按照网上说的配置的DNS，但是yum就是不行。我想换阿里的yum源，提示我command not found。现在是真的没办法了，已经弄了很久了

老师你好，我这个安装包也无效了，可能我也需要安装包了谢谢老师了

老师，你好，在User-Agent那里，可以导入fake_useragent模块然后random一下吗

老师，这个是不是不能在win10家庭版来安装啊，只能在专业版上啊

起初报错说我端口决绝访问,我直接改成了0.0.0.0 然后这个错误:builtins.ValueError: unsupported pickle protocol: 5

尝试了好多办法都不行,还是提示ModuleNotFoundError: No module named '_ctypes'

老师，您看这是什么错误，怎么解决呀？？？

想要获取的网址：

https://www.nasdaq.com/market-activity/stocks/aapl/historical#.UWdnJBDMhHk

使用urllib爬取数据，用ajax抓取不到数据

"""获得动态数据"""

from urllib.request import Request, urlopen


url = 'https://api.nasdaq.com/api/quote/AAPL/historical?assetclass=stocks&fromdate=2021-03-11&limit=18&todate=2021-04-11'
headers = {
    "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/89.0.4389.90 Safari/537.36"
}
req = Request(url, headers=headers)
# 发送请求
resp = urlopen(req)
# 用info 接受响应
info = resp.read().decode()
print(info)

请老师指教，不要用Selenium爬取数据，用urllib爬取数据