有效沟通问答-【官方】百战程序员_IT在线教育培训机构

会员可以在此提问，百战程序员老师有问必答

对大家有帮助的问答会被标记为“推荐”
看完课程过来浏览一下别人提的问题，会帮你学得更全面

截止目前，同学们一共提了 133676个问题

from fake_useragent import UserAgent
import requests
from lxml import etree
from time import sleep


def get_html(url):
    '''
    :param url: 要爬取的地址
    :return: 返回html
    '''
    headers = {"User-Agent": UserAgent().chrome}
    resp = requests.get(url, headers=headers)
    sleep(2)                        #控制访问速度，以免给对方服务器造成负担，每次访问之前，睡上2秒
    if resp.status_code == 200:     #状态码==200即可返回
        resp.encoding = 'utf-8'
        return resp.text            #返回内容
    else:
        return None


def parse_list(html):
    '''
    :param html: 传递进来一个有电影列表的html
    :return: 返回一个电影列表的url
    '''

    e = etree.HTML(html)      #创建一个对象
    list_url = ['http://maoyan.com{}'.format(url) for url in e.xpath('/div[@class="channel-detail movie-item-title"]/a/@href')]
    return list_url


def pares_index(html):
    '''
    :param html: 传递进来一个有电影信息的html
    :return: 已经提取好的电影信息
    '''
    e = etree.HTML(html)
    name = e.xpath('//h1[@class="name"]/text()')[0]
    type = e.xpath('//li[@class="ellipsis"]/a[1]/text()')[0]
    actors = e.xpath('//div[@class="celebrity-group"][2]/ul[@class="celebrity-list clearfix"]/li/div/a/text()')
    actors = format_data(actors)
    return {"name": name, "type": type, "actors": actors}


def format_data(actors):                  #去重演员信息
    actor_set = set()
    for actor in actors:
        actor_set.add(actor.strip())      #strip()--去空格
    return actor_set


def main():
    num = int(input('请输要获取多少页：'))
    for page in range(num):
        url = 'https://maoyan.com/films?offset={}'.format(page * 30)

        list_html = get_html(url)
        list_url = parse_list(list_html)
        for url in list_url:
            info_html = get_html(url)       #发送新的请求获取电影信息
            movie = pares_index(info_html)  #解析电影信息
            print(movie)


if __name__ == '__main__':
    main()

老师，按照网站的最新链接修改xpath等各链接之后，只运行到页数，就结束了，到process finished with exit code 0,这是什么原因？

Python 全系列/第十六阶段：Python 爬虫开发/爬虫反反爬- 22696楼

老师，我有个问题，正则如何匹配多个html相同的标签

而且我还抓了一个网页，有多个的span标签相同，这是不是意味要选择其他的筛选方法

Python 全系列/第十六阶段：Python 爬虫开发/爬虫反反爬- 22697楼

<insert id="insertUsers">
    insert into users values(default,#{username},#{usersex})
</insert>

//UsersMapper接口
int insertUsers(Users users);

//UsersService接口
int setUsers(Users users);

//Service接口实现类
@Override
public int setUsers(Users users) {
    int flag =0;
    SqlSession sqlSession =MybatisUtils.getSqlSession();
    try {
        UsersMapper mapper = sqlSession.getMapper(UsersMapper.class);
        flag = mapper.insertUsers(users);
        sqlSession.commit();
    }catch (Exception e){
        e.printStackTrace();
        sqlSession.rollback();
    }finally {
        MybatisUtils.closeSqlSession();
    }
    return flag;
}

测试
public class InsertUsersTest {
    public static void main(String[] args) {
        UsersService usersService = new UsersServiceImpl();
        Users users= new Users();
        users.setUsername("老王");
        users.setUsersex("male");
        usersService.setUsers(users);
    }
}

添加成功了, 怎么返回添加成功的 int flag 数字呢?

JAVA 全系列/第六阶段：项目管理与SSM框架/Mybatis 22698楼

这个报错怎么处理？找不到哪里的类型错误

Python 全系列/第六阶段：数据库与AI协同技术实战/python操作mysql 22699楼

老师我问下中小型公司都用什么缺陷工具来提交缺陷报告。

软件测试全系列/第四阶段：功能测试与项目实战/提交缺陷报告 22700楼

老师这个模型的映射可不可以使用sqlalchemy，这个是python框架通用的吧，视频中的映射方式是django自己的orm映射方式么

Python 全系列/第十二阶段：Python_Django3框架/Django初级 22701楼

为什么我的效果是这个样子呢？

WEB前端全系列/第十四阶段：微信小程序/小程序API 22702楼

tank25.rar

用pyinstaller生成了exe为什么不能运行？

Python 全系列/第二阶段：Python 深入与提高/游戏开发-坦克大战 22703楼

老师，多线程结合自由通道不写socket.close了吗？

Python 全系列/第三阶段：Python 网络与并发编程/网络通信 22704楼

老师这个下拉怎么不行？看不到评论，鼠标按住也不行

Python 全系列/第十三阶段：高并发性能怪兽-Tornado 框架/Tornado项目（旧） 22705楼

老师，为什么我的dubbo可视化登录不进去呢，防火墙关了也能ping通

JAVA 全系列/第十三阶段：Spring Cloud Alibaba技术栈/Dubbo 22706楼

老师，为什么资料里面没有redis安装的文档，难道是用之前redis那一章的文档吗，但是这里是最小化mini安装和之前的不同了

JAVA 全系列/第十八阶段：亿级高并发电商项目_架构/编码（旧）/电商：使用SpringCache+Redis实现门户导航缓存 22707楼

这节课视频无法观看，反复刷新或重新登录都不行

Python 全系列/第六阶段：数据库与AI协同技术实战/mysql介绍与环境安装 22708楼

<!DOCTYPE html>

<head>

<title>Document</title>

<style>

.box1{

width: 150px;

height: 150px;

background-color: wheat;

overflow: hidden;

white-space: nowrap;

text-overflow: ellipsis;

}

</style>

</head>

<body>

<p>

大家好，我是xxx!大家好，我是xxx!大家好，我是xxx!

大家好，我是xxx!大家好，我是xxx!

</p>

</div>

</body>

</html>

老师想问一下，就是按照上面代码：实现单行文本,超出容器大小，使用 ... 代替，但是为什么会没有. . .了。

WEB前端全系列/第一阶段：HTML5+CSS3模块/CSS常用属性 22709楼

在setting安装了pyinstall

安pyinstaller有错误

Python 全系列/第二阶段：Python 深入与提高/GUI编程（隐藏） 22710楼

同学您好