Python + Selenium读取网页表格

1.获取表格元素：

表格的结构一般以table标签开始，此函数是获取table元素的，一个网页中可能不止一个表格，此处返回表格元素的列表。

def GetTableElements():
　　    '''获得table标签元素列表，方便选择合适的表格'''
　　    driver = GetDriver()
　　    # 参考：selenium 根据 tag名 选择元素  https://blog.csdn.net/weixin_41665637/article/details/111315408
　　    elements = driver.find_elements_by_tag_name('table')
　　    return elements

2.获取表格头的列信息：

　　返回值形如 [‘列1的名字’, ‘列2的名字’]

　def _GetHeadList(table):
　　    '''
　　    功能：返回表格列的名称列表
　　    参数：table：对应的表格元素
　　    '''
　　    thead = table.find_element_by_tag_name('thead')
　　    tr = thead.find_element_by_tag_name('tr')
　　    ths = tr.find_elements_by_tag_name('th')
　　    res = []
　　    for th in ths:
　　        res.append(th.text)
　　    return res

3.读取一行里面的信息：

　　其中heads就是从表头中获取的每一列的名字列表。

def _GetOneRow(tr,heads):
　　    '''
　　    功能：取得一行的信息
　　    tr：当前行的tr元素
　　    heads：是一个字符串列表，表示每一列的名称
　　    返回值：返回一个字典，形如：{'Row1': value1, 'Row2':value2}
　　    '''
　　    res = {}
　　    tds = tr.find_elements_by_tag_name('td')
　　    for i,td in enumerate(tds):
　　        res[heads[i]] = td
　　    return res

4.获取表格每一个单元格对象：

def GetTable(table):
　　    '''
　　    功能：返回表格信息
　　    参数：table：对应的表格元素
　　    '''
　　    res = []
　　    # Python学习交流群：711312441 
　　    # 获得表格头
　　    heads = _GetHeadList(table)
　　     
　　    tbody = table.find_element_by_tag_name('tbody')
　　    trs = tbody.find_elements_by_tag_name('tr')
　　    for tr in trs:
　　        row = _GetOneRow(tr,heads)
　　        res.append(row)
　　    return res

5.也可以把单元格对象转换成文本：

def GetTableText(table):
　　    '''与GetTable函数相比，此函数把元素对象转换成文本'''
　　    res = []
　　    table = GetTable(table)
　　    for row in table:
　　        tmpRow = {}
　　        for key in row.keys():
　　            tmpRow[key]=row[key].text
　　        res.append(tmpRow)
　　    return res

​现在我也找了很多测试的朋友，做了一个分享技术的交流群，共享了很多我们收集的技术文档和视频教程。
如果你不想再体验自学时找不到资源，没人解答问题，坚持几天便放弃的感受
可以加入我们一起交流。而且还有很多在自动化，性能，安全，测试开发等等方面有一定建树的技术大牛
分享他们的经验，还会分享很多直播讲座和技术沙龙
可以免费学习！划重点！开源的！！！
qq群号：485187702【暗号：csdn11】

最后感谢每一个认真阅读我文章的人，看着粉丝一路的上涨和关注，礼尚往来总是要有的，虽然不是什么很值钱的东西，如果你用得到的话可以直接拿走！ 希望能帮助到你！【100%无套路免费领取】