引用

引用 3837460：[原创统计教程]爬虫获取开盘的下注信息==2020.3.6更新数据统计模板下载[6P]

 

 

 

引用

# -*- coding: utf-8 -*-
"""
Created on Thu Mar  5 14:14:52 2020

@author: 月关射你无罪@t66y.com
"""
from bs4 import BeautifulSoup as bs
import xlsxwriter

game_nums="直播-4-7"
filename="直播-4-7_"

lstu=[]
lstc=[]
dict_xz={}
dict_id={}
for page in range(0,102):
    with open('C:/Users/Administrator/Desktop/PHPWIND/'+filename+'{0}.html'.format(page), 'r',encoding='utf-8')as wb_data:            #python打开本地网页文件
        Soup = bs(wb_data, 'lxml') 
        xzs=Soup.find_all('tr',class_='tr1')
        contents=Soup.find_all('a',class_='s3')

        for xz in xzs:
            uid=str(xz.find_all('b')[:1]).replace('<b>','').replace('</b>','').replace('<span class="s3 f16">','').replace('</span>','').replace(' <span class="sgreen">[樓主]','')
            if uid != '[]':
                lstu.append(uid)
        for c in contents:
            cnums=str(c.get_text())
            if cnums != '[]':
                lstc.append(cnums) 


#生成excel文件
dict_xz=dict(zip(lstc,lstu))
dict_id=dict(zip(lstu,lstc))

def generate_excel(expenses):
    workbook = xlsxwriter.Workbook('C:/Users/Administrator/Desktop/PHPWIND/'+game_nums+'/'+game_nums+'.xlsx')
    worksheet = workbook.add_worksheet(game_nums)

    # 设定格式，等号左边格式名称自定义，字典中格式为指定选项
    # bold：加粗，num_format:数字格式
    bold_format = workbook.add_format({'bold': True})
    #money_format = workbook.add_format({'num_format': '$#,##0'})
    #date_format = workbook.add_format({'num_format': 'mmmm d yyyy'})

    # 将二行二列设置宽度为15(从0开始)
    worksheet.set_column("A:B", 35)

    # 用符号标记位置，例如：A列1行
    worksheet.write('A1', '大佬ID', bold_format)
#    worksheet.write('B1', '水贴信息', bold_format)

    row = 1
    col = 0
    for k,v in expenses.items():
            # 使用write_string方法，指定数据格式写入数据
            worksheet.write_string(row, col, v)
            worksheet.write_string(row, col + 1, k)

            row += 1
    workbook.close()
def generate_id(expenses):
    workbook = xlsxwriter.Workbook('C:/Users/Administrator/Desktop/PHPWIND/'+game_nums+'/'+game_nums+'_ID.xlsx')
    worksheet = workbook.add_worksheet(game_nums)

    # 设定格式，等号左边格式名称自定义，字典中格式为指定选项
    # bold：加粗，num_format:数字格式
    bold_format = workbook.add_format({'bold': True})
    #money_format = workbook.add_format({'num_format': '$#,##0'})
    #date_format = workbook.add_format({'num_format': 'mmmm d yyyy'})

    # 将二行二列设置宽度为15(从0开始)
    worksheet.set_column("A:B", 25)

    # 用符号标记位置，例如：A列1行
    worksheet.write('A1', '大佬ID', bold_format)
    worksheet.write('B1', '楼层信息', bold_format)

    row = 1
    col = 0
    for k,v in expenses.items():
            # 使用write_string方法，指定数据格式写入数据
            worksheet.write_string(row, col, k)
            worksheet.write_string(row, col + 1, '此处粘贴ID')

            row += 1
    workbook.close()
   

generate_excel(dict_xz)

generate_id(dict_id)

   
       
           
       

 

引用

引用第1樓minolta於「2020--04--07@14:02:07」發表的 :
有空学一学

引用

引用第2樓春风不度於2020-04-07 14:06發表的 回 1樓(minolta) 的帖子 :

大佬开的一手好车

引用

引用第7樓亮的招牌於2020-04-07 14:27發表的 :
你别整这个了
赶紧把帖子总数排行榜，威望排行榜，日均撸铁排行榜

整出来

引用

引用第5樓minolta於「2020--04--07@14:24:09」發表的 :

哪里哪里，和你比差远了！

引用

引用第7樓亮的招牌於2020-04-07 14:27發表的 :
你别整这个了
赶紧把帖子总数排行榜，威望排行榜，日均撸铁排行榜

整出来

引用

引用第13樓百里守约於2020-04-07 15:20發表的 回 7樓(亮的招牌) 的帖子 :

这个好，我喜欢，嘿嘿

引用

引用第0樓月关射你无罪於[2020--04--07_14:00:51]發表的 [炮王原创]如何统计直播聊天帖数据 :
本教程简明易懂，相关基础请参见菜区帖子：



[size=4][b]
.......

引用

引用第4樓萬人往づ於2020-04-07 14:07發表的 :
还是安心做一个种瓜菜农