因为工作需求,需要审核一部分query内容是否有效,query储存在Excel中,文本内容为页面的Title,而页面的URL以HyperLink的格式关联到每个Cell。

于是本能的想到用Python读取Excel文件之后进行文本分析,之后对每个链接进行一次HttpRequest,通过分析HttpResponse的内容来判断当前链接是否有效。
于是上网搜了下,发现比较主流的是用xlrd的插件,但是实际使用过程中发现,无论如何,最终获取的hyperlink_map值一直都是None,也没空去分析到底是为什么。最后经过搜索发现一个叫xlwings的Python库,可以有效使用。
xlwings:Python For Excel
具体的代码如下:
# -*- coding=utf-8 -*-
import xlwings as xw
import urllib
import sys
type = sys.getfilesystemencoding()
def get_html(url):
page = urllib.urlopen(url)
html = page.read()
return unzip(html)
## Debug的时候发现无论怎样做Decode,最后的结果都是乱码
## 后来发现是因为对应的网页做了压缩处理,所以需要对获取的网页内容手动解压缩
def unzip(data):
import gzip
import StringIO
data = StringIO.StringIO(data)
gz = gzip.GzipFile(fileobj=data)
data = gz.read()
gz.close()
return data
wb = xw.Book(r"C:\Users\hasee\Desktop\Test.xlsx")
main_data = wb.sheets["Sheet2"]
## 通过获取Last Cell来确定当前Sheet的有效行数与列数
rownum = main_data.range('A1').current_region.last_cell.row
colnum = main_data.range('A1').current_region.last_cell.column
## 定位column对应的列
col_dict = {"2":"B","3":"C","4":"D","5":"E","6":"F"}
for row in range(1, rownum + 1):
for col in range(2, colnum + 1):
query = main_data.range(row, 1).value
cell = main_data.range(row, col)
link = cell.hyperlink
html = get_html(link)
if "error-container" in html:
print "%s,%s,%s,%s" % (query, col_dict.get(str(col))+str(row), cell.value, cell.hyperlink)
## 对无效的链接所属的Cell染色,直接写入文件
cell.color = (253,218,4)
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。
# Python处理Excel
# Python
# Excel
# python高手之路python处理excel文件(方法汇总)
# Python对Excel进行处理的实操指南
# python之excel文件(.xls文件)处理方式
# 都是
# 的是
# 是因为
# 一个叫
# 解压缩
# 大家多多
# 过程中
# 无论如何
# 行数
# sys
# type
# unzip
# import
# utf
# urllib
# xw
# return
# url
# html
# urlopen
相关文章:
详解jQuery中基本的动画方法
上海网站制作网页,上海本地的生活网站有哪些?最好包括生活的各个方面的?
建站之星微信建站一键生成小程序+多端营销系统
网站制作需要会哪些技术,建立一个网站要花费多少?
如何快速查询网站的真实建站时间?
攀枝花网站建设,攀枝花营业执照网上怎么年审?
网站按钮制作软件,如何实现网页中按钮的自动点击?
如何选择靠谱的建站公司加盟品牌?
七夕网站制作视频,七夕大促活动怎么报名?
活动邀请函制作网站有哪些,活动邀请函文案?
黑客如何利用漏洞与弱口令入侵网站服务器?
如何高效配置香港服务器实现快速建站?
如何配置FTP站点权限与安全设置?
网站制作价目表怎么做,珍爱网婚介费用多少?
广平建站公司哪家专业可靠?如何选择?
深圳企业网站制作设计,在深圳如何网上全流程注册公司?
北京网站制作公司哪家好一点,北京租房网站有哪些?
代购小票制作网站有哪些,购物小票的简要说明?
深圳网站制作培训,深圳哪些招聘网站比较好?
家族网站制作贴纸教程视频,用豆子做粘帖画怎么制作?
浅析上传头像示例及其注意事项
网站网页制作专业公司,怎样制作自己的网页?
C++中引用和指针有什么区别?(代码说明)
制作门户网站的参考文献在哪,小说网站怎么建立?
网页设计与网站制作内容,怎样注册网站?
如何在阿里云虚拟服务器快速搭建网站?
学校免费自助建站系统:智能生成+拖拽设计+多端适配
建站中国必看指南:CMS建站系统+手机网站搭建核心技巧解析
建站主机数据库如何配置才能提升网站性能?
教学网站制作软件,学习*后期制作的网站有哪些?
建站DNS解析失败?如何正确配置域名服务器?
建站主机功能解析:服务器选择与快速搭建指南
购物网站制作费用多少,开办网上购物网站,需要办理哪些手续?
定制建站流程解析:需求评估与SEO优化功能开发指南
Java解压缩zip - 解压缩多个文件或文件夹实例
网站制作专业公司有哪些,如何制作一个企业网站,建设网站的基本步骤有哪些?
国美网站制作流程,国美电器蒸汽鍋怎么用官方网站?
如何在服务器上三步完成建站并提升流量?
再谈Python中的字符串与字符编码(推荐)
网站制作的方法有哪些,如何将自己制作的网站发布到网上?
如何获取PHP WAP自助建站系统源码?
婚礼视频制作网站,学习*后期制作的网站有哪些?
广德云建站网站建设方案与建站流程优化指南
建站之星代理平台如何选择最佳方案?
如何零基础在云服务器搭建WordPress站点?
无锡营销型网站制作公司,无锡网选车牌流程?
义乌企业网站制作公司,请问义乌比较好的批发小商品的网站是什么?
如何用5美元大硬盘VPS安全高效搭建个人网站?
小米网站链接制作教程,请问miui新增网页链接调用服务有什么用啊?
如何快速生成凡客建站的专业级图册?
*请认真填写需求信息,我们会在24小时内与您取得联系。