BXW

博哥的blog

博哥的技术博客

0%

gbk编码

发表于 更新于 分类于

scrapy
抓取gbk网页搜索的时候直接用汉字作为关键字,搜索显示无结果,原因为scrapy为utf-8使用汉字搜索，汉字转换会urlencode,但是gbk页面搜索识别的是gbk编码的汉字,所以在抓取gbk页面的时候，汉字需要

1
"关键字".decode("utf-8").encode("gbk")