data = response.content from ast import literal_eval da… 继续阅读把response的字节流转换成字典
标签： Python
Python for输出转为list
直接上代码啦~ res=[] for name in name: res = name res.append(… 继续阅读Python for输出转为list
Python dict字典转txt
直接上代码啦~ filename = open(‘C:/Users/ch2277/Desktop/7.txt’… 继续阅读Python dict字典转txt
使用opencv检测Python中程序效率
涉及到的函数主要有两个： 1.cv2.getTickCount()函数返回从参考点到这个函数被执行的时钟数。所… 继续阅读使用opencv检测Python中程序效率
Python数据分析三剑客
numpy 计算 pandas 读取文件 matplotlib 可视化
Could not resolve URL for hyperlinked relationship using view name “store-detail”. You may have fail
djangorestfremework报错：Could not resolve URL for hyperli… 继续阅读Could not resolve URL for hyperlinked relationship using view name “store-detail”. You may have fail
Python Ping域名返回IP值
单个域名检测IP import socket def getIP(domain): myaddr = sock… 继续阅读Python Ping域名返回IP值
Python 字符串(str)、列表(list)、字典(dict)互相转换
字符串(str)和列表(list)互相转换 字符串(str)转列表(list) 1.整体转换 str1 = ‘… 继续阅读Python 字符串(str)、列表(list)、字典(dict)互相转换
Python中使用.format()自定义变量
在爬取中，如果链接是有规则的增加+1。使用.format()非常方便 for i in range(1,10)… 继续阅读Python中使用.format()自定义变量
Python爬虫伪造随机的请求头User-Agent
写好爬虫的原则只有一条: 就是让你的抓取行为和用户访问网站的真实行为尽量一致 一切都是为了爬虫能够顺利抓取内容… 继续阅读Python爬虫伪造随机的请求头User-Agent
python中获取文本/text和//text的区别
/text()和//text()用法一样,都是在获得标签后面写上即可,不过/text()获取的是标签的文本内容… 继续阅读python中获取文本/text和//text的区别
解决pip安装时速度慢的问题
国内源 新版ubuntu要求使用https源，要注意。 清华：https://pypi.tuna.tsingh… 继续阅读解决pip安装时速度慢的问题
Scrapy Cookie模拟登陆
以登陆wordpress为例， 如何获取Cookies，登陆之后开发者模式，找到请求的页面寻找Cookies，… 继续阅读Scrapy Cookie模拟登陆
Scrapy帐号密码模拟登陆
以登陆wordpress为例 def start_requests(self): formdata = { “… 继续阅读Scrapy帐号密码模拟登陆
BeautifulSoup、lxml、正则表达式三大解析工具对比
三大解析工具对比 解析工具 解析速度 使用难度 BeautifulSoup 最慢 最简单 lxml 快 简单 … 继续阅读BeautifulSoup、lxml、正则表达式三大解析工具对比
SyntaxError: Non-UTF-8 code starting with ‘\xbd’ in file解决方法
Python报错 SyntaxError: Non-UTF-8 code starting with ‘\xb… 继续阅读SyntaxError: Non-UTF-8 code starting with ‘\xbd’ in file解决方法
Python如何生成词云
今天记录了下利用Python如何生成词云。 需要安装：wordcloud、matplotlib、jieba w… 继续阅读Python如何生成词云
Scrapy爬虫数据存入到MySql数据库
主要是两个文件~ pipelines from twisted.enterprise import adbap… 继续阅读Scrapy爬虫数据存入到MySql数据库
Scrapy数据生成json文件或者txt文档
在pipelines.py中引入Json import json def __init__(self): se… 继续阅读Scrapy数据生成json文件或者txt文档
Python的Requests库和Urllib包对比
前言 学习Python中先学习了urllib包，后学习了Requests库。记录一下，Requests库和Ur… 继续阅读Python的Requests库和Urllib包对比
Scrapy框架get() 、getall() 、extract() 、extract_first()的区别
官方解释说明 extract() and extract_first() If you’re a long-t… 继续阅读Scrapy框架get() 、getall() 、extract() 、extract_first()的区别
‘gb2312’ codec can’t decode byte 0x89 in position
解决方式一： ‘gb2312′,’ignore’ 解决方式二：… 继续阅读‘gb2312’ codec can’t decode byte 0x89 in position
Python爬虫request库总结
Requests介绍 官方文档：http://cn.python-requests.org/zh_CN/lat… 继续阅读Python爬虫request库总结