python

2019-05-16bituplink阅读(21)评论(0)赞(0)

    这两天遇到了一个使用fake useragent的问题,这里记录分享下解决方案给大家 首先由于新的爬虫项目里引进了随机生成agent的库文件,而调试过程中发现出现了引入前不曾有的解析错误,经过定位分析发现原来是随机生成的random...

2019-04-30bituplink阅读(51)评论(0)赞(0)

    今天在开发python的时候遇到了了中文显示乱码的问题,经过定位和查找资料找到了原因和解决办法,这里记录并分享出来     首先我使用的是python3的版本,同时由于我知道python3默认使用utf-8编码，所以可以不用在开头加...

2019-04-25bituplink阅读(113)评论(0)赞(0)

    这阵子bituplink君也在学习python爬虫技术,也算是24k纯新手了,一半是出于兴趣,一半是出于备份各种有用信息和资料的需要(比如备份一些博客文章,简书文章,廖老师的教程呀),话说学习就要有动力才能学的好,你让我看pytho...

2019-04-21bituplink阅读(62)评论(0)赞(0)

bituplink君在开发python3的项目代码后，尝试使用pyinstaller对项目文件进行打包，起初一切顺利，但是运行的时候闪退，通过命令行调用执行exe后发现提示No module named parse,百度了一下这个问题，发现...

2019-04-20bituplink阅读(74)评论(0)赞(0)

bituplink君这一阵子在尝试学习和使用wkhtmltopdf这个生成PDF的工具，遇到了一个小问题，那就是wkhtmltopdf好像并不支持中文名的文件生成，只支持英文名，估计是实现问题，但是我又想通过程序完成输出文件名为中文，所以想...

2019-04-20bituplink阅读(50)评论(0)赞(0)

    我在使用python的beatuiful soup的时候，遇到了这样一个需求，那就是如果只去除特定的标签节点，而不影响该tag节点的子节点内容，我们来举个例子吧，比如下面的内容中，我们需要将外层的div标签去掉，只保留内层的超链接子...

2019-04-19bituplink阅读(113)评论(0)赞(0)

bituplink君在学习和使用python爬虫的过程中遇到了需要批量替换HTML标签的问题，搜索了不少方法都没什么效果，最后找到了下面这段代码可以正确的执行替换，这里分享给大家: response = requests.get(url[1...

2019-04-19bituplink阅读(76)评论(0)赞(0)

    pyinstaller是python下的一个打包工具，可以将python用到的代码和依赖文件打包到EXE中，可以在没有安装python的环境下方便的执行，因此对于经常编写需要运行的python代码的人来说是个相当不错的工具。    ...