之前使用过pycharts进行汇图，最近更新本地的pyecharts库，使用之前的代码时，发现之前的方法不好使了，报错：cannot import name ‘Pie’ from ‘pyecharts’ 。找了下官方文档看了下，发现其现在有两个版本，v0.5.X和v1两个大版本，v0.5.X和v[……]
分类： perl/php/python/gawk/sed
脚本语言学习……
python中的map/reduce/filter函数
近期公司有项目上使用的代码涉及调用外部API接口进行多页请求，并需要把对应的数据返回后进行处理。开发人员使用了多层for嵌套循环处理，从逻辑上看，确实for循环比较简单也比较容易理解，不过性能上会略差一些。在进行响应时延过高的问题分析时，通过换用map函数代替for可以进行效率的提升。本篇就总结[……]
嵌套json下的pandas操作
在进行json处理的时候，经常会遇到需要提取不同级别的字段内容并合并成表格，见下图所示。本篇就总结下遇到这种情况下如何进行文本内容的提取。在知乎上看到一篇《骚操作！嵌套 JSON 秒变 Dataframe》似乎和我遇到的情况类似，不过在实际处理的时候又有不同。
先看我要处理的原始数[……]
统一任务管理cronsun
一、需求
公司写了很多脚本，分别部署在不同的机器上通过crontab进行管理，这里有一个缺点是，没有一个平台可以查看所有的任务执行情况和进行任务统一管理的平台。为此找了一些开源工具进行测试，测试涉及的产品如下：
国内有的有：jobx、Saturn（唯品会）、elasticjob&nb[……]
chrome报错ssl_client_socket_impl.cc报错解决
背景
帮公司的一个爬虫项目安装完成了google chrome headless，其在使用selenium + chrome爬取内部的一个合作厂家的站点信息时，出现了无法获取内容的情况，同时也没有明显的报错信息。使用内部httpd服务搭建的测试页，可以正常获取。
浙公网安备 33010802007315号 |浙ICP备14037069号-2