perl/php/python/gawk/sed 归档 - 运维之路

存档

‘perl/php/python/gawk/sed’ 分类的存档

faceswap AI换脸

2020年6月11日 admin 没有评论

一、AI换脸需求概述

AI换脸这个需求是领导给一同事的需求，在帮同事装完相关环境后，也顺便帮他一想研究了下。同事选中的是用faceswap开源软件进行测试。faceswap 项目是一个学习重建脸部特征的深度学习算法。你给它一堆的图片，它学习几个小时后，可以根据计算的模型对图片进行批[......]

分类: perl/php/python/gawk/sed 标签: AI, python

web实现DNS查询

2020年5月15日 admin 没有评论

一、功能和需求

先说下现在实现的功能吧，想要在实现一个内部DNS查询系统，通过在页面上输入域名或IP地址就可以查出对应的IP或域名。具体效果如下：

dnsquery

通过点击后面的提交查询，就可以返回相应的结果。里面的地址和域名也是可以直接更换为想要查询的地址或者内容。[......]

分类: perl/php/python/gawk/sed 标签: flask, python

excel数据比对

2020年2月3日 admin 没有评论

一、背景与思路

背景：由于新冠肺炎疫情的影响，每天需要统计公司员工的信息进行上报，并和前一天的数据进行比对。肉眼一个个的比对比较累，而且容易出错，所以就想到通过程序来实现数据的比对。

思路：

1、通过xlrd、xlsxwriter这类模块进行表格读取，读取后[......]

分类: perl/php/python/gawk/sed 标签: excel, pandas, python

pandas if条件判断

2020年2月1日 admin 没有评论

python pandas模块是一个功能强大的DataFrame数据处理模块，这里就是结果几个具体常见的应用场景来展示下其应用，该处展示的功能excel上也可以实现，不过站在一个懂python的人角度来说，我觉得这种处理方法比excel更高效好玩。

一、数字判断

这里实[......]

分类: perl/php/python/gawk/sed 标签: pandas

chrome headless抓取websoket数据

2019年12月25日 admin 没有评论

很多页面上会有一些websocket动态数据，这些数据一般每过N秒会自动刷新数据，并在页面上进行闪烁数据。最明显的示例就是行情类数据。这里选取目标站点：https://datacenter.jin10.com/price 。

websocket-price

这里还是使用Headless Chrom[......]

分类: perl/php/python/gawk/sed 标签: python, spider

python+selenium+Chrome Headless套装

2019年12月24日 admin 没有评论

使用python比较多的一个应用场景就是数据采集，采集一些比较蛋疼的页面时，会检测用户是否是通过浏览器打开的页面，还有一些会通过js加载后才会回显内容。这个时候可能用的比较多的方案就是python + Headless + 浏览器，其会自动打开浏览器，并输入相应的页面地址[......]

分类: perl/php/python/gawk/sed 标签: python, selenium

Golang urlencode与urldecode编码解码

2019年11月12日 admin 没有评论

一、urlencode

golang下可以使用net/url模块实现urlencode和urldecode操作。具体实现的函数为url.QueryEscape和url.QueryUnescape，代码如下：

package main
import([......]Read more

分类: perl/php/python/gawk/sed 标签: golang

shell实现urlencode和urldecode

2019年11月11日 admin 没有评论

一、问题描述

先说下问题背景，最近在写的一个程序在通过restful API 在以form方式post提交时，发现其中的特殊符号无法提交进行后台，后台这边报错error on parse multipart form array: invalid URL escape "%"，而后[......]

分类: perl/php/python/gawk/sed, shell脚本学习标签: shell

goang switch语句中undefined报错处理

2019年11月6日 admin 没有评论

同事在研究Grafana reporter，一个通过把页把转化为pdf并可以邮件报告的工具。在其中引入的某个模块部分，其调用时发现报错。我对zabbix的东西久未关注了，帮其看了下报错，把报错的模块单独抽离出来单独调用发现其中报"undefined: rows"错误。代码逻辑比较简单，根据传入[......]

分类: perl/php/python/gawk/sed 标签: golang, mysql

软件license模块设计小结

2019年10月8日 admin 没有评论

很多人为了保持自己软件开发的劳动成果会给软件增加license授权功能。该授权可以是离线版的，也可能是在线版的（被授权者和授权者之间有交互）。根据授权长短维度区分有试用版（15天、1月）、有限期限版（1年1授权）、终身版。

一、离在线授权

1、离线授权

很多[......]

分类: perl/php/python/gawk/sed, 安全/漏洞标签: safe