requests请求cookies本地持久化

作者:matrix 被围观: 11 次 发布时间:2020-02-25 分类:Python | 无评论 »

Python中单个地址进行请求我都是使用header的cookie中添加会话信息,简单干脆。但是多个域名跳转请求的时候就出现了问题,多域名的话需要按照域名host作为key来缓存,这岂不是很麻烦? requests.Session()也很少使用,这次正好试试。requests.Session()可以作为全局变量来保存请求的cookies会话信息。这样在脚本的单次执行中可以很好的关联请求会话信息,避免要求多次登录的情况出现。 环境:python 3.7 Session 单次会话 这里所谓单次会话其实就......

auto.js自动化处理插件 - 葡萄浏览器多账号签到

作者:matrix 被围观: 53 次 发布时间:2020-02-11 分类:零零星星 | 无评论 »

这些天在家研究autojs操作,完全可以用它来模拟手动点击滑动app的各种操作,这个自动化是真的香~ ios端的Jsbox没这么友好,毕竟系统完全不同,也有很多限制。 https://hyb1996.github.io/AutoJs-Docs 目前要使用多个账号登录,然后进行点击签到,看广告的需求。 环境:mi8 Android9 AutoJs[4.1.1] 葡萄浏览器com.qwh.grapebrowser AutoJs在应用市场都被下架了,留个下载的渠道: https://github.com/SuperMonster002/Hello_Sockpuppet/raw/......

ifttt推送gmail新邮件提醒

作者:matrix 被围观: 41 次 发布时间:2020-02-08 分类:零零星星 | 无评论 »

今天临时想用ifttt来发送新邮件提醒服务的推送,查了下才知道19年初google就取消了对ifttt的api调用。不过看到可以使用其他三方应用来解决这个问题。 目的:新gmail邮件->tg消息通知 需要Gmail,IFTTT,automate.io,Trello,telegram相关账户 方法 类似于ifttt的automate.io可以设置处理条件,自由度也更高,可以接收处理Gmail邮件,但是没找到telegram私有频道的接收app。但是可以用trello来中转达到转发效果。 调用链形式:gmail->automate->Trell......

aiohttp + asyncio 异步网络请求基本操作

作者:matrix 被围观: 682 次 发布时间:2019-11-26 分类:Python | 无评论 »

asyncio异步操作需要关键字async,await。 async用来声明方法函数,await用来声明耗时操作。 但是await关键字后面要求为awaitable对象 且只能在async方法内部使用,不能在外部入口中使用。asyncio的语法其实是系统内部实现了yield from协程。 aiohttp用来代替requests的请求库,且支持异步操作。 主要优点体现在并发请求多个耗时任务时,自动安排耗时时的操作,避免cpu等待一个一个请求。 单个请求操作 import aiohttp import asyncio #get 请求 ......

awk入门小记

作者:matrix 被围观: 192 次 发布时间:2019-11-06 分类:command Linux | 无评论 »

awk用于unix的文本处理,经常出现和使用。读取每一行文本进行格式化输出。 测试环境 Macos awk简单操作 默认使用空格进行字符串分割 echo '1 2 3' |awk '{print $0}' # 1 2 3 echo '1 2 3' |awk '{print $3}' # 3 echo -e "1\n2\n3" |awk '/[23]/' #正则条件查找 echo -e "abc\n1a2\n33" |awk '/a/' #正则条件查找字母a awk '{print $3}' file_path #指定文件 ls -alh|awk '/^d/' #输出目录 # drwxr-xr-x 3 panc staff 96B 7 16 2......

记linux输出重定向操作>&

作者:matrix 被围观: 1,544 次 发布时间:2019-10-19 分类:command Linux | 一条评论 »

今天看到2>&1和>/dev/null 2>&1有点相似但又完全不同,一直都是CV方式来使用 仅知道后者用于禁止所有输出信息。 简单整理笔记 基本操作符号和数字描述符号 >用于输出覆盖内容,>>用于输出追加内容 <用于输入,<<用于设置输入结束符号 <<end:表示当输入end的时候结束输入操作 /dev/null表示Linux中的空设备,也当是数据黑洞,无限吞噬。 类型 文件描述符 默认情况 对应文件句柄位置 标准输入(st......

python 快速读取压缩包内文件

作者:matrix 被围观: 381 次 发布时间:2019-10-14 分类:Python | 无评论 »

搜索结果一大堆但都没有找到支持url和local path两种读取方式的操作。 留着便于以后直接使用。 gits: https://gist.github.com/Hootrix/cf3e75b1fa6d3d404bc99787f89687f1 import requests,tempfile, zipfile,os def read_file_for_zip(zip_url, callback=None): """ 读取zip包内的文件 :param zip_url:zip路径/url :param callback:读取操作的回调函数 若函数返回false 则不会读取下一个文件 :return: """ with......

linux查找maildrop目录超大空间占用

作者:matrix 被围观: 514 次 发布时间:2019-09-20 分类:Linux | 无评论 »

线上centos服务器有很长时间没有连,今天安装证书无故失败,数据库也不能连接。。。一系列的问题 查找占用情况 $ df -h #查看磁盘占用情况 $ du -h --max-depth=1 ./ #查看当前目录的文件/目录占用大小 然后就是手动一层一层的找到最大的那个目录。 😂 最后找到一个隐藏杀手:/var/spool/postfix/maildrop/。这个目录下面存在3000W个小文件,占用33GB。主要它还不是tmp之类的目录,没遇见过真是很难查找。 究其原因是crontab任务日志发送到所有者......