Python常用模块

d:\PHJ\Reporter\LOGS\report
d:\Image

suprocess 模块

suprocess模块用于调用系统的shell命令.
执行命令之后,能够将下令的执行结果个别通过管道赋值给专业输出和错误输出:

import subprocess

res=subprocess.Popen(r'ipconfig|findstr 192.168',shell=True,stdout=subprocess.PIPE,stderr=subprocess.PIPE)
print(res.stdout.read().decode('gbk'))
print(res.stderr.read().decode('gbk'))

输出结果:

   IPv4 地址 . . . . . . . . . . . . : 192.168.20.191
   默认网关. . . . . . . . . . . . . : 192.168.20.254
   IPv4 地址 . . . . . . . . . . . . : 192.168.56.1

要是爆发错误,提醒音讯就会从stderr中输出。
在linux平台也得以行使同壹的用法。
也能够应用stdin将事先的出口结果输入到当前的通令中执行,再次回到结果:

import subprocess

res=subprocess.Popen(r'ipconfig',shell=True,stdout=subprocess.PIPE,stderr=subprocess.PIPE)
res1=subprocess.Popen(r'findstr 192.168.20',shell=True,stdin=res.stdout,stdout=subprocess.PIPE,stderr=subprocess.PIPE)
print(res1.stdout.read().decode('gbk'))

出口结果:

   IPv4 地址 . . . . . . . . . . . . : 192.168.20.191
   默认网关. . . . . . . . . . . . . : 192.168.20.254

configparser模块:  (打开,读取特定格式的文件)(暗中同意文件都是字符串)

图片 1

 

 图片 2

 

python去找模块的门路

图片 3

在那之中,第二方模块安装的地方

图片 4

唤醒:第1方模块名无法和停放以及第一方模块重名

导入模块:from lib.account import login

 

 

random模块

import random

print(random.random())#(0,1)----float    大于0且小于1之间的小数

print(random.randint(1,3))  #[1,3]    大于等于1且小于等于3之间的整数

print(random.randrange(1,3)) #[1,3)    大于等于1且小于3之间的整数

print(random.choice([1,'23',[4,5]]))# 1或者23或者[4,5] 随机选取

print(random.sample([1,'23',[4,5]],2))#列表元素任意2个组合

print(random.uniform(1,3))#大于1小于3的小数,如1.927109612082716 


item=[1,3,5,7,9]
random.shuffle(item) #打乱item的顺序,相当于"洗牌"
print(item)

变更随机验证码:

import random
def make_code(n):
    res=''
    for i in range(n):
        s1=chr(random.randint(65,90))
        s2=str(random.randint(0,9))
        res+=random.choice([s1,s2])
    return res

print(make_code(4))

置于的模块

图片 5

__doc__   是py文件的注释

图片 6

__file__  #文本本身的门径

图片 7

__package__  当前py文件在哪个文件夹下,要是多个路子用.连接

__cached__  做缓存用的

__name__  (重要)

__name__ == ‘__main__’的应用:

主文件: 调用函数前,必须加__name__ == ‘__main__’

 

json种类化  (Json便是字符串)

json.loads  用于将列表、字典、元组情势的字符串,转换为对应的字典,列表,元组(注意报错,格式)

图片 8

图片 9

在意上海教室的格式,报错。

json.dumps()  将获得的字典、列表,元组转换为相应的字符串

图片 10

json.dump()  获得剧情再写入相应的文书内

 

添加sys.path路径:

图片 11

 

图片 12

xml模块

xml是先后之间开始展览多少交互的情商,在有些应用中还会动用XML协议。xml和json类似,也是跨平台,xml协议在相继语言中都是支撑的。
xml文件是三个树形结构的多寡,python 的xml模块援救对xml文件的操作。
xml分为四个部分:标签(tag),属性(attrib),内容(text)。标签壹般有多级标签。

# 获取xml的根标签
import xml.etree.ElementTree as ET

tree = ET.parse("xmltest.xml")
root = tree.getroot()
print(root.tag)

#遍历xml文档, 使用多层循环,获取多层数据
for child in root:
    print('========>',child.tag,child.attrib,child.attrib['name'])
    for i in child:
        print(i.tag,i.attrib,i.text)

#只遍历year 节点
for node in root.iter('year'):  # root.iter()表示从根节点开始扫描整个xml
    print(node.tag,node.text)

#修改
for node in root.iter('year'):
    new_year=int(node.text)+1
    node.text=str(new_year)
    node.set('updated','yes')   # tag.set用于设置属性
    node.set('version','1.0')
tree.write('test.xml')

#删除node
for country in root.findall('country'): #  tag.findall 只查找tag的下一层。 tag.find只查找tag下一层的一个符合数据。
   rank = int(country.find('rank').text)
   if rank > 50:
       root.remove(country)
tree.write('output.xml')

在country内添加(append)节点year2

import xml.etree.ElementTree as ET

tree = ET.parse("a.xml")
root=tree.getroot()
for country in root.findall('country'):    # 使用两层for循环遍历整个标签下的数据
    for year in country.findall('year'):  
        if int(year.text) > 2000:               #  标签.text 用于指定标签对应的数据项
            year2=ET.Element('year2')     #
            year2.text='新年'
            year2.attrib={'update':'yes'}
            country.append(year2) # 往country节点下添加子节点

tree.write('a.xml.swap')

 hashlib模块:  (加密息息相关操作)

用户名,密码保存的时候必须加密

md伍加密是不可能反解的。

图片 13

因为各类电脑上的md五加密出来的数额都以一样的,所以会被别人取得加密相应的用户名,密码。所以要协调再定制,使md伍加密出来的数据只存在本人的微型总括机上。

图片 14

加密报到注册实例:

图片 15

 

 图片 16

 

os模块(和种类有关)

os.stat(“path“)  获取文件目录消息

图片 17

os.path.dirname(path)  获取文件所在的目录

图片 18

os.path.exists(path)  倘使path存在则赶回true,不然重回false

图片 19

os.path.join(path1[,path2[,…]])  将多个路子组合后归来,第3个相对路径在此以前的参数将被忽视

图片 20

 

1、在应用requests发送请求,响应数据转成json提醒,未有可解码的json

shutil 模块

shutil模块首假若对文本,文件夹,和压缩包进行操作处理的模块,也就是系统中常用的公文操作命令。
shutil.copyfileobj(fsrc, fdst[, length])
:复制文件,要是指标文件存在,则覆盖指标文件。

import shutil
shutil.copyfileobj(open('old.xml', 'r'), open('new.xml', 'w'))

shutil.copyfile(src, dst) 拷贝文件。

shutil.copyfile('new.xml', 'f2.log')

shutil.copymode(src, dst)
仅拷贝权限。文件的剧情,所属用户和所属组都不变。
shutil.copystat(src, dst) 仅拷贝状态新闻,包含: mode
bits,atime,mtime,flages.
shutil.copy(src,dst) : 拷贝文件和权力。

shutil.copy('f2.log','f1.log')

shutil.copy2(src, dst) 拷贝文件和景观音讯

shutil.copy2('f1.log', 'f2.log')

shutil.copytree(src, dst, symlinks=False, ignore=None)
递归的正片文件目录,和shutil.ignore_patterns(*patterns)连用,排除不必要拷贝的情节:

shutil.copytree('folder1', 'folder2', ignore=shutil.ignore_patterns('*.pyc', 'tmp*')) 
#目标目录不能存在,注意对folder2目录父级目录要有可写权限,ignore的意思是排除 

拷贝软连接:

import shutil

shutil.copytree('f1', 'f2', symlinks=True, ignore=shutil.ignore_patterns('*.pyc', 'tmp*'))
# 通常的拷贝都把软连接拷贝成硬链接,即对待软连接来说,创建新的文件

shutil.rmtree(path[, ignore_errors[, onerror]])递归的去除文件。

shutil.rmtree('folder1')

shutil.move(src, dst)递归的去运动文件,它相仿mv 命令,其实正是重命名。

shutil.move('folder1', 'folder3')

shutil.make_archive(base_name, format,...)
创造压缩包,并赶回文件路径,如 zip,tar。

  • base_name:压缩包的文本名,也足以是压缩包的门路。只是文件名时,则保留当前至当前目录,不然保存至内定路线。如
    data_bak =>保存至最近路。如:/tmp/data_bak =>保存至/tmp/
  • format:压缩包种类,“zip”, “tar”, “bztar”,“gztar”
  • root_dir:要削减的公文夹路径(默许当前目录)
  • owner:用户,私下认可当前用户
  • group: 组,暗许当前组
  • logger:用于记录日志,日常是logging.Logger对象

示例:

#将 /data 下的文件打包放置当前程序目录
import shutil
ret = shutil.make_archive("data_bak", 'gztar', root_dir='/data')

#将 /data下的文件打包放置 /tmp/目录
import shutil
ret = shutil.make_archive("/tmp/data_bak", 'gztar', root_dir='/data') 

shutil 对压缩包的拍卖是调用 ZipFile 和 TarFile 多少个模块来进行的.

shutil模块(高级文件、文件夹、压缩包处理模块)

图片 21

图片 22

图片 23

 

configparser模块:  (打开,读取特定格式的文书)(暗中认可文件都以字符串)

图片 24

 

 图片 25

 

d:\PHJ\Reporter\LOGS\report
d:\PHJ\Reporter\LOGS\report\Image

hashlib模块

hash:1种算法 ,3.x里代替了md伍模块和sha模块,重要提供 SHA壹, SHA2贰4,
SHA25陆, SHA3八肆, SHA512 ,MD5 算法
哈希算法的特征:
一.内容相同则hash运算结果1律,内容有点改变则hash值则变
贰.不可逆推
③.一模壹样算法:无论校验多长的数码,获得的哈希值长度固定。

对数码进行校验:

import hashlib
# 相同的内容校验结果一样
n=hashlib.md5('helloworld'.encode('utf-8'))   # 
print(n.hexdigest())

m=hashlib.md5('hello'.encode('utf-8'))
m.update('world'.encode('utf-8'))
print(m.hexdigest())

输出:

fc5e038d38a57032085441e7fe7010b0
fc5e038d38a57032085441e7fe7010b0

对文件进行校验:

import hashlib
m=hashlib.md5()
with open('my.cnf','rb') as f:
    for line in f:
        m.update(line)
print(m.hexdigest())

# 文件较大时不推荐使用一次读取文件的方式
m=hashlib.md5()
with open('my.cnf','rb') as f:
    m.update(f.read())
print(m.hexdigest())

在做加密算法时,通过撞库能够反解密码,所以一般对加密算法添加salt进行加密:

# 加盐处理
password='123456'
m=hashlib.md5('add salt code str'.encode('utf-8'))
m.update(password.encode('utf-8'))
print(m.hexdigest())

# 实际的处理字符串
n=hashlib.md5('add salt code str123456'.encode('utf-8'))
print(n.hexdigest())

出口的结果一律:

b7709cddef6897748d66663afdb5a003
b7709cddef6897748d66663afdb5a003


hashlib模块类似的还有二个hmac模块,那几个模块用法和hashlib壹样,不过必须确定保障第1个字符1样,才能校验出一致的结果:

import hmac

h=hmac.new('hello'.encode('utf-8'))
h.update('world'.encode('utf-8'))
print(h.hexdigest())

k=hmac.new('hello'.encode('utf-8'))
k.update('wor'.encode('utf-8'))
k.update('ld'.encode('utf-8'))
print(k.hexdigest())

# 这里输出和上面两种结果不一致
g=hmac.new('hell'.encode('utf-8'))
g.update('oworld'.encode('utf-8'))
print(g.hexdigest())

输出:

0e2564b7e100f034341ea477c23f283b
0e2564b7e100f034341ea477c23f283b
e705e80d60a2e0851a23dcd1773099ab

python去找模块的门路

图片 26

当中,第壹方模块安装的岗位

图片 27

提示:第二方模块名不能够和停放以及第3方模块重名

导入模块:from lib.account import login

 

 hashlib模块:  (加密有关操作)

用户名,密码保存的时候必须加密

md五加密是不得以反解的。

图片 28

因为各种电脑上的md5加密出来的数目都是同样的,所以会被人家取得加密相应的用户名,密码。所以要本身再定制,使md5加密出来的多少只设有自身的微处理器上。

图片 29

加密登录注册实例:

图片 30

 

 图片 31

 

postdata = '''{'userName':'13718651996',
            'passwd':'yhlxxxx870120',
            'validateCode':'abc',
            'rememberMe':'true'}'''
url = 'https://secure.elong.com/passport/ajax/elongLogin'
request = Session().post(url,data=eval(postdata))
print(request.json())

sys模块

sys.argv 命令行参数List,第壹个因素是程序本人路径
sys.exit(n) 退出程序,寻常退出时exit(0)
sys.version 获取Python解释程序的版本新闻
sys.maxint 最大的Int值
sys.path 重回模块的查找路径,伊始化时采纳PYTHONPATH环境变量的值
sys.platform 重临操作系统平台名称

打字与印刷过程条的演示:

>>> print('[%-20s]' %'##')
[##                  ]
# -20 表示宽度,[%-20s]是固定写法,后面引用字符变量 %'##'

'\r' 表示跳到行首打印

#=========实现打印进度条函数==========
import sys
import time

def progress(percent,width=50):
    if percent >= 1:
        percent=1
    show_str=('[%%-%ds]' %width) %(int(width*percent)*'#')
    print('\r%s %d%%' %(show_str,int(100*percent)),file=sys.stdout,flush=True,end='')

添加sys.path路径:

图片 32

 

subprocess模块

图片 33

 

logging模块(首要)  (用于便捷记录日志且线程安全的模块)

图片 34

图片 35

图片 36

图片 37

图片 38

 

那是出于,发送请求的多寡,存在不当,响应出错比如404
400,所以找不到能够解码的json

Time 模块

日子模块常用的有如下几种。

import time
print(time.time())  # 1513319911.3789327 1970年到当前的总时间s。
print(time.strftime('%Y-%m-%d %X')) # 2017-12-15 14:38:31

元组格局显示时间:

print(time.localtime())
# time.struct_time(tm_year=2017, tm_mon=12, tm_mday=15, tm_hour=14, tm_min=53, tm_sec=39, tm_wday=4, tm_yday=349, tm_isdst=0)

print(time.localtime().tm_mon) # 12

UTC时间:

print(time.gmtime())

将格式化的时辰转移为元组情势的小时:

print(time.localtime(3243543544))
print(time.gmtime(3243543544))

光阴转移:

print(time.ctime(12334454))
print(time.asctime(time.gmtime()))

Sun May 24 02:14:14 1970
Fri Dec 15 07:38:07 2017

os模块(和体系有关)

os.stat(“path“)  获取文件目录音信

图片 39

os.path.dirname(path)  获取文件所在的目录

图片 40

os.path.exists(path)  如若path存在则赶回true,不然再次来到false

图片 41

os.path.join(path1[,path2[,…]])  将八个途径组合后赶回,第三个相对路径以前的参数将被忽略

图片 42

 

内置的模块

图片 43

__doc__   是py文件的笺注

图片 44

__file__  #文本自个儿的路线

图片 45

__package__  当前py文件在哪个文件夹下,假若多少个路子用.连接

__cached__  做缓存用的

__name__  (重要)

__name__ == ‘__main__’的应用:

主文件: 调用函数前,必须加__name__ == ‘__main__’

 

json类别化  (Json正是字符串)

json.loads  用于将列表、字典、元组格局的字符串,转换为对应的字典,列表,元组(注意报错,格式)

图片 46

图片 47

专注上海体育场面的格式,报错。

json.dumps()  将获得的字典、列表,元组转换为对应的字符串

图片 48

json.dump()  获得内容再写入相应的文本内

 

str = r'd:\PHJ\Reporter\LOGS'
#报告文件路径
reporPath = os.path.join(str,'report')
isExistPath(reporPath) #创建文件夹

print(reporPath)

imgPath = os.path.join(reporPath,'\\Image')
print(imgPath)

shelve模块

shelve模块和pickle作用类似,可是比pickle模块简单,唯有一个open函数,重临类似字典的靶子,可读可写;key必须为字符串,而值能够是python所支撑的数据类型。

import shelve

f=shelve.open(r'sheve.txt')
# f['stu1_info']={'name':'egon','age':18,'hobby':['piao','smoking','drinking']}
# f['stu2_info']={'name':'gangdan','age':53}
# f['school_info']={'website':'http://www.pypy.org','city':'beijing'}

print(f['stu1_info']['hobby'])
f.close()

简介:

模块:用1坨代码实现了某些意义的代码集合。分为三种:

  • 自定义模块
  • 其3方模块
  • 置于模块

shutil模块(高级文件、文件夹、压缩包处理模块)

图片 49

图片 50

图片 51

 

谬误输出输出:

json&pickle模块

把对象(变量)从内部存款和储蓄器中成为可存款和储蓄或传输的历程称之为系列化,在Python中叫pickling.

  • json:
    json支持具备通用项目标操作,对于python特有的职能不援助,就有很好的跨平台性。
    在应用eval执行字符串表达式是有局限性的,对于普通的数据类型,json.loads和eval都能用,但境遇特殊类型的时候,eval就不管用了,所以eval的重大仍然壹般用来执行一个字符串表明式,并赶回表明式的值。
    利用json.dump()能够将字典函数等类型转换为字符串类型,方便存款和储蓄:

import  json
dic = {'name': 'alvin', 'age': 23, 'sex': 'male'}
print(type(dic))

j=json.dumps(dic)
print(type(j))
print(j)

输出:
<class ‘dict’>
<class ‘str’>
{“name”: “alvin”, “age”: 23, “sex”: “male”}

动用json.loads()情势能够将适合json格式的数据开始展览种类化:

# 读取json.txt的文件内容为:{"name": "alvin", "age": 23, "sex": "male"}
import  json
with open('json.txt','r') as f2:
    data=json.loads(f2.read())
    print(type(data))
    print(data)

输出:
<class ‘dict’>
{‘name’: ‘alvin’, ‘age’: 23, ‘sex’: ‘male’}

  • pickle: 是python
    特有体系化操作,能够体系化函数等尤其类型。与json的施用方法接近。

import pickle
def func():
    print('this is func')    
j=pickle.dumps(func)
print(j)

出口的是bytes类型:
b’\x80\x03c__main__\nfunc\nq\x00.’

反系列化:

import pickle
f=open('序列化对象_pickle','rb')
data=pickle.loads(f.read())  #  等价于data=pickle.load(f)
print(data['age'])   

subprocess模块

图片 52

 

logging模块(首要)  (用于便捷记录日志且线程安全的模块)

图片 53

图片 54

图片 55

图片 56

图片 57

 

简介:

模块:用1坨代码完毕了某些意义的代码集合。分为三种:

  • 自定义模块
  • 其3方模块
  • 放置模块

 

configparser 模块

在选用mysql或许openstack的布局文件中,平日能够看到如下的安顿文件格式:

[mysqld]
datadir=/var/lib/mysql
socket=/var/lib/mysql/mysql.sock
symbolic-links=0
[mysqld_safe]
log-error=/var/log/mariadb/mariadb.log
pid-file=/var/run/mariadb/mariadb.pid

选择configparser能够很有利的读写配置音信的内容.

import configparser

config=configparser.ConfigParser()
config.read('my.cnf')
print(config.sections())   # 查看标题
print(config.options(config.sections()[0])) # 查看某个标题下的配置项
print(config.get('mysqld','socket')) # 查看某个标题下的某个配置项的值

输出:

['mysqld', 'mysqld_safe']
['datadir', 'socket', 'symbolic-links']
/var/lib/mysql/mysql.sock

只要获得的值中涵盖数字和布尔值,能够使用get的不二等秘书籍一向转换为对应的花色。

res1=config.getint('title','conf_option')
res2=config.getfloat('title','conf_option')
res3=config.getboolean('title','conf_option')

修改配置:

config.remove_section('mysqld') # 删除整个标题区域
config.remove_option('mysqld_safe','log-error') # 删除指定title的配置项
config.write(open('my.cnf','w'))  # 写入文件

加上配置:

config.add_section('client')   # 添加一个标题
config.set('client','socket','/var/run/mysql.sock') # 在client标题下添加 socket = /var/run/mysql.sock
config.write(open('my.cnf','w'))  # 写入文件

os.path.abspath(os.path.dirname(__file__))
用那么些获得当前路线,而不用用os.getcur

os模块常用函数

os.getcwd() 获取当前工作目录,即当前python脚本工作的目录路径
os.chdir(“dirname”) 改变近年来剧本工作目录;也就是shell下cd
os.curdir 再次回到当前目录: (‘.’)
os.pardir 获取当前目录的父目录字符串名:(‘..’)
os.makedirs(‘dirname1/dirname二’) 可生成多层递归目录
os.removedirs(‘dirname一’)
若目录为空,则删除,并递归到上超级目录,假诺也为空,则删除,依此类推
os.mkdir(‘dirname’) 生成单级目录;也就是shell中mkdir dirname
os.rmdir(‘dirname’)
删除单级空目录,若目录不为空则无法删除,报错;也等于shell中rmdir
dirname
os.listdir(‘dirname’)
列出钦命目录下的兼具文件和子目录,包罗隐藏文件,并以列表格局打字与印刷
os.remove() 删除二个文件
os.rename(“oldname”,”newname”) 重命名文件/目录
os.stat(‘path/filename’) 获取文件/目录音讯
os.sep 输出操作系统特定的不二等秘书籍分隔符,win下为”\”,Linux下为”/”
os.linesep 输出当前平台选取的行终止符,win下为”\t\n”,Linux下为”\n”
os.pathsep 输出用于私分文件路径的字符串 win下为;,Linux下为:
os.name 输出字符串提示当前应用平台。win->’nt’; Linux->’posix’
os.system(“bash command”) 运行shell命令,直接呈现
os.environ 获取系统环境变量
os.path.abspath(path) 再次回到path规范化的相对路径
os.path.split(path) 将path分割成目录和文书名二元组重返
os.path.dirname(path)
重临path的目录。其实正是os.path.split(path)的第3个成分
os.path.basename(path)
重回path末了的文书名。怎么着path以/或\最终,那么就会回来空值。即os.path.split(path)的第三个要素
os.path.exists(path) 如果path存在,返回True;如果path不存在,返回False
os.path.isabs(path) 假设path是相对路径,重返True
os.path.isfile(path) 假如path是1个设有的文书,再次来到True。否则重返False
os.path.isdir(path)
假如path是贰个存在的目录,则赶回True。否则重回False
os.path.join(path1[, path2[, …]])
将两个路子组合后回去,首个相对路径从前的参数将被忽视
os.path.getatime(path) 再次来到path所指向的文件大概目录的末梢存取时间
os.path.getmtime(path) 重临path所指向的文书或然目录的最终修改时间
os.path.getsize(path) 返回path的大小

os.path.normcase()此函数在Linux和mac平台上,该函数会原样重临path,在windows平台上会将路径中的全部字符转换为小写的花样,并将斜转换为反斜杠:

# Linux 平台:
>>> import os
>>> os.path.normcase('c:/windows\\system32\\')
'c:/windows\\system32\\'

# Windows平台:
>>> import os
>>> os.path.normcase('c:/windows\\system32\\')
'c:\\windows\\system32\\'

使用.. 能够代表上超级目录。对目录进行格式化:

#Windows 平台:
>>> os.path.normpath('c://windows\\System\\../Temp/')
'c:\\windows\\Temp'

# Linux 平台:
>>> os.path.normpath('/etc/system/sysconfig/\\\\network/\\\ifconfig/../..')
'/etc/system/sysconfig'

取得文件目录的二种办法(有微微层,就利用多少次os.path.dirname):

方式一:
>>> os.path.dirname(os.path.dirname(os.path.dirname(os.path.abspath('/etc/sysconfig/network-scripts/ifcfg-eth0'))))
'/etc'

方式二: os.pardir想当与  ..    sys.path是一个目录列表.使用insert(0,..)的方式可以优先将目录加入到列表的最前面.
>>> topdir = os.path.normpath(os.path.join(os.path.abspath('/etc/sysconfig/network-scripts/ifcfg-eth0'),os.pardir,os.pardir,os.pardir))
>>> print(topdir)
/etc
>>> sys.path.insert(0,topdir)

化解办法:

发表评论

电子邮件地址不会被公开。 必填项已用*标注