-
字符编码相关
- 什么是字符编码
- 字符编码的类型
- 字符编码的使用
- python2和python里字符编码的区别
-
文件的相关
- 文件的基础操作
- 打开文件的模式
字符编码
什么是字符编码
在计算机里只识别二进制,为了方便人类的理解,出现了ASCII等编码格式,方便人们阅读理解。-
字符编码的类型
- ASCII编码
在计算机发展的初期没有考虑到计算机的极速发展,所以考虑到英文的支持使用了ASCII编码,在ASCII理一个bytes代表一个字符,1bytes=8bit,8bit可以表示0-2**81种变化,即可以表示256个字符 - GBK等编码
为了满足其他国家,各个国家开始定制了自己的编码,日本把日文编到Shift_JIS里,韩国吧韩文编到了Euc-kr里,而中国把汉子编到了gbk里,在GBK:2Bytes代表一个字符 - Unicode--->utf-8
因为在各国都有自己的标准,他们互相并不支持,所以在多语言混合的文本中,就会显示出乱码,为了支持各个国家的混合文本,而产生了unicode,在unicode统一用2Bytes代表一个字符,2**16-1=65535,可代表6万多个字符,因而号称兼容万国语言,听起来挺不错的但是聪明的读者应该发现了对于英文字符如果用2Bytes存的话会造成大量的存储空间浪费,于是产生了UTF-8,对英文字符只用1Bytes表示,对中文字符用3Bytes - unicode和utf-8你用谁?
所有的程序,最终都要加载到内存,程序保存到硬盘不同的国家用不同的编码格式,但是到了内存中为了兼容万国(计算机可以运行任何国家程序的原因)统一用unicode,在unicode和utf-8的选择中选择unicode做内存固定使用,是因为节省计算,虽然浪费了空间。但在网络传输中需要数据稳定高效的传输,于是都转成了utf-8格式
- ASCII编码
-
字符编码的使用
乱码的产生
文件从内存写进磁盘的操作称为存文件
文件从硬盘读进内存的操作称为读文件在存文件的过程中你使用什么编码格式存的,它就在硬盘里以什么编码格式写,而当你在文件中写入日文的时候,你用gbk格式保存的话,它会因为找不到对应的关系而无法保存成功,这样的保存是没有办法在利用的。
读文件时导致的乱码
当你用gbk打开shift-JIS的编码文件时,会因为找不到适合的对应关系,而现实乱码,这时候你调整。
-
python2与python3的区别
- 在python2中,str编码后的结果是bytes,unicode字符编码的结果是str/bytes,在python2中默认使用的编码格式是ASCII。
- 在python3种默认的编码就是unicode,无需加u,字符也会用unicode形式存进新的内存空间中。
文件相关
- 文件的相关操作
1 f = open('a.txt','r+',encoding='utf-8') # 在这行代码中,第一个f是文件句柄,方便你操作文件,open用来调用系统中提供的接口用来操作文件,a.txt是文件的相对路径,如果文件不在当前路径会报错,如果需要打开绝对路径下的文件在windows下记得转义\路径,r+表示读写的模式打开文件,encoding表示打开文件时候用什么格式。
2 f.read() # 读取文件的全部内容,这里需要注意的是如果打开的文件过大,会导致系统崩溃的
3 f.reiadline() #读取文件一行内容,以列表形式显示出来
4 f.readlines() #读取文件全部内容并以列表形式显示
5 f.closed() #判断文件是否关闭
6 f.name() #查看文件名
7 f.encoding() #查看文件编码
8 f.readable() #查看文件是否可读
9 f.writable() #查看文件是否可写
10 f.write('') #写入操作,一次写一行,读取写入的时候都是在操作字符串。
11 f.seek() #移动光标到指定位置,#seek单位是字节。可选参数0从开头开始移动,1当前位置,2末尾
12 f.tell() #告诉你当前光标的位置
13 f.truncate() #截断,写操作
14 f.close() #关闭文件,很重要,不关闭的话会造成内存的浪费。
15
16 #打开文件的另一种做法
17 with open('a.txt','r',encoding='utf-8') as read_f #可打开多个文件,会自动帮你关闭文件
18
19 #小案例,修改文件内容
20 import os
21 with open('a.txt','r',encoding='utf-8') as read_f,\
22 open('.a.txt.swap','w',encoding='utf-8') as write_f:
23 for line in read_f:
24 if 'alex' in line:
25 line =line.replace('lao','LAOWANG')
26 wite_f.write(line)
27 os.remove('a.txt')
28 os.rename('.a.txt.swp','a.txt') - 打开文件的模式
- r:只读模式打开,不能修改文件
- w:写的模式打开会覆盖原文件f,不能读文件
- a:追加操作
- r+:读写操作
- rb:对二进制格式的文件操作
- wb:对二进制文件写操