《數(shù)據(jù)采集技術(shù)與應(yīng)用》課件-7.1 讀寫文件

文件操作數(shù)據(jù)采集技術(shù)與應(yīng)用內(nèi)容/content讀寫文本文件01讀寫csv文件02讀寫json文件03

讀寫文本文件0101讀寫文本文件語法如下name：文件名或者文件所在的路徑mode：打開文件的模式：只讀r、寫入w、追加aencoding：編碼方式注意：1.w和a模式：如果文件不存在則創(chuàng)建該文件；如果文件存在，w模式先清空再寫入，a模式直接末尾追加。2.r模式：如果文件存在可以打開，若不存在則報(bào)錯(cuò)。open(name,mode,encoding)01讀寫文本文件#第一種方式f=open('文件路徑','文件操作方式',encoding='utf-8')#對(duì)文件進(jìn)行操作f.close()#第二種方式withopen('文件路徑','文件操作方式',encoding='utf-8')asf: #對(duì)文件進(jìn)行操作打開文件，有兩種寫法。需要手動(dòng)關(guān)閉文件，但是在程序開發(fā)中經(jīng)常會(huì)出現(xiàn)忘記關(guān)閉文件的情況。不需要手動(dòng)關(guān)閉文件，只要代碼退出了縮進(jìn)，Python就會(huì)自動(dòng)關(guān)閉文件。01讀寫文本文件在讀文件的時(shí)候，“文件操作方式”這個(gè)參數(shù)可以省略，也可以寫成“r”。文本文件的內(nèi)容和它相對(duì)于.py文件的位置如下：01讀寫文本文件使用下面的代碼來打開text.txt文件：withopen('text.txt','r',encoding='utf-8')asf:#通過f來讀文件讀取文件的方法有三種，如下read()文件對(duì)象.read(num)num表示要從文件中讀取的數(shù)據(jù)的長度（單位是字節(jié)），如果沒有傳入num，那么就表示讀取文件中所有的數(shù)據(jù)。01讀寫文本文件文本內(nèi)容如果換行，底層有\(zhòng)n，會(huì)有字節(jié)占位，導(dǎo)致讀取出來的眼睛看到的字符個(gè)數(shù)和參數(shù)值不匹配withopen('text.txt','r',encoding='utf-8')asf:content_list=f.read(10)print(content_list)01讀寫文本文件#文件對(duì)象.readlines()#readlines可以按照行的方式把整個(gè)文件中的內(nèi)容進(jìn)行一次性讀取，并且返回#的是一個(gè)列表，其中的每行數(shù)據(jù)是一個(gè)元素withopen('text.txt','r',encoding='utf-8')asf:content_list=f.readlines()print(content_list)01讀寫文本文件#readline()一次讀取一行內(nèi)容withopen('text.txt','r',encoding='utf-8')asf:content_list=f.readline()print(content_list)content_list=f.readline()print(content_list)content_list=f.readline()print(content_list)01讀寫文本文件使用Python寫文件也需要先打開文件，使用如下代碼來打開文件：withopen('new.txt','w',encoding='utf-8')asf: #通過f來寫文件寫文件的方法有兩種：write（）：直接將一段字符串寫入到文本中，可以使用下面這一行代碼：f.write("一段字符串文字"）withopen('new.txt','w',encoding='utf-8')asf: f.write('你好')01讀寫文本文件writelines（）：把列表里面的所有字符串寫入到文本中，可以使用下面這一行代碼：f.writelines(['第一段話','第二段話','第三段話'])需要特別注意，寫列表的時(shí)候，Python寫到文本中的文字是不會(huì)自動(dòng)換行的，需要人工輸入換行符才可以。withopen('new.txt','w',encoding='utf-8')asf:f.write('你好')f.write('\n===============\n')f.writelines(['嘿嘿','跟我學(xué)爬蟲'])f.write('\n===============\n')f.writelines(['爬蟲開發(fā)\n','看這本書就夠了\n'])下次課再見！

讀寫csv文件0202讀寫csv文件CSV文件可以用Excel或者Numbers打開，得到可讀性很高的表格。CSV文件本質(zhì)上就是文本文件，但是如果直接用文本編輯器打開，可讀性并不高。02讀寫csv文件Python自帶操作CSV的模塊,可以將CSV文件的內(nèi)容轉(zhuǎn)換為Python的字典，從而方便使用。要讀取CSV文件，需要導(dǎo)入Python的CSV模塊CSV文件本質(zhì)上是文本文件，需要先以文本文件的方式打開，再將文件對(duì)象傳遞給CSV模塊：importcsvwithopen('result.csv','r',encoding='utf-8')asf: reader=csv.DictReader(f) forrowinreader: print(row)02讀寫csv文件importcsvwithopen('result.csv',encoding='utf-8')asf:reader=csv.DictReader(f)forrowinreader:username=row['username']content=row['content']reply_time=row['reply_time']print(f'用戶名：{username},回復(fù)內(nèi)容：{content},回復(fù)時(shí)間:{reply_time}')02讀寫csv文件importcsvwithopen('result.csv',encoding='utf-8')asf:reader=csv.DictReader(f)forrowinreader: username=row['username'] content=row['content'] reply_time=row['reply_time'] print(f'用戶名：{username},回復(fù)內(nèi)容：{content},回復(fù)時(shí)間:{reply_time}')02讀寫csv文件importcsvwithopen('result.csv',encoding='utf-8')asf:reader=[xforxincsv.DictReader(f)]forrowinreader:username=row['username']content=row['content']reply_time=row['reply_time']print(f'用戶名：{username},回復(fù)內(nèi)容：{content},回復(fù)時(shí)間:{reply_time}')02讀寫csv文件csv.DictWriter(f,fieldnames)寫入CSV文件的列名行：writer.writeheader()將包含字典的列表全部寫入到CSV文件中：writer.writerows(包含字典的列表)寫入單個(gè)字典writer.writerow(字典)02讀寫csv文件data=[{'name':'kingname','age':24,'salary':99999},{'name':'meiji','age':20,'salary':100},{'name':'小明','age':30,'salary':'N/A'}]withopen('new.csv','w',encoding='utf-8')asf:writer=csv.DictWriter(f,fieldnames=['name','age','salary'])writer.writeheader()writer.writerows(data)writer.writerow({'name':'超人','age':999,'salary':0})下次課再見！

讀寫json文件0303讀寫json文件JSON擁有嚴(yán)格的格式，主要格式如下：只能用雙引號(hào)，不能用單引號(hào)元素之間用逗號(hào)隔開，最后一個(gè)元素不能有逗號(hào)不支持注釋中文等特殊字符，傳輸時(shí)應(yīng)確保轉(zhuǎn)為ASCII碼（\uXXX格式）支持多層嵌套Object或Array示例格式，03讀寫json文件importjsondict_var={'name':'Cactus','age':18,'skills':['Python','Java','Go','NodeJS'],'has_blog':True,'gf':None}print(json.dumps(dict_var))print(json.dumps(dict_var,indent=2,sort_keys=True,ensure_ascii=False))03讀寫json文件03讀寫json文件03讀寫json文件示例是json字符串轉(zhuǎn)字典importjsonjson_str='''{"name":"Cactus","age":18,"skills":["Python","Java","Go","NodeJS"],"has_blog":true,"gf":null}'''print(json.loads(json_str))03讀寫json文件importjsondict_var={'name':'Cactus','age':18,'skills':['Python','Java','Go','NodeJS'],'has_blog':True,'gf':None}withopen("demo2.json","w",encoding='utf-8')asf:#json.dump(dict_var,f)#寫為一行

json.