Python: 100M的excel文件读不出来

我本地有个129M的excel文件，就一个sheet，里面有90万行数据

pd.read_excel(file1)
pd.read_excel(file1,nrows=1)
pd.read_excel(file2,usecols='A:C',skipfooter=899999)
上述3种方法，无论哪种，读取速度都慢得不行，我不知道要多久，超过5分钟我就停了，有没有什么办法可以快速读取excel数据的


     
      
     
     
      
       
        0
       
       
        
         提建议
        
       
      
      
       
        
         
          
           
           
            
             
             
              微信扫一扫
             
            
            
             
            
            
             点击复制链接
            
           
          
          
           
            
            
             分享
            
           
          
         
        
       
      
      
       
        
         邀请回答
        
       
       
        
         
          
           
            
             编辑
            
            
             收藏
            
            
             删除
            
            
             结题
            
           
          
         
        
        
         
          
           
            
             
              收藏
             
             
              举报
             
            
           
          
         
         
          
          
           
            
             
              
               追加酬金
              
              
               (90%的用户在追加酬金后获得了解决方案)
              
             
             
            
            
             
              
               当前问题酬金
              
              
               
                
                 ¥
                
                
                 0
                
               
               
                (可追加 ¥500）
               
              
             
             
              
               
                支付方式
               
               
                
                
                 
                  
                   扫码支付
                  
                  
                   
                   
                  
                 
                 
                  
                   
                   
                  
                 
                
               
              
              
               
                
                
                
                 
                  
                   
                    
                     
                      
                       
                        
                         
                          加载中...
                         
                        
                        
                        
                        
                        
                        
                        
                       
                      
                     
                     
                      
                      
                      
                       提供问题酬金的用户不参与问题酬金结算和分配
                      
                      
                       支付即为同意
                       
                        《付费问题酬金结算规则》


    
     
      
       
        
         
          
           
            
             
              
               
                2
               
               条回答
              
              
               
                默认
               
               
                最新
               
              
             
             
              
               
               
                
                 
                  
                   
                    
                     
                     
                      
                       
                       
                        
                         关注
                        
                       
                      
                      
                       
                       
                       
                        
                         码龄
                         
                        
                        
                         粉丝数
                        
                        
                         原力等级 --
                        
                       
                       
                        
                         
                          
                           被采纳
                          
                         
                        
                        
                         
                          
                           
                            被点赞
                           
                          
                         
                         
                          
                           
                            
                             采纳率
                            
                           
                          
                         
                        
                       
                      
                     
                     
                      
                       
                       
                      
                     
                    
                    
                     
                      
                       
                        
                         
                          
                          
                          
                         
                        




    

                       
                      
                     
                    
                   
                   
                    
                     
                      
                       
                        qq_23283711
                       
                       
                       
                        2021-07-16 21:32
                       
                      
                      
                       关注
                      
                     
                    
                   
                  
                  
                   
                    
                     
                     
                      
                       
                        
                         
                          
                           
                            for i in range(0,9):
                            

                            data1['wo_new']=np.where((data1['dis1']>= 200)&(data1.index%9==0),data1['wo_id'],np.where((data1['dis1']<200)&
                            

                            (data1.index%9==0),data1['wo_new'],np.where((data1['dis1']>= 200)&(data1.index%9!=0) ,data1['wo_id'], data1['wo_new'])))
                            

                            data1['wo_new']=data1['wo_new'].shift(1)
                           
                          
                          
                         
                        
                       
                      
                     
                     
                      
                     
                     
                     
                      
                       
                        
                         
                          本回答被题主选为最佳回答
                         
                        
                       
                       
                        
                         , 对您是否有帮助呢?
                        
                       
                      
                      
                       
                        
                         
                          
                           本回答被专家选为最佳回答
                          
                         
                        
                        
                         
                          , 对您是否有帮助呢?
                         
                        
                       
                       
                        
                         
                          
                           
                            本回答被题主和专家选为最佳回答
                           
                          
                         
                         
                          
                           , 对您是否有帮助呢?
                          
                         
                        
                       
                      
                     
                     
                      
                       
                        
                         
                         
                        
                        
                         
                          
                           
                           
                          
                          
                           
                           
                            
                             
                              
                               
                               
                                
                                 
                                 
                                  微信扫一扫
                                 
                                
                                
                                 
                                
                                
                                 点击复制链接
                                
                               
                              
                              
                               
                                
                                
                                 分享
                                
                               
                              
                             
                            
                           
                           
                            
                             举报
                            
                           
                          
                         
                         
                          
                           
                            按下Enter换行，Ctrl+Enter发表内容


   
    
     
      
       
        
         
          
           
            
             
              
               
                
                 
                  
                   
                    
                    
                    
                    
                     查看更多回答(1条)
                     
                     
                    
                    
                     
                      
                       
                       
                      
                     
                     
                      
                       
                        
                        
                        
                         
                          报告相同问题？
                          
                         
                        
                       
                       
                      
                     
                     
                     
                     
                      
                       
                        
                         
                        
                       
                       
                       
                        
                         
                          
                          
                         
                        
                       
                      
                     
                     
                      
                      
                       
                        
                         
                          
                         
                        
                        
                        
                       
                      
                      
                       
                        
                         
                          
                           
                          
                         
                         
                         
                          
                           
                            
                            
                           




    

                          
                         
                        
                       
                       
                        
                         
                          
                           
                            
                           
                          
                          
                          
                         
                        
                        
                         
                          
                           
                            
                             
                              
                               
                               
                                
                                 python
                                
                                
                                 文件
                                
                                封装为exe
                                
                                 文件
                                
                                打不开
                               
                               
                                python
            2022-01-10 17:44
                               
                              
                              
                               
                                
                                 回答 2
                                
                                
                                 
                                  
                                   已采纳
                                  
                                  
                                   在代码里面加点日志打印一下,  比如在开头打印一下代码启动, 在中间打印下位置和
                                   
                                    文件
                                   
                                   名试试
                                  
                                 
                                
                               
                               
                                
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                
                               
                               
                                
                                 
                                  python
                                 
                                 爬虫并保存到
                                 
                                  excel
                                 
                                 
                                  文件
                                 
                                
                                
                                 python
            2023-02-01 15:25
                                
                               
                              
                              
                               
                                
                                 
                                  回答 3
                                 
                                 
                                  
                                   
                                    已采纳
                                   
                                   
                                    我用的edge，你改成chrome应该一样的
import time
from lxml import etree
from selenium import webdriver
import pan
                                   
                                  
                                 
                                
                                
                                 
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                 
                                
                                
                                 
                                  
                                   python
                                  
                                  用openpyxl保存
                                  
                                   excel
                                  
                                  时出现OSError: [Errno 9] Bad file descriptor，如何解决？
                                 
                                 
                                  python
            2022-08-11 21:07
                                 
                                
                               
                              
                              
                               
                                
                                 
                                  
                                   回答 2
                                  
                                  
                                   
                                    
                                     已采纳
                                    
                                    
                                     代码本身测试：这个代码在本地新建环境下使用是正常的错误解析：
OSError: [Errno 9] Bad file descriptor  Bad file descriptor  错误的
                                     
                                      文件
                                     
                                     描述符
                                    
                                   
                                  
                                 
                                 
                                  
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                             
                              
                               
                                
                                
                               
                               
                                
                                 
                                 
                                 
                                  
                                   
                                  
                                  
                                   
                                    python
                                   
                                   ：xlrd
                                   
                                    读
                                   
                                   取
                                   
                                    Excel
                                   
                                   
                                    文件
                                   
                                   ，显示在 tkinterTable 表格中
                                  
                                 




    

                                 
                                  2023-10-03 20:27
                                 
                                
                                
                                 
                                  belldeep的博客
                                 
                                 
                                  
                                   
                                    python
                                   
                                   xlrd
                                   
                                    读
                                   
                                   取
                                   
                                    Excel
                                   
                                   xlsx
                                   
                                    文件
                                   
                                   ，显示在 tkinterTable 表格中
                                  
                                 
                                
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                  
                                   为什么用
                                   
                                    python
                                   
                                   爬取数据到
                                   
                                    excel
                                   
                                   中300多行只剩下一行？
                                  
                                  
                                   python
              vscode
            2021-08-01 12:32
                                  
                                 
                                
                               
                              
                              
                               
                                
                                 
                                  
                                   
                                    回答 4
                                   
                                   
                                    
                                     
                                      已采纳
                                     
                                     
                                      将写入
                                      
                                       文件
                                      
                                      语句放到循环外，加上列名并逐行写入，后面的代码可以这样写：
#code
with open('data/51job.csv','w') as f:
    f.write(','.join(
                                     
                                    
                                   
                                  
                                  
                                   
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                   
                                  
                                  
                                   
                                    Pandas借助
                                    
                                     Python
                                    
                                    爬虫爬取HTML网页表格保存到
                                    
                                     Excel
                                    
                                    
                                     文件
                                    
                                    的问题，解答。
                                   
                                   
                                    python
            2021-09-20 23:00
                                   
                                  
                                 
                                
                               
                              
                              
                               
                                
                                 
                                  
                                   
                                    
                                     回答 2
                                    
                                    
                                     
                                      
                                       已采纳
                                      
                                      
                                       没有指定打开方式写为with open("./Gldjc_Pandas.txt","w+") as fin:即可
有帮助望采纳~
                                      
                                     
                                    
                                   
                                   
                                    
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                    
                                   
                                   
                                    
                                     
                                      Python
                                     
                                     如何压缩
                                     
                                      excel
                                     
                                     大小
                                    
                                    
                                     python
            2022-02-12 00:18
                                    
                                   
                                  
                                 
                                
                               
                              




    

                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      回答 5
                                     
                                     
                                      
                                       
                                        已采纳
                                       
                                       
                                        import zipfile
zip_file = zipfile.ZipFile('file_name.zip', 'w')
zip_file.write('xxxx.xlsx')
zip_fi
                                       
                                      
                                     
                                    
                                    
                                     
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                             
                              
                               
                                
                                 
                                  
                                   
                                   
                                  
                                  
                                   
                                    
                                    
                                    
                                     
                                      
                                     
                                     
                                      
                                       python
                                      
                                      之批量
                                      
                                       读
                                      
                                      写
                                      
                                       excel
                                      
                                      
                                       文件
                                      
                                     
                                    
                                    
                                     2022-12-08 20:40
                                    
                                   
                                   
                                    
                                     薄荷味i的博客
                                    
                                    
                                     
                                      
                                       python
                                      
                                      之批量
                                      
                                       读
                                      
                                      写
                                      
                                       excel
                                      
                                      
                                       文件
                                      
                                     
                                    
                                   
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                     
                                      使用
                                      
                                       python
                                      
                                      
                                       读
                                      
                                      取
                                      
                                       Excel
                                      
                                      导入MySQL，但无法
                                      
                                       读
                                      
                                      取xlsx
                                     
                                     
                                      mysql
              python
            2021-12-10 19:24
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       回答 1
                                      
                                      
                                       
                                        
                                         已采纳
                                        
                                        
                                         xlrd 和 xlwt 只能
                                         
                                          读
                                         
                                         写 xls
                                         
                                          文件
                                         
                                         要用 openpyxl 才能
                                         
                                          读
                                         
                                         写 xlsx
                                         
                                          文件
                                         
                                         。
                                        
                                       
                                      
                                     
                                     
                                      
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                      
                                     
                                     
                                      
                                       
                                        python
                                       
                                       使用glob找到
                                       
                                        文件
                                       
                                       后如何打开
                                      
                                      
                                       python
            2020-11-12 09:57
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              




    

                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        回答 2
                                       
                                       
                                        
                                         
                                          已采纳
                                         
                                         
                                          import os
path = 'G:\工作\....省略\
                                          
                                           文件
                                          
                                          夹'
for file in biao2:
    biao3 = pd.read_
                                          
                                           excel
                                          
                                          (os.path.join(path,
                                         
                                        
                                       
                                      
                                      
                                       
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        
                                       
                                      
                                      
                                       
                                        
                                         Python
                                        
                                        相对路径储存
                                        
                                         文件
                                        
                                        为什么变成盘符根目录了呢？
                                       
                                       
                                        python
            2021-07-24 09:50
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        
                                         回答 2
                                        
                                        
                                         
                                          
                                           已采纳
                                          
                                          
                                           获取当前脚本的路径（包含
                                           
                                            文件
                                           
                                           名称）-绝对路径 
a. os.path.abspath(file))
print(os.path.abspath(__file__))
b. os.path.realp
                                          
                                         
                                        
                                       
                                       
                                        
                                        
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                      
                                     
                                     
                                      
                                       
                                       
                                       
                                        
                                         
                                        
                                        
                                         
                                          Python
                                         
                                         将多个
                                         
                                          excel
                                         
                                         表格合并为一个表格
                                        
                                       
                                       
                                        2020-09-20 22:11
                                       
                                      
                                      
                                       
                                        在日常工作和学习中，我们经常需要处理大量的
                                        
                                         Excel
                                        
                                        
                                         文件
                                        
                                        。例如，当你需要收集来自不同部门或者个人的数据时，可能会收到很多个
                                        
                                         Excel
                                        
                                        
                                         文件
                                        
                                        。手动将这些
                                        
                                         文件
                                        
                                        中的数据合并起来既耗时又容易出错。这时，利用
                                        
                                         Python
                                        
                                        编程语言...
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        
                                        
                                         爬取有结果，但是导出
                                         
                                          excel
                                         
                                         
                                          文件
                                         
                                         是空的
                                        
                                        
                                         python
            2021-03-12 02:16
                                        
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              




    

                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        
                                         
                                          回答 2
                                         
                                         
                                          
                                           
                                            已采纳
                                           
                                           
                                            直接答案：
在函数 `news_ershoufang` 最后一行返回下数据 `return data_all`修改下
                                            
                                             excel
                                            
                                            的列名，一共两列 `df.columns = ['城市', '房屋户型'
                                           
                                          
                                         
                                        
                                        
                                         
                                         
                                        
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                       
                                      
                                      
                                       
                                        
                                        
                                        
                                         
                                          
                                         
                                         
                                          
                                           python
                                          
                                          
                                           读
                                          
                                          
                                           excel
                                          
                                          并写入_
                                          
                                           Python
                                          
                                          
                                           读
                                          
                                          取和写入
                                          
                                           Excel
                                          
                                          
                                           文件
                                          
                                          数据
                                         
                                        
                                        
                                         2020-11-20 23:22
                                        
                                       
                                       
                                        
                                         weixin_39609670的博客
                                        
                                        
                                         
                                          前言之前我们已经学过了
                                          
                                           Python
                                          
                                          
                                           读
                                          
                                          取和写入txt,csv
                                          
                                           文件
                                          
                                          数据的操作，今天我们学习一下如何利用
                                          
                                           Python
                                          
                                          
                                           读
                                          
                                          取和写入
                                          
                                           Excel
                                          
                                          
                                           文件
                                          
                                          数据的操作。一：
                                          
                                           Python
                                          
                                          
                                           读
                                          
                                          取
                                          
                                           Excel
                                          
                                          
                                           文件
                                          
                                          数据。（1）创建
                                          
                                           Excel
                                          
                                          数据
                                          
                                           文件
                                          
                                          ，创建好
                                          
                                           文件
                                          
                                          记得要关闭
                                          
                                           文件
                                          
                                          ...
                                         
                                        
                                       
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        
                                         
                                         
                                          
                                           python
                                          
                                          
                                           读
                                          
                                          取
                                          
                                           excel
                                          
                                          
                                           文件
                                          
                                          太大_干货：
                                          
                                           Python
                                          
                                          高阶
                                          
                                           读
                                          
                                          取
                                          
                                           Excel
                                          
                                          表格数据
                                         
                                        




    

                                        
                                         2020-12-15 13:25
                                        
                                       
                                       
                                        
                                         weixin_39613291的博客
                                        
                                        
                                         
                                          在我们日常工作中，经常会使用 Word、
                                          
                                           Excel
                                          
                                          、PPT、PDF 等办公软件。... 准备使用
                                          
                                           Python
                                          
                                          操作
                                          
                                           Excel
                                          
                                          
                                           文件
                                          
                                          ，常见的方式如下：(xlrd / xlwt、openpyxl、Pandas、xlsxwriter、xlwings、pywin32)xlrd 和 xlw...
                                         
                                        
                                       
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       没有解决我的问题,
                                       
                                        去提问
                                       
                                      
                                     
                                    
                                   
                                  
                                 
                                
                               
                              
                             
                            
                           
                          
                         
                         
                          
                           
                            
                             
                              
                               
                                
                                 
                                  
                                   
                                    
                                     
                                      
                                       
                                        
                                         向专家提问
                                        
                                       
                                       
                                        
                                         
                                          向AI提问
        “有问必答”服务下线公告
        ◇ 用户帮助中心
        ◇《冲榜分奖金》活动下线公告 及AIGC类回答处理措施
        ◇ 新手如何提问
        ◇ 奖惩公告
                                         
                                        
                                       
                                      
                                     
                                    
                                    
                                     
                                      
                                       
                                        
                                         问题事件
                                        
                                       
                                       
                                        
                                         
                                          
                                           
                                            
                                            
                                             
                                              
                                              
                                               
                                                关注
                                               
                                              
                                             
                                             
                                              
                                              
                                              
                                               
                                                码龄
                                                
                                               
                                               
                                                粉丝数
                                               
                                               
                                                原力等级 --
                                               
                                              
                                              
                                               
                                                
                                                 
                                                  被采纳
                                                 
                                                
                                               
                                               
                                                
                                                 
                                                  
                                                   被点赞
                                                  
                                                 
                                                
                                                
                                                 
                                                  
                                                   
                                                    采纳率
                                                   
                                                  
                                                 
                                                
                                               
                                              
                                             
                                            
                                            
                                             
                                              
                                              
                                             
                                            
                                           
                                           
                                            
                                             
                                              
                                               
                                                
                                                 
                                                 
                                                 
                                                
                                               
                                              
                                             
                                            
                                           
                                          
                                         
                                         
                                          
                                           
                                            
                                             创建了问题
                                            
                                            
                                            
                                             7月16日
                                            
                                           
                                          
                                         
                                        
                                        
                                         
                                          
                                           
                                          
                                         
                                        
                                       
                                      
                                      
                                       
                                        
                                         
                                          
                                           
                                            悬赏问题
                                           
                                          
                                          
                                           
                                            
                                             ¥20
                                            
                                            
                                             5000独立进程 消息同步问题
        delphi7 idhttp.get中URL 带%处理
        这个代码为什么不能实现图片轮播效果呢？
        multisim仿真定时器及其应用（相关搜索：定时器）
        参考链接文章训练集可视化
        关于#Stm32g070 adc采样#的问题，如何解决？
        Windows系统下 运行 会遇到的问题  CUDA Error : out of memory (err_no=2)  这个是怎么处理啊
        大一小白opengl

Python: 100M的excel文件读不出来

2 条回答默认最新

码龄粉丝数原力等级 --

问题事件

码龄粉丝数原力等级 --

悬赏问题

Python: 100M的excel文件读不出来

2 条回答 默认 最新

问题事件

悬赏问题

2 条回答默认最新