用python处理Excel数据,实现Excel的功能:分列、透视等功能

1. Excel 解压文件

#解压tar_path中的压缩文件到uzipPath
def unzip_archive(tar_path):
print('#######解压文件夹,',tar_path)
for i in os.listdir(tar_path):
if i.endswith('zip'):
print(i)
shutil.unpack_archive(tar_path + "/" + i,unzipPath)

2. Excel的基本打开读写、获取列

常见的Excel操作包括xlrd、pandas、xlwings,基本操作包括打开、读取、获取单元格值、写入等

xlrd

data = xlrd.open_workbook(i)  # 打开表
sheet = data.sheet_by_index(0) # 按照index获取工作簿
sheet = data.sheet_by_name('sheet1') # 按照工作簿名获取工作簿
nrows = sheet.nrows # 获取行数
ncols = sheet.ncol # 获取列数
row_value = sheet.row_values(i)
col_value = sheet.col_values(j)

用xlsxwriter写入到Excel

划重点:write_row(row,col,data) 用了enumerate自动匹配索引和迭代的值

#将alist写入tarfile的名为name的工作簿中
def insert_file(alist,tarfile,name='sheet1'):
print("####将透视表写入到",tarfile)
wh = xlsxwriter.Workbook(tarfile)
wadd = wh.add_worksheet(name)
if len(alist) > 0 :
for row_num,row_data in enumerate(alist):
wadd.write_row(row_num,0,row_data)

补充:enumerate的用法

enumerate() 函数用于将一个可遍历的数据对象(如列表、元组或字符串)组合为一个索引序列,同时列出数据和数据下标

代码是示意结果

https://www.runoob.com/python/python-func-enumerate.html

alist = [['1','1-1'],['2','2-2'],['3','3-3']]
for row_num, row_data in enumerate(alist):
print(row_num,row_data)

pandas

xlwings

xlwings的好处在于可以直接获得某列的指定位置的数据,缺点是 默认自动打开读取的文件,甚至关了运行程序后台还是显示这个文件是打开的……

设置visible之后 只是前段看不见,但是默认的还是会打开……

但是在获取数据上还是很方便的

import xlwings as xw
app = xw.App(visible=True, add_book=False)
wb = app.books.open(file) #打开file
sht = wb.sheets[0]
dateLong = sht.range(f'H3:H{nrows}').value

3.数据透视表

    # 根绝tarfile生成数据透视表
df = pd.read_excel(tarfile)
pd.pivot_table(df,index=[u'日期',u'首次访问'],values=[u'手机',u'会话效果'],aggfunc=[np.count_nonzero,np.count_nonzero])

参考链接:https://www.cnblogs.com/Yanjy-OnlyOne/p/11195621.html

但是这种方法写出的透视表数据不美观,后续需要调整,所以自己写了个计数算法

算法思想是:空为0非空为1,计算

    lista = [[0 if temp=='' else 1 for temp in list] for list in a]
for i in range(len(a)):
kl = a[i][:2]
if type(kl[0]) == float or type(kl[0]) == int:
kl[0] = getdate(kl[0]) # 从数字型日期转为字符串型日期 key = (kl[0], kl[1]) #前两列作为做透视的key
val = lista[i][2:] #h后两列是值
if key not in dicta.keys():
dicta[key] = val
else:
raw = dicta[key]
dicta[key] = [raw[i] + val[i] for i in range(len(raw))]
result = [list(key) + dicta[key] for key in dicta.keys()]

4. 获取文件内的所有文件

def get_filename(tar_path):
for root,dirs,files in os.walk(tar_path):
for i in files:
if i.endswith('xls') or i.endswith('xlsx'):
print(i)
dir.append(tar_path + "/" + i)
print('#####解压后的Excel文件',dir)
return dir

这里深入了解了os的几个常用函数,包括获取指定目录下的文件、

#获取指定目录下的文件夹或文件的名字列表
a = os.listdir(path)
print(a) # 打开文件
f = os.open("",os.O_RDWR|os.O_CREAT)
os.write(f,"this is test") #重命名
os.rename(src,dst)
os.renames(old,new) #递归地更名
#删除
os.remove(path)
os.removedirs(path) #删除递归目录
#遍历目录
os.walk()

最新文章

  1. Consul的一个更新:服务端节点故障后重连
  2. 搭建Cordova开发环境
  3. 获取APP最新版本的接口案例
  4. html/css基础篇——iframe和frame的区别【转】
  5. Tomcat如何设置网站的默认首页
  6. 定期来一次“绩效谈话”(摘自易中)
  7. win10 Administrator没有管理员权限解决方案
  8. Mac下部署Android开发环境附加NDK
  9. 安装phonegap
  10. mysqldump中master-data和dump-slave的区别
  11. C++ trivial和non-trivial构造函数及POD类型(转)
  12. Mac 下 Scala 平台搭建
  13. ViewPager的使用方法和实现过程
  14. git命令使用方法
  15. (cljs/run-at (->JSVM :browser) "语言基础")
  16. 网卡也能虚拟化?网卡虚拟化技术 macvlan 详解
  17. 颜色空间的转换系列 (一) ——RGB2XYZ/LAB
  18. SVN Attempted to lock an already-locked dir异常解决方法
  19. sqlserver统计日志数目
  20. 版本管理(二)之Git和GitHub的连接和使用

热门文章

  1. 基于 Traefik 如何实现 path 末尾自动加斜杠?
  2. 痞子衡嵌入式:Farewell, 我的写博故事2016-2019
  3. 一看就会的 Anaconda 搭建 OpenCV for Python 环境(全平台通用)
  4. 字节输出流OutputStream类-字节输出流写入数据到文件
  5. Java入门与进阶 P4.1+P4.2
  6. php7.3的安装以及在Apache中部署php
  7. 浅谈JS词法环境
  8. 重学SpringBoot. step4 Redis的应用
  9. 力扣---167. 两数之和 II - 输入有序数组
  10. springboot FilterRegistrationBean 拦截器的使用