name: large-file-parquet-analysis-and-highlight description: "当Excel文件总行数超过1万行时,通过转换为Parquet格式提升读取性能,提取目标指标并计算最大值,最后将结果输出为Excel并对特定行进行高亮标注。"
Skill Steps
Step1 读取文件并统计所有 sheet 的行数,汇总后打印总行数,用于判断数据规模是否需要启用大文件处理。
import pandas as pd
file_path = "input_data.xlsx"
# 读取所有sheet并统计总行数
xls = pd.ExcelFile(file_path)
sheet_names = xls.sheet_names
print(f"Sheet列表: {sheet_names}")
total_rows = 0
for sheet in sheet_names:
# 仅读取一列以加快行数统计速度
df_temp = pd.read_excel(file_path, sheet_name=sheet, usecols=[0], header=None)
rows = len(df_temp)
total_rows += rows
print(f"Sheet '{sheet}': {rows} 行")
print(f"\n总行数 = {total_rows}")