“全国文明城市”是反映城市整体文明水平的综合性荣誉称号，是国内城市综合类评比中的最高荣誉，也是最具有价值的城市品牌。创建全国文明城市，是协调推进全面建设社会主义现代化国家的重要载体，是统筹推进城市经济、政治、文化、社会、生态文明全面发展的系统工程。通过创建全国文明城市，可以更好地改善城市环境，打造城市形象，提升城市的综合竞争力，可以不断提高城市文明程度和市民文明素质，激发全市人民形成和保持争先向上的精神状态，这是一项顺民意、得民心的利民工程，是构建和谐社会的重要推动力。

一、研究背景

每年全国各地有上百个城市参与文明城市测评，台州市自申报创建文明城市以来，认真落实文明城市创建的各项任务，全力做好迎评复检的各项工作。国家统计局台州调查队承接了台州市文明城市测评的自检自查工作，为切实有效地推进文明测评工作，台州队从方案制定、计划安排、实地测评、数据汇总、报告撰写等一系列的环节，投入了大量的人力物力。但是文明城市测评存在点位多、照片多、汇总数据多这“三多”问题，如果按照传统的手工录入汇总，需要耗费大量的人力物力和时间，如何高效地推进文明城市测评工作成了台州队需要研究的一项重要课题，在探索过程中，我们逐渐找到一条适合的台州市测评工作的方法，利用Python程序对文明城市测评大数据进行全流程自动处理。

二、需求分析

台州市文明城市测评工作按照全国文明城市测评要求对椒江、黄岩、路桥三区共37个乡镇（街道）进行测评，每次测评都有近700个点位，需在2到3天内完成测评工作，任务非常繁重。特别是数据处理环节，调查员需完成取证拍照、照片分类、照片命名、打分、数据录入、审核、汇总、统计、生成报表等一系列工作，调查员只能人工完成，逐项操作，耗时长，工作量大，任务繁重。通过前几年的工作积累，我们发现很多工作可以通过计算机编制程序来自动处理数据，用以减轻调查员和统计员的工作任务，提高工作效率。

首先，我们从照片的命名、打分着手，通过计算机程序自动进行；其次，数据录入可以通过计算机程序对照片信息进行分类统计进行计分，并录入；第三，数据汇总、统计可以通过计算公式来实现；第四，报表可以根据固定格式从数据汇总中调用相关的数据。

确定目标任务后，我们选择目前最流行的、在大数据处理分析方面具有无可比拟的Python语言作为程序的开发工具。

三、程序实现过程研究

经过研究，我们决定将程序分成两个部分来实现，即生成录入表、生成数据报表两个部分。

首先，在使用程序前必须设置卡片信息表（如表 1）。其中数据类型中“1”表示城市/主街道，“2”表示乡镇/其他街道；卡片编号根据测评表序号和测评项目来编制；测评点位即卡片标题中测评对象的类型；测评内容即测评项目，与卡片编号中的子编号对应；赋值指该测评项目的分值；部门是指该点位相应测评项目的责任单位；是否需要写清街道是指测评点位的负责街道。

表1  卡片信息表

（一）生成录入表

在拍照取证后，调查员需要根据要求将照片分类，一级目录为区级或街道；二级目录为卡片编号-具体点位名称；三级目录为测评表中的测评项目；四级目录为扣分理由、数量（处数）及扣分值。

照片放置在四级目录中，照片审核后，执行“生成录入表”Python程序后，照片会根据扣分理由自动命名并编号。同时生成录入数据表，格式如表2所示。

表2  生成数据表

卡片编号与卡片信息及二级目录相关联；测评内容与卡片信息及三级目录相关联；是否需要写清街道列“-”表示不需要，则街道列显示相关街道，此两项与卡片信息表及一级目录相关；区与一级目录相关；测评点即具体点位名称；扣分原因与四级目录相关；得分根据扣分情况来统计。

（二）生成数据报表

调查员生成录入数据后将数据表交组长，按其他街道、其他乡镇、区点位（主街道）分类汇总。再交给项目负责人，执行“生产数据报表”Python程序后，生成各类数据报表。

生成“运行结果”文件夹和文件“文明城市单位排名.xlsx”（表3）、“文明城市点位详情.xlsx”、“文明城市统计结果.docx”（表4）、“文明城市问题汇总.xlsx”（表5）。

表3主要统计各主管部门所对应的负责单位的得分情况，按照得分率进行排名。按照主管部门抓落实，对存在问题更好地明确相关部门责任。

表3  文明城市单位排名报表

表4  文明城市点位统计报表

表5  文明城市点位详情报表

表6统计各区级单位的得分率情况及排名，可以进行横向比较各区之间的得分情况。

表6  分区文明城市统计结果报表

表7统计出各主要街道、其他街道以及乡镇的得分情况排名。

表7  分街道（乡镇）文明城市统计结果报表

表8主要统计各点位存在的具体问题。

表8  文明城市问题汇总报表

四、Python程序实现技术研究

我们在利用Python程序处理文明城市测评数据的过程中，主要用到了Python对磁盘文件的读写、重命名、Excel文件、Word文件的读写以及对文明城市测评数据处理的环节等方面。

（一）检测“卡片信息”文件

检测当前文件夹下是否存在“卡片信息.xls”文件，该文件作为点位测评分的数据文件。

（二）读取“卡片信息”

读取当前文件夹中的“卡片信息”，遍历表中的行列，得到数据字典。

（三）遍历各文件夹中的测评数据，并生成数据汇总表

遍历所有子目录，计算所有扣分项，并记录数据。根据拆解文件夹名称来汇总、统计数据，如遇到文件夹名称异常，则提示相关文件夹错误信息。

（四）将数据生产汇总表

将第三步汇总出来的数据保存到Excel文件中。 

（五）设置表格样式

美化设置汇总文件的格式，重新设置行高、列宽、对齐方式、背景颜色等。

（六）读取汇总数据

读取汇总文件中的数据，并保存在infos中，为后期各种统计表的生产做好准备。

（七）按点位统计信息

按照点位统计扣分情况，并保存信息。

（八）生产各类报表

五、结束语

通过Python程序的应用，解决了在文明城市测评中调查人员照片重命名和数据录入的问题，解决了数据的汇总统计及报表生成的问题，初步实现了对文明城市测评大数据进行自动整理与汇总，有效地提高了文明城市测评中数据录入和数据报表生成的工作，避免了人工统计过程中的疏忽和遗漏，提高了数据的准确度。接下来，我队还将在测评数据采集、照片智能分类、自动化汇总等环节做进一步的研究。由于水平有限，难免存在一些不足之处，敬请指正。