python编程心得体会（用python参加Kaggle的些许经验总结）

本文目录

• 用python参加Kaggle的些许经验总结
• 如何学习Python总结之谈
• Python多线程总结
• 【Python】基础总结
• python中类的理解与总结
• 个人实训工作总结怎么写
• python实验总结

用python参加Kaggle的些许经验总结

最近挤出时间，用python在kaggle上试了几个project，有点体会，记录下。

EDA，也就是对数据进行探索性的分析，一般就用到pandas和matplotlib就够了。EDA一般包括：

在这步完成之后，要对以下几点有大致了解

数据预处理，就是将数据处理下，为模型输入做准备，其中包括：

理论上来说，特征工程应该也归属于上一步，但是它太重要了，所以将它单独拿出来。kaggle社区对特征工程的重要性已经达成了共识，可以说最后结果的好坏，大部分就是由 特征工程 决定的，剩下部分应该是 调参 和 Ensemble 决定。特征工程的好坏主要是由 domain knowledge 决定的，但是大部分人可能并不具备这种知识，那么只能尽可能多的根据原来feature生成新的feature，然后让模型选择其中重要的feature。这里就又涉及到 feature selection , 有很多方法，比如backward,forward selection等等。我个人倾向于用 random forest的feature importance ， 这里 有论文介绍了这种方法。

Model Ensemble有 Bagging , Boosting , Stacking ,其中Bagging和Boosting都算是 Bootstraping 的应用。 Bootstraping 的概念是对样本每次有放回的抽样，抽样K个，一共抽N次。

最后是我的两点心得吧

这篇文章是参加kaggle之后的第一次总结，描述了下kaggle的步骤，通用的知识点和技巧。希望在未来一个月中，能把xgboost和stacking研究应用下，然后再来update。希望大家有什么想法都能跟我交流下~~

update: 更新了关于类别特征的处理方式以及Boosting和Bagging的看法，还有stacking的内容。

如何学习Python总结之谈

学习python主要是自学或者报班学习的方式，但不建议自学。

如果想通过学习python改行，那就需要明确一下自己的方向。因为python编程有很多方向，有网络爬虫、数据分析、Web开发、测试开发、运维开发、机器学习、人工智能、量化交易等等，各个方向都有特定的技能要求。

想学的话，当然是可以学习的。python是一门语法优美的编程语言，不仅可以作为小工具使用提升我们日常工作效率，也可以单独作为一项高新就业技能！

python可以做的事情：

• 软件开发：用python做软件是很多人正在从事的工作，不管是B/S软件，还是C/S软件，都能做。并且需求量还是挺大的；

• 数据挖掘：python可以制作出色的爬虫工具来进行数据挖掘，而在很多的网络公司中数据挖掘的岗位也不少；

• 游戏开发：python扩展性很好，拥有游戏开发的库，而且游戏开发绝对是暴力职业；

• 大数据分析：如今是大数据的时代，用python做大数据也是可以的，大数据分析工程师也是炙手可热的职位；

• 全栈工程师：如今程序员都在向着全栈的方向发展，而学习python更具备这方面的优势；

• 系统运维：python在很多linux中都支持，而且语法特点很向shell脚本，学完python做个系统运维也是很不错的。

互联网行业目前还是最热门的行业之一，学习IT技能之后足够优秀是有机会进入腾讯、阿里、网易等互联网大厂高薪就业的，发展前景非常好，普通人也可以学习。

想要系统学习，你可以考察对比一下开设有相关专业的热门学校，好的学校拥有根据当下企业需求自主研发课程的能力，能够在校期间取得大专或本科学历，中博软件学院、南京课工场、南京北大青鸟等开设相关专业的学校都是不错的，建议实地考察对比一下。

祝你学有所成，望采纳。

请点击输入图片描述

Python多线程总结

在实际处理数据时，因系统内存有限，我们不可能一次把所有数据都导出进行操作，所以需要批量导出依次操作。为了加快运行，我们会采用多线程的方法进行数据处理， 以下为我总结的多线程批量处理数据的模板：

主要分为三大部分：

共分4部分对多线程的内容进行总结。

先为大家介绍线程的相关概念:

在飞车程序中，如果没有多线程，我们就不能一边听歌一边玩飞车，听歌与玩 游戏 不能并行；在使用多线程后，我们就可以在玩 游戏 的同时听背景音乐。在这个例子中启动飞车程序就是一个进程，玩 游戏 和听音乐是两个线程。

Python 提供了 threading 模块来实现多线程:

因为新建线程系统需要分配资源、终止线程系统需要回收资源，所以如果可以重用线程，则可以减去新建/终止的开销以提升性能。同时，使用线程池的语法比自己新建线程执行线程更加简洁。

Python 为我们提供了 ThreadPoolExecutor 来实现线程池，此线程池默认子线程守护。它的适应场景为突发性大量请求或需要大量线程完成任务，但实际任务处理时间较短。

其中 max_workers 为线程池中的线程个数，常用的遍历方法有 map 和 submit+as_completed 。根据业务场景的不同，若我们需要输出结果按遍历顺序返回，我们就用 map 方法，若想谁先完成就返回谁，我们就用 submit+as_complete 方法。

我们把一个时间段内只允许一个线程使用的资源称为临界资源，对临界资源的访问，必须互斥的进行。互斥，也称间接制约关系。线程互斥指当一个线程访问某临界资源时，另一个想要访问该临界资源的线程必须等待。当前访问临界资源的线程访问结束，释放该资源之后，另一个线程才能去访问临界资源。锁的功能就是实现线程互斥。

我把线程互斥比作厕所包间上大号的过程，因为包间里只有一个坑，所以只允许一个人进行大号。当第一个人要上厕所时，会将门上上锁，这时如果第二个人也想大号，那就必须等第一个人上完，将锁解开后才能进行，在这期间第二个人就只能在门外等着。这个过程与代码中使用锁的原理如出一辙，这里的坑就是临界资源。 Python 的 threading 模块引入了锁。 threading 模块提供了 Lock 类，它有如下方法加锁和释放锁：

我们会发现这个程序只会打印“第一道锁”，而且程序既没有终止，也没有继续运行。这是因为 Lock 锁在同一线程内第一次加锁之后还没有释放时，就进行了第二次 acquire 请求，导致无法执行 release ，所以锁永远无法释放，这就是死锁。如果我们使用 RLock 就能正常运行，不会发生死锁的状态。

在主线程中定义 Lock 锁，然后上锁，再创建一个子 线程t 运行 main 函数释放锁，结果正常输出，说明主线程上的锁，可由子线程解锁。

如果把上面的锁改为 RLock 则报错。在实际中设计程序时，我们会将每个功能分别封装成一个函数，每个函数中都可能会有临界区域，所以就需要用到 RLock 。

一句话总结就是 Lock 不能套娃， RLock 可以套娃； Lock 可以由其他线程中的锁进行操作， RLock 只能由本线程进行操作。

【Python】基础总结

input("提示性信息")

如： input("请输入数字")

因为 Python 没有特别人为规定数据类型，数据类型是由计算机进行判定，所以我们 input() 输入的数据均默认作为字符串处理，而如果要输入一些数字，着需要 eval() 评估函数对字符串进行评估，化为语句（数字）。

print(...) 默认空一行，如果想不空行，则 print(...., end = "")

特性：

进制：

特性：

浮点数间运算存在不确定尾数，不是 bug 如：0.1+0.3 → 0.4 0.1+0.2 → 0.30000000000000004

这是由于在计算机中一切数据都是化为二进制进行存储的，而有的浮点数并不能完全化为相等的二进制数，只能无限趋近于二进制数。 如：0.1 →

解决方法：

四舍五入：

例如：z = 1.23e-4 + 5.6e+89j z.real 获得实部，z.imag 获得虚部

三种类型存在一种逐渐“扩展”或“变宽”的关系： 整数 → 浮点数 → 复数

特点：

字符串有 2 类共 4 种表示方法：

扩展：

使用获取字符串中一个或多个字符

使用根据步长对字符串切片

{《参数序号》:《格式控制标记》}

》 右对齐 ^ 居中对齐 | 槽设定的输出宽度 | 数字的千位分隔符 | 浮点数小数精度 或 字符串最大输出长度 | 整数类型 b , c , d , o , x , X 浮点数类型 e , E , f , % |

填充、对齐、宽度这三个一组，例如： "{0:=^20}".format("PYTHON") → ’=======PYTHON=======’ "{0:*》20}".format("BIT") → ’*****************BIT’ "{:10}".format("BIT") ’BIT ’

剩下的三个一组，例如： "{0:,.2f}".format(12345.6789) → ’12,345.68’ "{0:b},{0:c},{0:d},{0:o},{0:x},{0:X}x".format(425) → ’110101001,Σ,425,651,1a9,1A9’ "{0:e},{0:E},{0:f},{0:%}".format(3.14) ’3.140000e+00,3.140000E+00,3.140000,314.000000%’

↓CloseCode↓

使用 raise 语句抛出一个指定的异常。 raise

紧凑形式：适用于简单表达式的二分支结构 《表达式1》 if 《条件》 else 《表达式2》

例如：

↓CloseCode↓

↓CloseCode↓

↓CloseCode↓

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

由条件控制的循环运行方式

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

↓CloseCode↓

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

↓CloseCode↓

可选参数例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

可变参数例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

在函数定义中，经常会碰到 *args(arguments) 和作为参数 **kwargs(keyword arguments)。 （事实上在函数中，和才是必要的，args 和 kwargs 可以用其他名称代替） *args 是指不定数量的非键值对参数。 **kwargs 是指不定数量的键值对参数。

*args 作为作为元组匹配没有指定参数名的参数。而 **kwargs 作为字典，匹配指定了参数名的参数。 *args 必须位于 **kwargs 之前。

args( 通常紧跟一个标识符，你会看到a或者args都是标识符)是python用于接收或者传递任意基于位置的参数的语法。当你接收到一个用这种语法描叙参数时（比如你在函数def语句中对函数签名使用了星号语法），python会将此标识符绑定到一个元祖，该元祖包含了所有基于位置的隐士的接收到的参数。当你用这种语法传递参数时，标识符可以被绑定到任何可迭代对象（事实上，它也可以是人和表达式，并不必须是一个标识符），只要这个表达式的结果是一个可迭代的对象就行。

**kwds(标识符可以是任意的，通常k或者kwds表示)是python用于接收或者传递任意基于位置的参数的语法。（python有时候会将命名参数称为关键字参数，他们其实并不是关键字--只是用他们来给关键字命名，比如pass,for或者yield，还有很多，不幸的是，这种让人疑惑的术语目前仍是这门语言极其文化根深蒂固的一个组成部分。）当你接收到用这种语法描叙的一个参数时（比如你在函数的def语句中对函数签名使用了双星号语法）python会将标识符绑定到一个字典，该字典包含了所有接收到的隐士的命名参数。当你用这种语法传递参数时，标识符只能被绑定到字典（我ID号I它也可以是表达式，不一定是一个标识符，只要这个表达式的结果是一个字典即可）。

当你在定义或调用一个函数的时候，必须确保a和k在其他所有参数之后。如果这两者同时出现，要将k放在a之后。

lambda函数返回函数名作为结果

↓CloseCode↓

例如：

↓CloseCode↓

运行结果：

↓CloseCode↓

谨慎使用lambda函数

python中类的理解与总结

9. 类Python 的类机制通过最小的新语法和语义在语言中实现了类。它是 C++ 或者 Modula-3 语言中类机制的混合。就像模块一样，Python 的类并没有在用户和定义之间设立绝对的屏障，而是依赖于用户不去“强行闯入定义”的优雅。另一方面，类的大多数重要特性都被完整的保留下来：类继承机制允许多重继承，派生类可以覆盖（override）基类中的任何方法或类，可以使用相同的方法名称调用基类的方法。对象可以包含任意数量的私有数据。用 C++ 术语来讲，所有的类成员（包括数据成员）都是公有（ public ）的（其它情况见下文 私有变量），所有的成员函数都是虚（ virtual ）的。用 Modula-3 的术语来讲，在成员方法中没有简便的方式引用对象的成员：方法函数在定义时需要以引用的对象做为第一个参数，调用时则会隐式引用对象。像在 Smalltalk 中一个，类也是对象。这就提供了导入和重命名语义。不像 C++ 和 Modula-3 中那样，大多数带有特殊语法的内置操作符（算法运算符、下标等）都可以针对类的需要重新定义。在讨论类时，没有足够的得到共识的术语，我会偶尔从 Smalltalk 和 C++ 借用一些。我比较喜欢用 Modula-3 的用语，因为比起 C++，Python 的面向对象语法更像它，但是我想很少有读者听过这个。

个人实训工作总结怎么写

【篇一】 　　201#年#月汽车应用分院实训基地被评为吉林省职业教育示范性实习实训基地。本年度新实训大楼的完工促进汽车实训基地的科学化、智能化、现代化，目前实训基地共有八个实训室、两个训练中心和十个理实一体化教室，建筑面积3550平米，设备总值532万元，服务于汽车应用分院的汽车检测、汽服、汽电、汽整四个专业，是一个集课内实践、集中实训、岗前培训、证书考核、和教学设备研发与一体的综合型职业技能训练基地。实训教师队伍拥有教师11名，我们这支实训教师队伍的特点的是全部来自一线企业，有着丰富的企业实战经验。这是一只教学能力强、企业经验多、个人素质高的实训教师团队。在本学期圆满的完成了学期初制定的各项工作计划，为了总结本学期的工作情况和不足，更好的制定下一学期的工作计划，现将本学期实训基地的工作总结如下：

　　一、教学工作

　　1、全年共完成36个教学班、九门课程的教学工作累计授课学时9066学时，虽然工作量较大，但我们没有降低对教学效果的要求，最终学生满意率均达到90%以上，督导评分较上一年相比也有了明显提高，在高效率、高质量完成教学相关工作的同时全年没有发生过一起教学事故和安全事故。

　　2、为了更好地培养学生的职业技能和职业道德，针对高职学生的特点、培养目标及我院的办学理念，我实训基地组织多次研讨和进入企业调研活动，掌握用人单位的需求，结合我院实际情况进一步完善了实训教学大纲和实训教学计划，使我院培养的学生能够切合实际的掌握就业本领。

　　3、教学改革方面，我实训基地教师积极参与教学改革，探索新的教学方法，理实一体化教学法、情景模拟教学法等针对高职学生有效的教学方法都得到了广泛的推广和应用。并针对魏威校长提出实训课要以教师演示巡回指导为方向，让学生真真正正的动起手来学到真真正正的技术性操作流程，发动机已经初步形成了一整套教学视频文件，使教师间相互学习，相互补充，整体的教学水平和学生对知识的掌握程度都得到了很大的提高.通过实践教学，让学生在具体的技能训练中发现问题、分析问题解决问题，从而提高学生综合运用所学知识解决实际问题的能力。

　　二、招生工作

　　实训基地全年接待招生参观人数4700余人次，全员加班40余天，共70余次，无一起投诉事件，并多次得到招生办的表扬

　　1、日常招生工作。我实训基地按照汽车应用学院的统一要求，和针对招生工作的统一部署，中午休息时间期间安排两名专人值班负责招生接待工作，轮流吃饭，避免了出现参观无人接待的现象。并要求上班期间没课的实训教师要全天在岗，确保了新生参观讲解工作的顺利进行。

　　2、周六、日，五一、端午等假期招生工作。在放假期间我实训基地安排3-4名教师全天在岗负责新生参观讲解工作。

　　3、制定汽车应用学院实训基地讲解稿。为了避免值班教师对讲解的实训室不熟练、讲解的话术参差不齐等现象的发生。我实训基地根据实训基地情况、就业前景、毕业生薪资待遇、专业优势、授课情况、校园文化等诸多方面制定了新生参观讲解稿。更加出色地完成了每一次的参观接待。

　　4、地区招生工作，负责地点通化市、白山市、敦化市，累计出差21天。我个人在通化县为学院护理专业招收了王贺和李盛丽两名学生

　　火车站迎新过程中派出罗佳和黄靖宇共计10天，接待学生及家长共计2500人，接待满意率100%。

　　黄静宇老师在今年的招生期间表现尤为突出。被评为招生期间先进工作者。

　　三、制度建设方面

　　1、进一步完善实训基地各项规章制度。成立了实训基地消防安全领导小组，消防安全责任制，消防安全隐患一票否决制，用电、用油、门窗等都有专门负责检查。

　　2、制定了汽车应用学院安全检查登记表。在实训设备使用上，还制定了工具（设备）借用登记表、使用情况记录表、损坏登记表等。切实做到了责任到人。

　　四、实训基地建设方面

　　1、在本学期根据就业的实际需要、经过学院领导的大力支持和全体教师的共同努力学院建设新实训大楼汽车实训基地，并被吉林省评为吉林省职业教育示范性实习实训基地，新增模拟4S店车间，使教学内容更加具体，全面。

　　2、2016年6月汽车应用分院实习基地被评为吉林省职业教育示范性实习实训基地。全年实训基地共新建七个实训室、两个训练中心和十个理实一体化教室，新增设备总值108万元，其中汽检专业投入103万元，汽服专业投入5万元，这样的建设不仅改善了实训教学条件、提升了教学效果，为接下来示范基地的中期检查也奠定了基础。

　　3、在学校的大力支持下新采购60余万元的教学设备，包括发动机实训室、底盘实训室、电控发动机实训室、自动变速器实训室都更新了教学设备，将实训的教学内容更加应用化、实际化。

　　4、本学年每月组织一次教师对教学设备的维修和维护活动，确保了教学设备的完好。

　　五、实训基地工作表现

　　1、在这一年里所有教师都能保质保量完成自己的教学任务，在实训基地设备维护，日常管理过程中都发挥着重要的作用。

　　2、举办了“吉科工匠杯”教师技能大赛，并获得了学校高度重视，为学生打造了学习的榜样，同时也为学生创造了学习的积极性。

　　3、举办了学生组汽车应用分院第xx届汽车检测与维修技能大赛、汽车应用分院第xx届汽车汽车营销大赛，实训场地得到了充分的利用，更提高了学生们学习的积极性，主动性。通过本届比赛还为我院参加吉林省2016年高职高专汽车检测与维修和汽车营销大赛选拔了五位优秀选手。

　　六、存在的不足及解决方法

　　1、在理实一体教学方法的应用上部分教师不够灵活。多组织实践教学观摩活动，促使教师间相互学习。加快理实一体化教学模式的推广。

　　2、尽快完善实训室建设，对于新成立的实训室要迅速提高承担教学任务的能力，改善了实训教学条件、提升了教学效果，为接下来示范基地的中期检查也奠定了基础。

　　3、在实训基地的汽车营销训练中心建设方面我只考虑了控制成本满足教学的问题，没考虑到装修豪华程度对招生工作的积极影响。我们要积极形成新的建设方案，在2017年上半年尽快完成新方案建设。

　　本学年已经过去，这一年是收获的一年，也是充满挑战的一年，实训基地本着“首战用我，用我必胜”的团队凝聚力，在新的一年的以更大的信心迎接新的挑战，出色的完成各项任务。

　　Python的学习到现在已经有半个月了，通过讲解与企业化标准的培训，使我加深了对python的认识。因为之前有学Java的基础，所以这次实训入门时也相对容易许多。

　　这是我第一次接触到Python语言，但不是我学习的第一种编程语言。它的逻辑规则和C语言和JAVA存在很大的相似之处，在对数据进行处理时有种似曾相识之感。实习安排是逐渐加深的，所以跟随课程学习相对容易。

　　Python是一种面向对象、直译式计算机程序设计语言。公认的特点是简单、易学、免费、开源等等。个人觉得特别喜欢Python的地方是对字符串操作特别的灵活、采取缩进的方式简单明了、以及简单的语法。其内嵌数据库中有很多常用函数，需要使用时调用即可，这一点让我觉得相当方便，可以说少写了一半代码。其简洁方便的我方式也很对我胃口，相对比所学过的其他语言来说确实很灵活。python变量类型是根据输入值变化的，数据长度是动态的，对其进行赋值时不需要特意去定义其类型和长度。

　　Python具有丰富和强大的库。它常被昵称为胶水语言，能够把用其他语言制作的各种模块(尤其是C/C++)很轻松地联结在一起。常见的一种应用情形是，使用Python快速生成程序的原型(有时甚至是程序的最终界面)，然后对其中有特别要求的部分，用更合适的语言改写，比如3D游戏中的图形渲染模块，性能要求特别高，就可以用C/C++重写，而后封装为Python可以调用的扩展类库。需要注意的是在您使用扩展类库时可能需要考虑平台问题，某些可能不提供跨平台的实现。

python实验总结

#!/usr/bin/env python # Filename: appui.py """ .. moduleauthor:: .... .. test module of Tkinter """ from Tkinter import * import tkMessageBox root = Tk() root.geometry(’850x40+80+80’) #设置窗体高宽与窗体相对屏幕左上角位置 class...