摘要: Mac上python多线程错误:...+[__NSPlaceholderDate initialize]... 错误提示并且报pycharm异常退出 objc[27880]: +[__NSPlaceholderDate initialize] may have been in progress in another thread when fork() was called. objc[27880]: +[_ 阅读全文
posted @ 2020-11-25 17:55 Mr·Li程序员 阅读(1404) 评论(0) 推荐(0) 编辑
摘要: mac上virtualenvwrapper和virtualenv的使用 1.virtualenv安装和使用 1)介绍 在python开发中,我们可能会遇到一种情况,就是当前的项目依赖的是某一个版本,但是另一个项目依赖的是另一个版本,这样就会造成依赖冲突,而virtualenv就是解决这种情况的,virtualenv通过创建一个虚拟化的python运行环境,将我们所需的依 阅读全文
posted @ 2020-11-25 17:26 Mr·Li程序员 阅读(459) 评论(0) 推荐(0) 编辑
摘要: 解决org.apache.ibatis.binding.BindingException: Invalid bound statement (not found)问题 org.apache.ibatis.binding.BindingException: Invalid bound statement (not found)问题,即在mybatis中dao接口与mapper配置文件在做映射绑定的时候出现问题,简单说,就是接口与xml要么是找不到,要么是找到了却匹配 阅读全文
posted @ 2020-04-07 09:39 Mr·Li程序员 阅读(95538) 评论(7) 推荐(13) 编辑
摘要: 开发性能调优之数据倾斜调优 一、数据倾斜原因 常见表现:在hive中 map阶段早就跑完了,reduce阶段一直卡在99%。很大情况是发生了数据倾斜,整个任务在等某个节点跑完。 在spark中大部分的task执行的特别快,剩下的一些task执行的特别慢,要几分钟或几十分钟才执行完一个task Hive中大表join的时候,容易 阅读全文
posted @ 2020-03-22 20:32 Mr·Li程序员 阅读(384) 评论(0) 推荐(0) 编辑
摘要: 随机森林和AdaBoost的区别 一、随机森林 1.概念:随机森林利用随机的方式将许多决策树组合成一个森林,每个决策树在分类的时候决定测试样本的最终类别 是在Bagging策略的基础上进行修改后的一种算法(Bagging核心思想:采用有放回的采样规则,从m个样本点中抽取n个数据构建一个新的训练数据集,用这个数据集来训练模型,重复上述 阅读全文
posted @ 2020-03-15 17:58 Mr·Li程序员 阅读(506) 评论(0) 推荐(0) 编辑
摘要: spark性能优化 一、WHY? spark 应用程序虽然已经有代码生成器,执行优化器等内置工具,能让你的代码在执行时更快,但是它只是一个工具、框架,在这里需要你了解spark工作的原理,知道如何调节spark的内部参数,以达到性能最优。 在做 spark 应用程序的优化的时候,从下面几个点出发就够了: 为什么:因为你 阅读全文
posted @ 2020-03-04 19:16 Mr·Li程序员 阅读(426) 评论(0) 推荐(0) 编辑
摘要: 排序原理和实现 排序是每个软件工程师和开发人员都需要掌握的技能。不仅需要通过编程面试,还要对程序本身有一个全面的理解。不同的排序算法很好地展示了算法设计上如何强烈的影响程序的复杂度、运行速度和效率。 排序有很多种实现方法,比如冒泡排序、选择排序、归并排序、希尔排序、快速排序、插入排序、堆排序、基数排序等,今天就给大 阅读全文
posted @ 2020-02-28 15:59 Mr·Li程序员 阅读(444) 评论(0) 推荐(0) 编辑
摘要: 常见python面试题 1,简述列举了解的编程语言及语言间的区别? Python 解释型语言,代码简洁,易懂 C语言 编译型语言,底层语言 c++ 编译型语言,在C语言基础上加了面向对象 Java 混合型语言,可拓展性高 Golang 编译型语言,强类型,代码规范,高并发 语言特点: 灵活简洁,语言优美 可读性强, 语言类 阅读全文
posted @ 2020-02-26 18:01 Mr·Li程序员 阅读(413) 评论(0) 推荐(0) 编辑
摘要: 博客园的日常 加入博客园的第一天,希望自己能坚持下去,并且希望不断提升自己的实力,加油 阅读全文
posted @ 2020-02-26 14:08 Mr·Li程序员 阅读(118) 评论(0) 推荐(0) 编辑