个人博客转至：tybai.com

无聊就想打码，打码使我快乐

11 2018 档案

pandas和spark的dataframe互转

摘要：pandas的dataframe转spark的dataframe spark的dataframe转pandas的dataframe 由于的方式是单机版的，即的方式是单机版的，所以参考 "breeze_lsw" 改成分布式版本：阅读全文

posted @ 2018-11-21 16:50 TTyb 阅读(18557) 评论(0) 推荐(2) 编辑

代码转换为html显示

摘要：需要将代码转换为使其显示好看一些，可以在这里进行装换： "https://tohtml.com/" "http://hilite.me/" 阅读全文

posted @ 2018-11-06 10:21 TTyb 阅读(646) 评论(0) 推荐(0) 编辑

subprocess实时获取结果和捕获错误

摘要：需要调用命令行来执行某些命令，主要是用实时获取结果和捕获错误，发现subprocess的很多坑。普通获取结果方式，其需要命令完全执行才能返回结果：客实时获取结果：想要获取报错机制，使用 "check_output" 捕捉报错和使用 "check_call" 捕捉报错，及时在 "Popen" 阅读全文

posted @ 2018-11-01 15:50 TTyb 阅读(4462) 评论(0) 推荐(0) 编辑