摘要:from sqlalchemy.ext.declarative import declarative_base Base = declarative_base() class User(Base): """ Eventually should be used for security purposes """ __tablename__ = "user" id = Column(Integer,
阅读全文
摘要:t={ "age": [18, 30, np.nan, 40, np.nan, 30], "city": ["BeiJing", "ShangHai", "GuangZhou", "ShenZhen", 'BeiJing', "ShangHai"], "sex": [None, "male", "f
阅读全文
摘要:pd.read_csv("../data/user_info.csv", index_col="name") #假设csv里包含这几列: name, age, birth, sex data="name,age,birth,sex\nTom,18.0,2000-02-10,\nBob,30.0,1988-10-17,male" print(data) pd.read_csv(StringIO(da
阅读全文
摘要:1. 概述 本文以淘宝作为例子,介绍从一百个到千万级并发情况下服务端的架构的演进过程,同时列举出每个演进阶段会遇到的相关技术,让大家对架构的演进有一个整体的认知,文章最后汇总了一些架构设计的原则。 2. 基本概念 在介绍架构之前,为了避免部分读者对架构设计中的一些概念不了解,下面对几个最基础的概念进
阅读全文
摘要:类备注创建方法 Timestamp 时刻数据 to_datetime,Timestamp DatetimeIndex Timestamp的索引 to_datetime,date_range,DatetimeIndex Period 时期数据 Period PeriodIndex Period period_range,PeriodIndex print(pd.Time...
阅读全文
摘要:将 dataframe 列中的 json 拆分为多个列 import json df = DataFrame([{'S_DATA':'{"age":11,"score":12}'}]) df['S_DATA'] = df['S_DATA'].apply(lambda x: json.loads(x)
阅读全文
摘要:WinMerge是一款运行于Windows系统下的文件比较和合并工具 Diffuse在命令行中的速度是相当快的,支持两相比较和三相比较 Beyond Compare AptDiff是一个文件比较工具,可以对文本和二进制文件进行比较和合并,适用于软件开发、网络设计和其它的专业领域。 Code Comp
阅读全文
摘要:原文链接:https://pythonspeed.com/articles/data-doesnt-fit-in-memory 压缩:能用1个位的,就不要用一个字节分块:将一个文件分块读入内存,分块处理。如文件中记录了各种动物的信息,现在要查找熊猫的信息,则要逐块读入文件内容,判断熊猫的信息是否在此
阅读全文