01 2021 档案
摘要：python没有为内置的threading.Thread类提供一个kill接口，可以通过使用CPython API向线程抛出一个SystemExit异常来终止线程。如果线程没有被系统调用阻塞(sleep, recv, accept等)，线程将会强制退出。参考连接：https://github.com
阅读全文
摘要：摘要：在我们的时序异常检测应用中，设计了对时序数据进行多变量高斯（MVN）建模的算法方案进行异常检测，本文对基于tensorflow的两种MVN建模方案进行了总结。 1、基于custom cholesky分解 基于tensorflow keras对多维数据进行多变量高斯（MVN）概率建模是可行的。方
阅读全文
摘要：在我们的异常检测应用中，需要对每组IoT设备分别训练一个模型，每个模型对一组设备的指标数据进行实时异常检测。方案采用master-worker+消息队列的方式实现模型对外服务，但是每个worker的日志需要集中收集到同一个日志文件，而不是每个worker产生一个日志文件。此时我们采用基于loggin
阅读全文
摘要：在做基于ray的分布式任务处理时，偶尔遇到由于ray集群不稳定导致的长时间连接不上，进而导致程序卡死,无法向后端返回任务状态的情况。但是ray的初始化函数本身未实现超时机制，因此设计基于多线程+信号的timeout装饰器，当连接超时时，向后端返回异常状态。 这里之所以要起新线程去初始化ray，是为了
阅读全文
摘要：数据库表是一个二维表，包含多行多列。 把一个表的内容用Python的数据结构表示出来的话，可以用一个list表示多行，list的每一个元素是tuple，表示一行记录，比如，包含id和name的user表： [ ('1', 'Michael'), ('2', 'Bob'), ('3', 'Adam')
阅读全文
摘要：1、query string search GET /index/type/_search?q=name:zhangsan&sort=age:desc 2、query DSL(Domain Sepcified Language) 1）查询所有结果 GET /index/type/_search {
阅读全文
摘要：1、使用装饰器 def singleton(cls): _instance = {} def _singleton(*args, **kwargs): if cls not in _instance: _instance[cls] = cls(*args, **kwargs) return _ins
阅读全文
摘要：转自：https://zhuanlan.zhihu.com/p/79934510 风控业务背景 在风控中，我们常用KS指标来评估模型的区分度（discrimination）。这也是风控模型同学最为追求的指标之一。那么，有多少人真正理解KS背后的内涵？本文将从区分度的概念、KS的计算方法、业务指导意义
阅读全文
摘要：转自：https://zhuanlan.zhihu.com/p/79682292 风控业务背景 在风控中，稳定性压倒一切。原因在于，一套风控模型正式上线运行后往往需要很久（通常一年以上）才会被替换下线。如果模型不稳定，意味着模型不可控，对于业务本身而言就是一种不确定性风险，直接影响决策的合理性。这是
阅读全文
摘要：转自：https://zhuanlan.zhihu.com/p/78809853 1、IV值的用途 IV，即信息价值（Information Value），也称信息量。 目前还只是在对LR建模时用到过这两个关键指标，当我们使用决策树时可以通过限制树的深度间接筛选掉一些对于当前任务贡献比较小的变量，
阅读全文
摘要：转自：https://www.cnblogs.com/fariver/p/6573112.html 动态链接库在Windows中为.dll文件，在linux中为.so文件。以linux平台为例说明python调用.so文件的使用方法。 本例中默认读者已经掌握动态链接库的生成方法，如果不太清楚的可以参
阅读全文
摘要：摘要：本文是我在从事AIOps研发工作中做的基于MCTS的多维可加性指标的异常根因定位方案，方案基于清华大学AIOPs实验室提出的Hotspot算法，在此基础上做了适当的修改。 1 概述 1.1 研究对象 拥有多维度属性（如省份、运营商、数据中心）的可加性KPI，如页面访问量。 1.2 要解决的问题
阅读全文
摘要：表达式全集 字符描述 \ 将下一个字符标记为一个特殊字符、或一个原义字符、或一个向后引用、或一个八进制转义符。例如，“n”匹配字符“n”。“\n”匹配一个换行符。串行“\\”匹配“\”而“\(”则匹配“(”。 ^ 匹配输入字符串的开始位置。如果设置了RegExp对象的Multiline属性，^也匹配
阅读全文