摘要: Megengine量化 量化指的是将浮点数模型(一般是32位浮点数)的权重或激活值用位数更少的数值类型(比如8位整数、16位浮点数)来近似表示的过程。 量化后的模型会占用更小的存储空间,还能够利用许多硬件平台上的专属算子进行提速。比如在 MegEngine 中使用8位整数来进行量化,相比默认的32位 阅读全文
posted @ 2021-02-10 11:01 吴建明wujianming 阅读(463) 评论(0) 推荐(0) 编辑
摘要: 腾讯 angel 3.0:高效处理模型 紧跟华为宣布新的 AI 框架开源的消息,腾讯又带来了全新的全栈机器学习平台 angel3.0。新版本功能特性覆盖了机器学习的各个阶段,包括:特征工程、模型训练、超参数调节和模型服务。自 2017 年 angel1.0 在 Github 上开源以来,angel 阅读全文
posted @ 2021-02-10 10:20 吴建明wujianming 阅读(294) 评论(0) 推荐(0) 编辑
摘要: 深度树匹配模型(TDM) 算法介绍 Tree-based Deep Match(TDM)是由阿里妈妈精准定向广告算法团队自主研发,基于深度学习上的大规模(千万级+)推荐系统算法框架。在大规模推荐系统的实践中,基于商品的协同过滤算法(Item-CF)是应用较为广泛的,而受到图像检索的启发,基于内积模型 阅读全文
posted @ 2021-02-10 09:52 吴建明wujianming 阅读(1496) 评论(0) 推荐(0) 编辑
摘要: X-Deep Learning功能模块 特征体系 样本 特征 网络 数据准备 样本格式 使用DataReader读取数据 自定义python reader 定义模型 稀疏部分 稠密部分 优化器 训练模型 单机训练 分布式训练 同步及半同步训练 ID准入和ID退出 保存及恢复模型变量 模型评估 模型评 阅读全文
posted @ 2021-02-10 08:06 吴建明wujianming 阅读(363) 评论(0) 推荐(0) 编辑
摘要: XLearning - 深度学习调度平台 软件简介 XLearning **** 是奇虎 360 开源的一款支持多种机器学习、深度学习框架调度系统。基于 Hadoop Yarn 完成了对TensorFlow、MXNet、Caffe、Theano、PyTorch、Keras、XGBoost 等常用框架 阅读全文
posted @ 2021-02-10 07:23 吴建明wujianming 阅读(195) 评论(0) 推荐(0) 编辑
摘要: Jittor实现Conditional GAN Generative Adversarial Nets(GAN)提出了一种新的方法来训练生成模型。然而,GAN对于要生成的图片缺少控制。Conditional GAN(CGAN)通过添加显式的条件或标签,来控制生成的图像。本文讲解了CGAN的网络结构、 阅读全文
posted @ 2021-02-10 07:12 吴建明wujianming 阅读(340) 评论(0) 推荐(0) 编辑
摘要: 计图(Jittor) 1.1版本:新增骨干网络、JIT功能升级、支持多卡训练 深度学习框架—计图(Jittor),Jittor的新版本V1.1上线了。主要变化包括: 增加了大量骨干网络的支持,增强了辅助转换脚本的能力,降低用户开发和移植模型的难度。 JIT(动态编译)功能升级,可支持高性能的自定义算 阅读全文
posted @ 2021-02-10 06:56 吴建明wujianming 阅读(406) 评论(0) 推荐(0) 编辑
摘要: 计图点云库 已经实现的模型 Model Classification Segmentation PointNet √ √ PointNet ++ √ √ PointCNN √ √ DGCNN √ √ PointConv √ √ 使用方法 安装依赖 sudo apt install python3.7 阅读全文
posted @ 2021-02-10 06:30 吴建明wujianming 阅读(290) 评论(0) 推荐(0) 编辑
摘要: 计图MPI分布式多卡 计图分布式基于MPI(Message Passing Interface),主要阐述使用计图MPI,进行多卡和分布式训练。目前计图分布式处于测试阶段。 计图MPI安装 计图依赖OpenMPI,用户可以使用如下命令安装OpenMPI: sudo apt install openm 阅读全文
posted @ 2021-02-10 06:22 吴建明wujianming 阅读(226) 评论(0) 推荐(0) 编辑
摘要: 自定义算子高性能开发 在计图中,一共有三种方法来开发自定义的算子: 使用元算子进行组合。 使用Code算子开发自定义算子。 使用计图编译器编译自定义的模块和custom op。 其中,元算子开发是最为简单的, 但不免有些情况存在元算子表达能力不足。可以使用Code算子进行开发,Code算子在保持了开 阅读全文
posted @ 2021-02-10 06:11 吴建明wujianming 阅读(429) 评论(0) 推荐(0) 编辑