摘要: torch.utils.data.DataLoader是Pytorch中数据读取的一个重要接口,其在dataloader.py中定义,基本上只要是用oytorch来训练模型基本都会用到该接口,该接口主要用来将自定义的数据读取接口的输出或者PyTorch已有的数据读取接口的输入按照batch size 阅读全文
posted @ 2020-11-16 11:25 我为编程上架构 阅读(4017) 评论(0) 推荐(0) 编辑
摘要: 1.加载数据集:torchvision.dataset.CIFAR10 transform设置:transforms.Compose([transforms.ToTensor(), transforms.Normalize((0.5, 0.5, 0.5),(0.5, 0.5, 0.5))])将图像作 阅读全文
posted @ 2020-09-28 15:13 我为编程上架构 阅读(325) 评论(0) 推荐(0) 编辑
摘要: 一、监督学习 从给定的训练数据集中学习出一个函数(模型参数),当新的数据到来时,可以根据这个函数预测结果。监督学习的训练集要求包括输入输出,也可以说是特征和目标。训练集中的目标是由人标注的。监督学习就是最常见的分类(注意和聚类区分)问题,通过已有的训练样本(即已知数据及其对应的输出)去训练得到一个最 阅读全文
posted @ 2020-09-27 22:29 我为编程上架构 阅读(90) 评论(0) 推荐(0) 编辑
摘要: 1)处理超大文件 这里的超大文件通常是指百MB、设置数百TB大小的文件。目前在实际应用中,HDFS已经能用来存储管理PB级的数据了。 2)流式的访问数据 HDFS的设计建立在更多地响应"一次写入、多次读写"任务的基础上。这意味着一个数据集一旦由数据源生成,就会被复制分发到不同的存储节点中,然后响应各 阅读全文
posted @ 2020-05-06 12:18 我为编程上架构 阅读(737) 评论(0) 推荐(0) 编辑
摘要: 计算机网络中常见的各层协议 应用层: (典型设备:应用程序,如FTP,SMTP ,HTTP) DHCP >动态主机分配协议,使用 UDP 协议工作,主要有两个用途:给网络自动分配 IP 地址。 HTTP > 超文本传输协议 <端口号 80>, 万维网服务器传输超文本到本地浏览器的传送协议。 SMTP 阅读全文
posted @ 2020-05-03 15:13 我为编程上架构 阅读(181) 评论(0) 推荐(0) 编辑
摘要: 1.结合Internet,说说有连接服务和无连接的服务? 面向连接服务具有连接建立、数据传输和连接释放这三个阶段。面向连接服务是在数据交换之前,必须先建立连接。当数据交换结束后,则必须终止这个连接。在传送数据时是按序传送的,是可靠交付。面向连接服务比较适合于在一定期间内要向同一目的地发送许多报文的情 阅读全文
posted @ 2020-04-25 22:42 我为编程上架构 阅读(356) 评论(0) 推荐(0) 编辑
摘要: 题目描述 给定n*n由0和1组成的矩阵,如果矩阵的每一行和每一列的1的数量都是偶数,则认为符合条件。 你的任务就是检测矩阵是否符合条件,或者在仅改变一个矩阵元素的情况下能否符合条件。 "改变矩阵元素"的操作定义为0变成1或者1变成0。 输入 输入n + 1行,第1行为矩阵的大小n(0 < n < 1 阅读全文
posted @ 2020-04-22 23:15 我为编程上架构 阅读(483) 评论(0) 推荐(0) 编辑
摘要: 题目描述 打印一个n*n的数字方阵,例如n=4时:(n<=100)1 3 4 102 5 9 116 8 12 157 13 14 16 输入 输入n。 输出 输出n*n的方阵。 样例输入 4样例输出 1 3 4 102 5 9 116 8 12 157 13 14 16 #include <ios 阅读全文
posted @ 2020-04-22 22:56 我为编程上架构 阅读(807) 评论(0) 推荐(0) 编辑
摘要: 题目描述平面上有一个大矩形,其左下角坐标(0,0),右上角坐标(R,R)。大矩形内部包含一些小矩形,小矩形都平行于坐标轴且互不重叠。所有矩形的顶点都是整点。要求画一根平行于y轴的直线x=k(k是整数) ,使得这些小矩形落在直线左边的面积必须大于等于落在右边的面积,且两边面积之差最小。并且,要使得大矩 阅读全文
posted @ 2020-04-22 22:44 我为编程上架构 阅读(973) 评论(0) 推荐(0) 编辑
摘要: 需求:在一堆给定的文本文件中统计输出每一个单词出现的总次数 数据准备:data.txt hello world dog fish hadoop spark hello world dog fish hadoop spark hello world dog fish hadoop spark 分析按照 阅读全文
posted @ 2020-04-16 20:31 我为编程上架构 阅读(204) 评论(0) 推荐(0) 编辑