摘要:
今天在使用spring boot的时候,导包出现了问题,通过maven导入依赖,却显示找不到依赖,换了几个版本还是不行,在多次尝试之后,发现是依赖下载的内容不完整,只有一部分数据。接下来尝试直接下载包导入进去。 阅读全文
摘要:
昨天开始学习了爬虫的一些方法,有urliib,request和Scrapy,在爬取定位时用正则和xpath,综合比较,决定采用request和xpath的方法再次爬取图片和评论等相关的信息,也学习了代理池,在爬取时也用了代理池,防止被封ip。爬取的数据也会有些不规范,有多余空格等内容,对数据进行了初 阅读全文
摘要:
今天进行爬取数据的时候出现了问题,我用的是selenium➕Python的方法,在爬取一些图片链接时,存放在src标签中的链接,爬取时只出现了前三个数据,其他的都是None,尝试了很多方法没有解决,现在只能换一种爬取的方法。学习了其他爬取的方法,明天开始尝试。 阅读全文
摘要:
为了满足之后的把程序放到云平台的需求,今天就进行了云平台准备的相关工作,购买了阿里云的一个服务器,学习了关于服务器部署的 相关知识,进行了一些基本的设置,开放一些端口可以在外部连接上,也下载了一些基本的软件。确保满足之后的需求。 阅读全文
摘要:
今天开始了python代码的实现,基于物品的协同过滤算法需要用户和商品的联系,所以还需要爬取用户的评论数据,计算商品之间的相似度,然后推荐给其他用户,所以今天进行用户评论数据的处理。 阅读全文
摘要:
今天进行了相似推荐算法的学习。 今天比较了几个协同过滤算法,其中基于用户的算法会存在数据稀疏性:一个大型的电子商务推荐系统一般有非常多的物品,用户可能买的其中不到1%的物品,不同用户之间买的物品重叠性较低,导致算法无法找到一个用户的邻居,即偏好相似的用户和算法扩展性方面的问题,而基于物品的协同过滤算 阅读全文
摘要:
支付宝所使用的架构分为两类三层,分别是运维平台(IAAS),技术平台(PAAS),业务平台(SAAS)。这三个平台,分别从底层,中间层和应用层提供服务。 因为双十一当天的用户数量,访问量,以及所有的数据都会是平时的几倍,所以对系统的要求也相对提高了,还要提供一套完整的备灾方案和故障恢复体系。保障系统 阅读全文
摘要:
JavaEE先涉及的就是三大框架,下面先说一下ssh. Spring:功能强大的组件粘合济,能够将你的所有的java功能模块用配置文件的方式组合起来(还让你感觉不到spring的存在)成为一个完成的应用 Struts:功能强大的MVC架构 Hibernate:强大的ORM工具,然后很方便将数据库记录 阅读全文
摘要:
Spring Cloud是一系列框架的有序集合。它利用Spring Boot的开发便利性巧妙地简化了分布式系统基础设施的开发,如服务发现注册、配置中心、消息总线、负载均衡、断路器、数据监控等,都可以用Spring Boot的开发风格做到一键启动和部署。Spring并没有重复制造轮子,它只是将目前各家 阅读全文