摘要：
今天心神俱疲，准备爬取淘宝数据，淘宝的反爬机制太严格了，用的python➕selenium➕chrome去爬的数据，一天就是在坑里挣扎， 1.谷歌浏览器驱动界面必须是有谷歌浏览器的哈，然后对应自己浏览器的版本去下载chromedriver.exe文件，下载地址可看下篇博客 2.可能因为版本问题或者网 阅读全文
摘要：
现在总觉得注意力不够集中，做着一半这个事情，又跑去看其他的，今天没有完成预设的进度 知乎文章的爬取还有些问题，能力也太差了，一个问题改了好久，明天再卡，文章管理完成一半就卡壳了，要做软文推荐的话，正在考虑如何将文章内容的语境都合理的分析出来 先开始做些细节的东西吧！ 阅读全文
摘要：
今天在考虑项目发布，回忆之前大创项目腾讯云发布项目时的问题，当时也没细致总结，走了很多弯路，现在将能回忆起来的总结下，后续在补充 1.首先购买腾讯云服务器，这不用多说，我的云服务器配置是 2.如果发布项目则需要提前进行网站备案，网站备案过程比较繁琐，耗时也长，最好提前申请，还要经过审核等一系列程序， 阅读全文
摘要：
2月1号了，距离考研成绩公布没有多少天了，年也过完了，该开始努力了， 今天还是松懈的一天，上午起床之后看了重新理了一遍毕设的进度， 下午完成了之前在学校检查毕设的未完成的简单部分，管理员功能 每天给自己订一个计划 早上8点起床，起来跑步一小时or半小时 吃早饭，学习计算机网络第五版两个小时，学习实用 阅读全文
摘要：
使用Xpath获取属性时，出现乱码问题，解决办法找了好多，终于解决，特将办法贴在这，供大家尝试 不要直接简单的将爬取的网页设置为utf-8, 先通过print(r.encoding)输出看看爬取的是什么编码，每个网页采用的编码不同， 后通过标红线的代码可解决问题 selector_new = etr 阅读全文
摘要：
分布式事务，由于我们将单表的数据切片后将存储在多个数据库甚至多个数据库实例中，所以依靠数据库本身的事务机制不能满足所有场景的需要，但是我们推荐在一个数据库实例中的操作尽可能使用本地事务来保证一致性，跨数据库实例的一系列更新操作需要根据事务路由在不同的数据源中完成，各个数据源之间的更新操作需要通过分布 阅读全文
摘要：
作为一个大学生，相对来说各项经验都要少很多，阅读这篇文章学到很多。 技术规划做得好，能起到比较好的正向引导作用，个人及团队的整体目标感会好很多。分为三个部分的内容： 关于技术规划三板斧，第一部分是全局分析，这需要溯源历史，思考未来，要对未来有一定的预判。能够基于数据，基于专业，基于客户价值，同时结合 阅读全文
摘要：
书到用时方恨少，这句话在软件杯真的深深体会到了。但是对自己对于代码的领会能力还是有自信的，在做项目的时候用到了多线程的处理，开始都不知道该怎么去百度搜索关键词 阅读全文
摘要：
大三下，对于我考研的人来说，时间不要太紧张，参加软件杯也是系主任要求，题目是公共地点人流量的检测，个人还是个菜鸟，但是把遇到的一些大家可能不小心会出现的问题贴出来，困扰我很久，还没睡好觉！！！ Question1: python-flask操作数据库语句，我把数据库的操作函数都封装在一个。py文件了 阅读全文
摘要：
高并发经常会发生在有大活跃用户量，用户高聚集的业务场景中，如：秒杀活动，定时领取红包等。为了让业务可以流畅的运行并且给用户一个好的交互体验，我们需要根据业务场景预估达到的并发量等因素，来设计适合自己业务场景的高并发处理方案。 业务从发展的初期到逐渐成熟，服务器架构也是从相对单一到集群，再到分布式服务 阅读全文