摘要:
使用kettle进行数据清洗: 1.新建转换去除手机销售信息表的重复记录 要求:去除该字段中的所有空格,方便后续聚合统计,字母统一大小写,去除该字段中的所有特殊字符(各种标点符号) 这里可选用排序加去重组件,也可用哈希去重。然后用字符串操作去括号,大小写统一。字符串替换的正则表达式去除特殊字符。 2 阅读全文
摘要:
1.为了加强安全性,MySQL5.7为root用户随机生成了一个密码,在error log中,关于error log的位置,如果安装的是RPM包,则默认是/var/log/mysqld.log。 可通过# grep "password" /var/log/mysqld.log 命令获取MySQL的临 阅读全文
摘要:
防止重装 yum方式 查看yum是否安装过mysql yum list installed mysql* 如或显示了列表,说明系统中有MySQL yum卸载 根据列表上的名字 yum remove mysql-community-client mysql-community-common mysql 阅读全文
摘要:
1.下载mysql源安装包 $ wget http://dev.mysql.com/get/mysql57-community-release-el7-8.noarch.rpm 2.安装mysql源 $ yum localinstall mysql57-community-release-el7-8 阅读全文
摘要:
上图为offer待遇对比,坐标上海,毕业将近3年90年的,java研发 ,目前主要做分布式、微服务等。说白了就是spring cloud组件的简单应用 to B 的商业模式。 目前薪资14.5*15.5 年薪最高22W。今年面试状况:猎头推荐(四次,通过猎头成功了3次),HR找我面试(13次,如果单 阅读全文
摘要:
支付宝架构师眼中的高并发架构——3 面向服务 n SOA面向服务架构设计 n 微服务更细粒度服务化,一系列的独立的服务共同组成系统 使用服务化思维,将核心业务或者通用的业务功能抽离成服务独立部署,对外提供接口的方式提供功能。 最理想化的设计是可以把一个复杂的系统抽离成多个服务,共同组成系统的业务,优 阅读全文
摘要:
集群 对于用户访问集中的业务独立部署服务器,应用服务器,数据库,nosql数据库。 核心业务基本上需要搭建集群,即多台服务器部署相同的应用构成一个集群,通过负载均衡设备共同对外提供服务, 服务器集群能够为相同的服务提供更多的并发支持,因此当有更多的用户访问时,只需要向集群中加入新的机器即可, 另外可 阅读全文
摘要:
支付宝架构师眼中的高并发架构——1 链接: 前言 高并发经常会发生在有大活跃用户量,用户高聚集的业务场景中,如:秒杀活动,定时领取红包等。 为了让业务可以流畅的运行并且给用户一个好的交互体验,我们需要根据业务场景预估达到的并发量等因素,来设计适合自己业务场景的高并发处理方案。 在电商相关产品开发的这 阅读全文
摘要:
程序员的美好生活 程序员的美好生活 篮球打得好,可以在赛场上证明自己给妹子看;吉他弹得好,可以给妹子弹唱情歌;中文系的一封信、油画系的一幅肖像都是大杀器。 程序员呢?难道要把代码截图发给妹子看吗? 那会怎样啊? 于是我们举办了“程序员代码情书大赛”的活动。没错!让猿猿们用代码写情书,如果妹子们看不懂 阅读全文
摘要:
1 业务架构 风控平台是相对独立的系统,信审的案件可以从借款端平台推过来,也可以从第三方平台推过来。信审案件到达风控平台后,自动创建工作流,根据风控流程处理各流程环节任务。 •自动决策 风控流程自动处理案件,访问第三方合作伙伴的接口,获取用户黑名单、欺诈数据和多头借贷等数据,查询名单数据,决策引擎输 阅读全文