cknds

2020年8月14日

摘要： xx: 公有变量 _x: 单前置下划线,私有化属性或方法，from somemodule import 禁止导入,类对象和子类可以访问【另解：前置单下划线，又称口头私有变量，私有化属性或方法的一种，一般来讲，变量名_xx被看作是“私有的”，在模块或类外不可以使用。当变量是私有的时候，用_xx 来表阅读全文

posted @ 2020-08-14 15:22 cknds 阅读(4067) 评论(0) 推荐(0) 编辑

Python中函数和方法的区别

摘要：简单总结：与类和实例无绑定关系的function都属于函数（function）；与类和实例有绑定关系的function都属于方法（method）。首先摒弃错误认知:并不是类中的调用都叫方法函数（FunctionType）函数是封装了一些独立的功能，可以直接调用，能将一些数据（参数）传递进去阅读全文

posted @ 2020-08-14 14:33 cknds 阅读(1525) 评论(0) 推荐(0) 编辑

2020年8月13日

Gensim的model使用word2vec 示例

摘要： # coding=utf-8 """ @ File: word2vec_gensim.py @Software: PyCharm @desc: """ from gensim.models import word2vec import logging logging.basicConfig(form 阅读全文

posted @ 2020-08-13 13:38 cknds 阅读(2509) 评论(0) 推荐(0) 编辑

2020年8月7日

Keras文本预处理详解

摘要：汇总 Tokenizer分词器（类） Tokenizer.fit_on_texts分词器方法：实现分词 Tokenizer.texts_to_sequences分词器方法：输出向量序列 pad_sequences进行padding 具体示例和代码分析分词器分词和向量化主要的类是Tokenizer 阅读全文

posted @ 2020-08-07 17:17 cknds 阅读(711) 评论(0) 推荐(0) 编辑

2020年8月5日

python中的apply(),applymap(),map() 的用法和区别

摘要：在Python中如果想要对数据使用函数，可以借助apply(),applymap(),map() 来应用函数，括号里面可以是直接函数式，或者自定义函数（def）或者匿名函数（lambad） import pandas as pd import numpy as np from pandas impo 阅读全文

posted @ 2020-08-05 10:05 cknds 阅读(1930) 评论(0) 推荐(0) 编辑

python中 apply（）函数的用法

摘要：函数格式为：apply(func,*args,**kwargs) 用途：当一个函数的参数存在于一个元组或者一个字典中时，用来间接的调用这个函数，并肩元组或者字典中的参数按照顺序传递给参数解析：args是一个包含按照函数所需参数传递的位置参数的一个元组，是不是很拗口，意思就是，假如A函数的函数位置为阅读全文

posted @ 2020-08-05 10:02 cknds 阅读(5502) 评论(0) 推荐(0) 编辑

2020年7月30日

Fastjson @JsonField注解使用

摘要：【引言】在开发中，不论是前后端联调，还是与第三方对接，有时候难免会遇到对方定义的json数据中的key值与自己后端定义的实体字段不一致的情况，也有时候会遇到前端传的日期数据需要进行格式转换的问题。本篇博客接下来要总结的这个注解，可以很方便的处理我们的问题，下面就一起看看如何使用。【实例】一. 阅读全文

posted @ 2020-07-30 12:04 cknds 阅读(1973) 评论(1) 推荐(0) 编辑

kafka发送消息的三种方式

摘要： package com.zl.kafkademo; import org.apache.kafka.clients.producer.Callback; import org.apache.kafka.clients.producer.KafkaProducer; import org.apache 阅读全文

posted @ 2020-07-30 11:45 cknds 阅读(5647) 评论(0) 推荐(0) 编辑

Flink使用SideOutPut替换Split实现分流

摘要：以前的数据分析项目(版本1.4.2)，对从Kafka读取的原始数据流，调用split接口实现分流.新项目决定使用Flink 1.7.2，使用split接口进行分流的时候，发现接口被标记为depracted(后续可能会被移除).搜索相关文档，发现新版本Flink中推荐使用带外数据进行分流. 预先建立O 阅读全文

posted @ 2020-07-30 10:07 cknds 阅读(414) 评论(0) 推荐(0) 编辑

2020年7月26日

kettle连接CDH的hive存取数据

摘要：一开始下载了最新版的kettle8.2，经过各种百度，下载hive配置和jar包，但是总是连接不上hive，报各种错误，不一一举例了。折腾很久才发现，原来是版本不匹配因为kettle连接hadoop集群，分为连接CDH还是apache hadoop，从目录\data-integration\pl 阅读全文

posted @ 2020-07-26 02:46 cknds 阅读(2010) 评论(1) 推荐(0) 编辑

公告