上一页 1 ··· 5 6 7 8 9 10 11 12 13 下一页
摘要: 1. 合并两个有序数组到其中一个数组中 将一个数据插入另外一个数据尾部,然后排序 sort(a.begin(), a.end())。 双指针法把两个数组中的数据存入一个临时数组中,然后将临时数组中的值赋值给指定数组。 2. 寻找链表中间节点 快慢指针都指向head节点,慢指针前进一个,快指针前进两个 阅读全文
posted @ 2022-01-09 21:58 dsfsadfdgd 阅读(31) 评论(0) 推荐(0) 编辑
摘要: 1. :单线程vs多线程 线程共享:堆,文件描述符,信号处理函数,全局变量。 线程独占:栈空间,寄存器。 2. 线程的几种退出方式 1. 子线程使用return退出,主线程中使用pthread_join回收线程。如果是detach线程由系统自动回收。join线程有主线程进行回收。 2.子线程使用pt 阅读全文
posted @ 2021-12-20 21:31 dsfsadfdgd 阅读(83) 评论(0) 推荐(0) 编辑
摘要: Etcd: kv存储数据库,用于共享配置和服务发现。支持内存和持久化存储,存储方式类似于目录结构,数据存储于叶子节点, raft算法:保证了多个节点的数据强一致性。 leader:处理客户端的所有交互和日志复制,只有一个leader。 follower:重定向请求到leader,响应leader的日 阅读全文
posted @ 2021-12-18 18:50 dsfsadfdgd 阅读(49) 评论(0) 推荐(0) 编辑
摘要: 定时任务加锁 */30 * * * * cd /home/homework/script && flock -xn dataSync.lock /home/homework/php/bin/php dataSync.php >> dataSync.log 2>&1 crontab命令说明cronta 阅读全文
posted @ 2021-12-17 17:10 dsfsadfdgd 阅读(84) 评论(0) 推荐(0) 编辑
摘要: 参数: -jobconf mapred.map.tasks.speculative.execution="false" 关闭推测执行:对慢任务启动多个相同的实例。 -jobconf mapred.output.compression.codec=org.apache.hadoop.io.compre 阅读全文
posted @ 2021-12-17 17:08 dsfsadfdgd 阅读(693) 评论(0) 推荐(0) 编辑
摘要: 3. 添加新datanode后,作为Hadoop管理员需要做什么? 需要启动平衡器才能在所有节点之间重新平均分配数据,以便Hadoop集群自动查找新的datanode。 要优化集群性能,应该重新启动平衡器以在数据节点之间重新分配数据。 4. 如何在生产环境中部署Hadoop的不同组件? 需要在主节点 阅读全文
posted @ 2021-12-17 17:07 dsfsadfdgd 阅读(133) 评论(0) 推荐(0) 编辑
摘要: #rsync安装 rm -fr /var/lib/rpm/__db.* yum -y install rsync 阅读全文
posted @ 2021-12-15 21:05 dsfsadfdgd 阅读(21) 评论(0) 推荐(0) 编辑
摘要: 1. 组成 Client: 切分文件;访问HDFS;与NameNode交互,获取文件位置信息;与DataNode交互,读取和写入数据。 三个守护进程: NameNode:Master节点,在hadoop1.X中只有一个,管理HDFS的名称空间和数据块映射信息,配置副本策略,处理客户端请求,了解决Na 阅读全文
posted @ 2021-12-02 14:41 dsfsadfdgd 阅读(336) 评论(0) 推荐(0) 编辑
摘要: 1. WHERE 搜索条件在进行分组操作之前应用;而 HAVING 搜索条件在进行分组操作之后应用。 SELECT Customer,SUM(OrderPrice) FROM Orders WHERE Customer='Bush' OR Customer='Adams' GROUP BY Cust 阅读全文
posted @ 2021-12-01 15:34 dsfsadfdgd 阅读(27) 评论(0) 推荐(0) 编辑
摘要: 1. 非结构化数据: 指不定长或无固定格式的数据,如邮件,word文档等。非结构化数据又叫全文数据。 结构化数据: 指具有固定格式或有限长度的数据,如数据库,元数据等。 2. 全文检索的基本思路,即将非结构化数据中的一部分信息提取出来,重新组织,使其变得有一定结构,然后对有一定结构的数据进行搜索,从 阅读全文
posted @ 2021-10-08 15:35 dsfsadfdgd 阅读(22) 评论(0) 推荐(0) 编辑
上一页 1 ··· 5 6 7 8 9 10 11 12 13 下一页