随笔分类 -  linux

摘要:背景 在以前docker开发运维的时候,经常遇到一个情况,使用top/free命令的时候,把整个物理机的资源读出来了,lxcfx主要解决这个问题 https://github.com/lxc/lxcfs Introduction LXCFS is a small FUSE filesystem wr 阅读全文
posted @ 2022-07-11 11:32 致林 阅读(151) 评论(0) 推荐(0) 编辑
摘要:详解Cgroup V2 版权声明: 本文章内容在非商业使用前提下可无需授权任意转载、发布。 转载、发布请务必注明作者和其微博、微信公众号地址,以便读者询问问题和甄误反馈,共同进步。 微博: https://weibo.com/orroz/ 博客: https://zorrozou.github.io 阅读全文
posted @ 2022-07-11 11:19 致林 阅读(3439) 评论(0) 推荐(0) 编辑
摘要:1. 使用ps查看相关进程 ps -elf | grep python 2. 使用awk提取进程pid ps -elf | grep python|awk '{print $4}' 这里不一定是$4,根据实际情况调整 3. 使用xargs传参并执行kill ps -elf | grep python 阅读全文
posted @ 2021-02-22 17:22 致林 阅读(3739) 评论(0) 推荐(0) 编辑
摘要:问题 训练模型时,训练到第2个epoch时程序无缘无故消失,没有打印任何异常日志 定位方法 程序加try catch,捕获异常日志,运行python时使用如下命令记录error信息 nohup python xxx.py > nohup.out 2>&1 & 结果:nohup没有记录任何信息,训练过 阅读全文
posted @ 2021-02-22 17:05 致林 阅读(6580) 评论(0) 推荐(0) 编辑
摘要:http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html FS Shell 调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://auth 阅读全文
posted @ 2020-09-29 16:24 致林 阅读(146) 评论(0) 推荐(0) 编辑
摘要:1. docker settings share drivers 设置共享目录 2. 启动docker时 v 指定目录 ··· docker run v /d/temp:/app it rm convlab/convlab:0.2.2 ··· 这里/d/temp指的是windows本地目录D:\te 阅读全文
posted @ 2019-12-09 10:56 致林 阅读(3712) 评论(0) 推荐(0) 编辑
摘要:nginx转发成功报400 bad request,服务端未收到请求 解决办法: upstream后面不要跟下划线 例如: upstream auth_service{ server 30.4.164.151:10002; } location /auth_service { proxy_pass 阅读全文
posted @ 2018-12-25 11:38 致林 阅读(3342) 评论(2) 推荐(0) 编辑
摘要:Linux在~/.pip/pip.conf文件中添加或修改, windows不存在该目录,在当前用户目录下创建pip.ini(例如 C:\Users\bin\pip\pip.ini): 临时使用: 可以在使用pip的时候加参数-i ,例如: 新版本pip需要https,可以使用: 豆瓣源: http 阅读全文
posted @ 2017-12-01 23:15 致林 阅读(275) 评论(0) 推荐(0) 编辑
摘要:查看容器 # 查看容器 docker ps -a # 启动容器 docker start 69f58f921497# 启动容器,后台运行docker start x # 进入容器1# -t 分配一个伪终端# -i 即使没有附件也保持Stdin打开# -d 分离模式,后台运行 docker exec 阅读全文
posted @ 2017-11-26 21:30 致林 阅读(4559) 评论(0) 推荐(0) 编辑
摘要:1、备份 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2、下载新的CentOS-Base.repo 到/etc/yum.repos.d/ CentOS 5 wget -O /etc/yum 阅读全文
posted @ 2017-11-24 23:36 致林 阅读(42772) 评论(0) 推荐(1) 编辑
摘要:1.创建input文件夹 2.上传文件到hadoop 3.运行wordcount(运行前删除旧的output文件夹,可以使用eclipse删除) 4.下载文件到本地 运行结果: 阅读全文
posted @ 2017-05-08 13:34 致林 阅读(1258) 评论(0) 推荐(0) 编辑
摘要:1.能正常访问bincoding.cn:50030,不能连接到9000端口 Call to bincoding.cn/123.206.212.115:9000 failed on connection exception: java.net.ConnectException: Connection 阅读全文
posted @ 2017-05-08 00:34 致林 阅读(619) 评论(0) 推荐(0) 编辑
摘要:环境:ubuntu13 使用的用户为普通用户。如:用户ru jdk安装略 1、安装ssh (1) sudo apt-get install openssh-server (2)配置ssh面密码登录 $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa $ cat ~/ 阅读全文
posted @ 2017-05-07 13:15 致林 阅读(382) 评论(0) 推荐(0) 编辑
摘要:1.查看CentOS自带JDK是否已安装。 2.卸载原有JDK 3.查看yum库中的JDK包 4.安装JDK 阅读全文
posted @ 2017-05-06 19:12 致林 阅读(2231) 评论(0) 推荐(0) 编辑
摘要:1.安装 jdk 2.安装maven 3.安装依赖 4.安装Hadoop 可以将mvn添加到环境变量/etc/profile Hadoop1.2.1配置见 http://www.cnblogs.com/bincoding/p/6820568.html 阅读全文
posted @ 2017-05-05 22:23 致林 阅读(1046) 评论(0) 推荐(0) 编辑
摘要:/bin 二进制可执行命令 /dev 设备特殊文件 /etc 系统管理和配置文件 /etc/rc.d 启动的配置文件和脚本 /home 用户主目录的基点,比如用户user的主目录就是/home/user,可以用~user表示 /lib 标准程序设计库,又叫动态链接共享库,作用类似windows里的. 阅读全文
posted @ 2017-03-15 21:29 致林 阅读(225) 评论(0) 推荐(0) 编辑
摘要:MySQLdb是Python连接MySQL的模块,下面介绍一下源码方式安装MySQLdb: 首先要下载下载:请到官方网站http://sourceforge.net/projects/mysql-python/或者点击链接下载http://downloads.sourceforge.net/proj 阅读全文
posted @ 2017-02-28 20:54 致林 阅读(1332) 评论(0) 推荐(0) 编辑
摘要:1.首先确认服务器出于安全的状态,也就是没有人能够任意地连接MySQL数据库。 因为在重新设置MySQL的root密码的期间,MySQL数据库完全出于没有密码保护的 状态下,其他的用户也可以任意地登录和修改MySQL的信息。可以采用将MySQL对 外的端口封闭,并且停止Apache以及所有的用户进程 阅读全文
posted @ 2017-02-28 20:31 致林 阅读(9207) 评论(2) 推荐(1) 编辑
摘要:1、安装MariaDB 安装命令 安装完成MariaDB,首先启动MariaDB,两条命令都可以 设置开机启动 接下来进行MariaDB的相关简单配置 首先是设置密码,会提示先输入密码 Enter current password for root (enter for none):<–初次运行直接 阅读全文
posted @ 2016-12-21 17:41 致林 阅读(12432) 评论(0) 推荐(0) 编辑
摘要:1.安装owncloud CentOS下有一键安装命令 默认配置目录: /etc/owncloud 默认内容目录: /usr/share/owncloud 2.安装配置nginx 修改nginx配置,添加: 修改nginx目录为owncloud 3.安装php-fpm 最后登录浏览器测试 阅读全文
posted @ 2016-12-13 21:01 致林 阅读(2748) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示