随笔分类 - linux
摘要:背景 在以前docker开发运维的时候,经常遇到一个情况,使用top/free命令的时候,把整个物理机的资源读出来了,lxcfx主要解决这个问题 https://github.com/lxc/lxcfs Introduction LXCFS is a small FUSE filesystem wr
阅读全文
摘要:详解Cgroup V2 版权声明: 本文章内容在非商业使用前提下可无需授权任意转载、发布。 转载、发布请务必注明作者和其微博、微信公众号地址,以便读者询问问题和甄误反馈,共同进步。 微博: https://weibo.com/orroz/ 博客: https://zorrozou.github.io
阅读全文
摘要:1. 使用ps查看相关进程 ps -elf | grep python 2. 使用awk提取进程pid ps -elf | grep python|awk '{print $4}' 这里不一定是$4,根据实际情况调整 3. 使用xargs传参并执行kill ps -elf | grep python
阅读全文
摘要:问题 训练模型时,训练到第2个epoch时程序无缘无故消失,没有打印任何异常日志 定位方法 程序加try catch,捕获异常日志,运行python时使用如下命令记录error信息 nohup python xxx.py > nohup.out 2>&1 & 结果:nohup没有记录任何信息,训练过
阅读全文
摘要:http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html FS Shell 调用文件系统(FS)Shell命令应使用 bin/hadoop fs 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://auth
阅读全文
摘要:1. docker settings share drivers 设置共享目录 2. 启动docker时 v 指定目录 ··· docker run v /d/temp:/app it rm convlab/convlab:0.2.2 ··· 这里/d/temp指的是windows本地目录D:\te
阅读全文
摘要:nginx转发成功报400 bad request,服务端未收到请求 解决办法: upstream后面不要跟下划线 例如: upstream auth_service{ server 30.4.164.151:10002; } location /auth_service { proxy_pass
阅读全文
摘要:Linux在~/.pip/pip.conf文件中添加或修改, windows不存在该目录,在当前用户目录下创建pip.ini(例如 C:\Users\bin\pip\pip.ini): 临时使用: 可以在使用pip的时候加参数-i ,例如: 新版本pip需要https,可以使用: 豆瓣源: http
阅读全文
摘要:查看容器 # 查看容器 docker ps -a # 启动容器 docker start 69f58f921497# 启动容器,后台运行docker start x # 进入容器1# -t 分配一个伪终端# -i 即使没有附件也保持Stdin打开# -d 分离模式,后台运行 docker exec
阅读全文
摘要:1、备份 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2、下载新的CentOS-Base.repo 到/etc/yum.repos.d/ CentOS 5 wget -O /etc/yum
阅读全文
摘要:1.创建input文件夹 2.上传文件到hadoop 3.运行wordcount(运行前删除旧的output文件夹,可以使用eclipse删除) 4.下载文件到本地 运行结果:
阅读全文
摘要:1.能正常访问bincoding.cn:50030,不能连接到9000端口 Call to bincoding.cn/123.206.212.115:9000 failed on connection exception: java.net.ConnectException: Connection
阅读全文
摘要:环境:ubuntu13 使用的用户为普通用户。如:用户ru jdk安装略 1、安装ssh (1) sudo apt-get install openssh-server (2)配置ssh面密码登录 $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa $ cat ~/
阅读全文
摘要:1.查看CentOS自带JDK是否已安装。 2.卸载原有JDK 3.查看yum库中的JDK包 4.安装JDK
阅读全文
摘要:1.安装 jdk 2.安装maven 3.安装依赖 4.安装Hadoop 可以将mvn添加到环境变量/etc/profile Hadoop1.2.1配置见 http://www.cnblogs.com/bincoding/p/6820568.html
阅读全文
摘要:/bin 二进制可执行命令 /dev 设备特殊文件 /etc 系统管理和配置文件 /etc/rc.d 启动的配置文件和脚本 /home 用户主目录的基点,比如用户user的主目录就是/home/user,可以用~user表示 /lib 标准程序设计库,又叫动态链接共享库,作用类似windows里的.
阅读全文
摘要:MySQLdb是Python连接MySQL的模块,下面介绍一下源码方式安装MySQLdb: 首先要下载下载:请到官方网站http://sourceforge.net/projects/mysql-python/或者点击链接下载http://downloads.sourceforge.net/proj
阅读全文
摘要:1.首先确认服务器出于安全的状态,也就是没有人能够任意地连接MySQL数据库。 因为在重新设置MySQL的root密码的期间,MySQL数据库完全出于没有密码保护的 状态下,其他的用户也可以任意地登录和修改MySQL的信息。可以采用将MySQL对 外的端口封闭,并且停止Apache以及所有的用户进程
阅读全文
摘要:1、安装MariaDB 安装命令 安装完成MariaDB,首先启动MariaDB,两条命令都可以 设置开机启动 接下来进行MariaDB的相关简单配置 首先是设置密码,会提示先输入密码 Enter current password for root (enter for none):<–初次运行直接
阅读全文
摘要:1.安装owncloud CentOS下有一键安装命令 默认配置目录: /etc/owncloud 默认内容目录: /usr/share/owncloud 2.安装配置nginx 修改nginx配置,添加: 修改nginx目录为owncloud 3.安装php-fpm 最后登录浏览器测试
阅读全文