非 flask 程序实现 Flask Shell

在 Flask 程序中,通过 flask cli 或者 flask-script 中的 shell 调试是一件非常爽的事情,但是如果不是 flask 程序,比如手写了一个 python server,如果想在程序中实现一个 manage.py 或者 shell,怎么做比较优雅?
2018/04/29 16:07 pm posted in  Python 黑魔法

Python 的并发编程

这篇文章将讲解 Python 并发编程的基本操作。并发和并行是对孪生兄弟,概念经常混淆。并发是指能够多任务处理,并行则是是能够**同时**多任务处理。Erlang 之父 Joe Armstrong 有一张非常有趣的图说明这两个概念。我个人更喜欢的一种说法是:并发是宏观并行而微观串行。
2018/01/18 20:53 pm posted in  Python 黑魔法

Python unittest mock 小记

mock 是 Python 中一个神奇的模块,能够在测试中动态的替换部分逻辑,可以用来解决在跑测试的时候对其他组件依赖的问题。
2017/12/19 00:13 am posted in  Python 黑魔法

Linux下常用命令

看见老五博客里有这么一篇博客,赶快转来备忘!!。@tTop5

说明:所有命令是在Centos 6.4 64位的虚拟机系统进行测试的。本文介绍的命令都会在此Centos下运行验证(也有部分命令会在suse/ubuntu系统里测试的,会做特明说明),但运行结果就不再列出了。 硬件篇 CPU相关

lscpu #查看的是cpu的统计信息. cat /proc/cpuinfo #查看CPU信息详细信息,如每个CPU的型号,主频等

内存相关

free -m #概要查看内存情况 这里的单位是MB cat /proc/meminfo #查看内存详细信息

磁盘相关

lsblk #查看硬盘和分区分布,显示很直观 df -h #查看各分区使用情况 cat /proc/partitions #查看硬盘和分区 mount | column -t #查看挂接的分区状态

网卡相关

lspci | grep -i 'eth' #查看网卡硬件信息ifconfig -a #查看系统的所有网络接口 ethtool eth0 #如果要查看某个网络接口的详细信息,例如eth0的详细参数和指标

软件篇 内核相关

uname -a #查看版本当前操作系统内核信息 cat /proc/version #查看当前操作系统版本信息 cat /etc/issue #查看版本当前操作系统发行版信息 cat /etc/redhat-release #同上 cat /etc/SuSE-release #suse系统下才可使用 lsb_release -a #用来查看linux兼容性的发行版信息 lsmod #列出加载的内核模块

网络

ifconfig #查看所有网络接口的属性iptables -L #查看防火墙设置 service iptables status #查看防火墙状态 service iptables stop #关闭防火墙 route -n #查看路由表 netstat -lntp #查看所有监听端口 netstat -antp #查看所有已经建立的连接 netstat -s #查看网络统计信息进程 netstat -at #列出所有tcp端口 netstat -au #列出所有udp端口 netstat -lt #只列出所有监听tcp端口

系统管理

top #查看系统所有进程的详细信息,比如CPU、内存等,信息很多! df -lh #查看硬盘大小及使用率 mount #挂接远程目录、NFS、本地共享目录到linux下 hostname #查看/修改计算机名 w #查看活动用户 id #查看指定用户信息 last #查看用户登录日志 cut -d: -f1 /etc/passwd #查看系统所有用户 cut -d: -f1 /etc/group #查看系统所有组 crontab -l #查看当前用户的计划任务服务 chkconfig –list #列出所有系统服务 chkconfig –list | grep on #列出所有启动的系统服务程序 rpm -qa #查看所有安装的软件包 uptime #查看系统运行时间、用户数、负载 /sbin/chkconfig --list #查看系统自动启动列表 /sbin/chkconfig –add mysql #把MySQL添加到系统的启动服务组里面

文件相关

ls -lht #列出一个文件夹下所有文件及大小、访问权限 **du -sh ** #查看指定目录的大小 **du -lh ** #查看指定目录及各文件的大小 ln -s #建立软链接

进程相关

pstree -p pid #查看一个进程下的所有线程 pstree -a #显示所有进程的所有详细信息,遇到相同的进程名可以压缩显示。 ps -ef #查看所有进程 kill -9 pid #杀死进程 kill all test #杀死进程 kill -9 pgrep test #杀死进程 ./test.sh & #使程序在后台运行 nohup ./test.sh & #使程序在后台运行

压缩解压缩

zip -r dir.zip dir file #将目录dir、文件file等压缩到zip包,zip -re dir.zip dir file #创建zip包,且加密 unzip dir.zip #解压 tar -zcvf dir.tar.gz dir file #将目录dir、文件file等压缩到tar包 tar -xf dir.tar.gz #解压

screen命令 screen命令组最大的好处就是当你的shell退出或关闭后,你运行的服务不会关系,也就是说,我们可以在screen里开启一组服务,且不受终端断开的影响。

screen -S test #创建一个名字为test的screen screen -r test #打开名字为test的screen screen -r pid #打开进程号为pid的screen screen -ls #列出所有的screen ctrl + a,d #当在一个screen时,退出screen ctrl + a,n #当在一个screen时,切换到下一个窗口 ctrl + a,c #当在一个screen时,创建一个新的窗口

scp命令

scp local_file remote_username@remote_ip:remote_dir #拷贝本地文件到远程机器上 scp -r local_dir remote_username@remote_ip:remote_dir #拷贝本地整个目录到远程机器上

软件包安装管理命令 假设你想要安装的软件包叫做app,注意,这里的命令通常需要sudo或者root权限。

//centos系统、redhat系统 rpm -qa | grep app #查找本机是否安装了app; rpm -ivh app.rpm #假设你有app的rpm包,这样直接安装 sudo yum install app #否则就在线安装 yum update app #更新app rpm -e app #删除已安装的app包 //suse、opensuse系统 zypper search app #查找本机是否安装了app; zypper install app #安装 zypper update app #更新 zypper remove app #删除 zypper lr #列出所有已定义的安装源。 zypper ar #添加新安装源。 zypper rr #删除指定的安装源 zypper mr #修改指定的安装源 //ubuntu系统 apt-get install app #安装 apt-get update app #更新 apt-get remove app #删除 apt-cache search app #搜索软件包 dpkg -i app.deb #假设你有app的deb包,这样直接安装

2017/07/29 10:41 am posted in  Linux

Ansible Config 和 Playbook

Config

Ansible 的配置一般不需要更改,如果需要定制,自定义配置也很简单,在 Ansible 中,寻找配置按照如下顺序:

  • ANSIBLE_CONFIG (一个环境变量)
  • ansible.cfg (位于当前目录中)
  • .ansible.cfg (位于家目录中)
  • /etc/ansible/ansible.cfg

因此只需要按照文档自定义配置即可:http://ansible-tran.readthedocs.io/en/latest/docs/intro_configuration.html

Playbook

为了方便保存执行的操作,Ansible 使用了 Playbook 剧本。剧本使用 yml 格式,来避免成为了一种新语言或者脚本。

Playbook 是有 play 组成的,每个 play 包含了 host,user,tasks。

比如一个 playbook:

---
- hosts: webservers
  vars:
    http_port: 80
    max_clients: 200
  remote_user: root
  tasks:
  - name: ensure apache is at the latest version
    yum: pkg=httpd state=latest
  - name: write the apache config file
    template: src=/srv/httpd.j2 dest=/etc/httpd.conf
    notify:
    - restart apache
  - name: ensure apache is running
    service: name=httpd state=started
  handlers:
    - name: restart apache
      service: name=httpd state=restarted

host 便是指定的 hosts 文件中的主机,可以通过 remote_user 指定在远程使用的用户,也可以用 sudo 为远程操作添加 root 权限。

Task

作为远程部署工具,task 是整个 playbook 的重点。每个 task 都会在指定的所有远程主机执行,如果有执行失败的主机,将会被跳过。

每个 task 目标在于执行一个幂等(moudle)的操作,因此即使是多次执行也会很安全。一个 task 类似于下面的格式:

tasks:
  - name: make sure apache is running
    service: name=httpd state=running

一个 task 包含了名称,model,以及参数。更多的 task 写法见: http://ansible-tran.readthedocs.io/en/latest/docs/playbooks_intro.html

2017/07/26 13:43 pm posted in  坏笔记不如好记性