Python Scrapy 入门教程

安装

1
$ pip install Scrapy

创建项目

1
2
3
4
5
6
7
8
$ scrapy startproject crawler

New Scrapy project 'crawler', using template directory '/Users/wxnacy/.pyenv/versions/3.5.0/envs/env_lightcircle/lib/python3.5/site-packages/scrapy/templates/project', created in:
    /Users/wxnacy/WebstormProjects/wxnacy.github.io/crawler

You can start your first spider with:
    cd crawler
    scrapy genspider example example.com

通过提示我们可以通过如下命令创建第一个spider

1
2
3
4
5
$ cd crawler
$ scrapy genspider youtube youtube.com

Created spider 'youtube' using template 'basic' in module:
  crawler.spiders.youtube

展开全文 >>

Vim 基础命令

专辑：Vim 练级手册

开始之前我们先来谈谈为什么用 Vim， 网上有很多探讨 Vim 哲学的文章，在我看来 Vim 是这样的一款编辑器。它可以很简单，简单到除了你正在编辑的文字，其余什么都没有。它也可以很复杂，复杂到可以囊括所有 IDE 可以有的功能。它可以很简单，简单到只需要几个输入几个字符，就可以完成其他 IDE 几分钟的工作量。它也可以很复杂，复杂到你连退出就不会。它是一个很神奇的编辑器，它可以无所不能，也可以化繁为简。它可以变成任何你想要的样子，问题只有一个，你是不是准备好开始接受它了。上车吧，我们要出发了

阅读全文 >>

展开全文 >>

Linux CentOS 各个版本启动SSHD服务命令

本篇介绍如何在 CentOS 系统中怎样启动sshd服务，如何开机自启

命令概况

CentOS < 7.x

1
2
service command     # 使用service命令做start|stop|restart sshd
chkconfig command   # turn on or off 机器自启sshd

CentOS >= 7.x

1
systemctl command # 管理 start|stop|start 自启sshd

CentOS < 7.x

chkconfig

1
2
3
$ chkconfig sshd on     # 开机自启sshd
$ chkconfig sshd off    # 开机关闭自启sshd
$ chkconfig --list sshd # 查看每个运行级别类型中服务的当前状态

service

1
2
3
$ service sshd start | stop | restart
or
$ /etc/init.d/sshd start | stop | restart

CentOS >= 7.x

1
2
3
4
5
6
7
$ systemctl enable sshd.service     # 开机自启sshd
$ systemctl disable sshd.service    # 开机关闭自启sshd
$ systemctl start sshd.service      # 启动sshd
$ systemctl restart sshd.service    # 重启
$ systemctl stop sshd.service       # 停止
$ systemctl reload sshd.service     # 重新加载
$ systemctl status sshd.service     # 查看启动状态

展开全文 >>

Linux 远程文件传输 SFTP 和 SCP

熟悉linux的朋友都知道 SSH 可以登录远程服务器进行工作，但是如果想从远程服务器下载文件或上传到服务器呢，SSH 就做不到了，这时候我们可以用 SFTP 和 SCP 完成任务，这两个指令也是使用 SSH 的通道（Port 22），只是模拟 FTP 与复制的操作而已。下面我们一一介绍.

阅读全文 >>

展开全文 >>

Python 获取本地或网络图片的宽高

本地

1
2
3
4
5
from PIL import Image
fp = '/Users/wxnacy/Documents/WX20170412-190958@2x.png'
i = Image.open(fp)
print(i.size) # 获取宽高 (w,h)
print(i.format) # 获取图片格式

网络图片

1
2
3
4
5
6
7
from PIL import Image
import io
import requests
url = ''
i = Image.open(io.BytesIO(requests.get(url).content))
print(i.size) # 获取宽高 (w,h)
print(i.format) # 获取图片格式

展开全文 >>

使用 Supervisor 管理进程

Supervisor 是一个用 Python 写的进程管理工具，可以很方便的用来启动、重启、关闭进程（不仅仅是 Python 进程）。除了对单个进程的控制，还可以同时启动、关闭多个进程，比如很不幸的服务器出问题导致所有应用程序都被杀死，此时可以用 Supervisor 同时启动所有应用程序而不是一个一个地敲命令启动。

阅读全文 >>

展开全文 >>

tag:

    缺失模块。
    1、请确保node版本大于6.2
    2、在博客根目录（注意不是yilia根目录）执行以下命令：
    npm i hexo-generator-json-content --save

    3、在根目录_config.yml里添加配置： 

      jsonContent:
    meta: false
    pages: false
    posts:
      title: true
      date: true
      path: true
      text: false
      raw: false
      content: false
      slug: false
      updated: false
      comments: false
      link: false
      permalink: false
      excerpt: false
      categories: false
      tags: true

每天看书<br>每天背单词<br>每天一篇<br>写写代码<br>听听周杰伦<br>爱爱老婆