2017年02月的内容
Python安装dryscrape
需要先执行 -e git+https://github.com/niklasb/webkit-server.git#egg=webkit-server 放到reqirement.txt里 然后pip install -r requirement.txt ……
python的http请求带上cookie，header，useragent
Http.init() Http.c.setopt(pycurl.COOKIEJAR, cookie_path) ……
centos安装Python3.5并设置为默认
sudo yum install yum-utils curl -O https://www.python.org/ftp/python/3.5.0/Python-3.5.0.tgz tar xf Python-3.5.0.tgz cd Python-3.5.0 ./configure &nb……
python 使用xpath获取页面元素
Web抓取 Web站点使用HTML描述，这意味着每个web页面是一个结构化的文档。有时从中 获取数据同时保持它的结构是有用的。web站点不总是以容易处理的格式， 如 csv 或者 json 提供它们的数据。 这正是web抓取出场的时机。Web抓取是使用计算机程序将web页面数据进行收集 并整……
larravel框架使用force index提高查询性能
$_record = null; $_record = self::from(DB::raw(‘pay_records FORCE INDEX (created_at)’)) ->leftJoin(‘m……
linux批量杀进程命令
有时候因为一些情况，需要把 linux 下符合某一项条件的所有进程 kill 掉，又不能用 killall 直接杀掉某一进程名称包含的所有运行中进程（我们可能只需要杀掉其中的某一类或运行指定参数命令的进程），这个时候我们需要运用 ps, grep, cut ……