Windows 本地文件上传至远程Linux服务器是经常需要使用的功能, 我使用的 Windows 桌面版工具是 WinSCP,用于本地与云端之间的文件传输。WinSCP 的优点是可视化效果好、稳定, 就像在 windows 电脑上处理本地文件一样,是一款很好用的文件管理软件。
但 WinSCP 的所有操作是手动进行的,不适用于 regul……继续阅读 »
大坚果
6年前 (2019-02-26) 2739浏览
前面讲了 Jupyter Notebook 的远程服务器搭建过程。但每次打开一个新的 notebook,都要重复地倒入一些模块(pandas,numpy,matplotlib,random 等),这可与“人生苦短,我用 Python”有点不符。不负我望,Jupyter 是可以进行提前配置的,以后打开的时候可以直接使用而不需要一次次地 import 了。
以下……继续阅读 »
大坚果
7年前 (2018-10-11) 5602浏览
最近有一些视频需要剪辑,但本人比较懒,不想逐一手工处理。第一个想到的,就是万能的 Python。
果不其然 google 一搜,真的有现成的库 moviepy。如官方文档所介绍的,moviepy是一个用于视频编辑 Python 库,可以切割、拼接、标题插入,视频合成(即非线性编辑),进行视频处理和自定义效果的设计。总的来说,可以很方便自由地处理视频、图片等文……继续阅读 »
大坚果
7年前 (2018-10-09) 10064浏览
用 Python 做数据分析的同学,最习惯的 IDE 莫非 Ipython和 Jupyter 莫属了。个人更倾向于 Jupyter,最初源于 Ipython总会无意给关掉,在内存的各种变量全没了,又要重新加载,而jupyter以浏览器的形式不会有这个问题;另一个重要原因在于,Jupyter 可以方便地把输入的代码全部保存下载,而 Ipython想保存相对操作……继续阅读 »
大坚果
7年前 (2018-09-12) 23661浏览
mongodb是非常好用的 NoSQL数据库,我一般用来做爬虫,特别方便好用。
mongodb 启动:
在Linux 系统中直接运行 bin 文件夹中的 mongod 就行了 。 如下是在 Windows 系统的批命令,其中.lock文件是用来锁定数据使用,若上次非正常关闭,则需要删除此文件,否则会报错。
……继续阅读 »
大坚果
7年前 (2018-07-11) 13822浏览
记录常用数据库的基本操作,主要包括 MySQL, MongoDB,Redis。这些数据库作为爬虫、网站后台使用,包括数据库的操作、远程服务器的搭建及连接
Redis
Redis 确切说不算数据库,在计算机内存中快速处理数据。由于其有序的属性,我这用来搭建 Proxy 和 Cookie 池
Redis 的启动与重启命令
……继续阅读 »
大坚果
7年前 (2018-07-10) 5098浏览
家里老人比较关注天气变化,但是又不会使用智能手机随时上网查看天气信息,只能观看天气预报或者拨打天气热线查看。何不写个程序,每天自动给老人发送短信,告诉天气信息呢?
Google 查询后,发现网上有很多已封装好的 API 接口,但试了试又不大满意,主要有以下两方面的问题:
地域范围太大,最低也是以县级市为单位预报天气
天气信息准确性不可知,数据来源未知,多久……继续阅读 »
大坚果
7年前 (2018-06-20) 9722浏览
记录零星日常 Python 使用中好用的一些技巧及操作
Python 脚本文件头
#!/usr/bin/env python3
# -*- coding: utf-8 -*-
' Module Name '
__author__ = 'Yu Enshui'
……继续阅读 »
大坚果
7年前 (2018-06-12) 4305浏览
多进程与多线程的区别
对于操作系统来说,一个任务就是一个进程(Process),比如打开一个浏览器就是启动一个浏览器进程,打开一个记事本就启动了一个记事本进程,打开两个记事本就启动了两个记事本进程,打开一个 Word 就启动了一个 Word 进程。
有些进程还不止同时干一件事,比如 Word,它可以同时进行打字、拼写检查、打印等事情。在一个进程内部,要同时干……继续阅读 »
大坚果
7年前 (2018-06-10) 3686浏览
Flask是一个 Python 编写的 Web 微框架,让我们可以使用 Python 语言快速实现一个网站或 Web 服务。
一个最小的 Flask 应用看起来会是这样:
# 可指定端口,以及 Debuge;也可以不指定,使用默认的 5000
from flask import Flask
app……继续阅读 »
大坚果
7年前 (2018-05-30) 3301浏览