USER_AGENTS = [
    "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; AcooBrowser; .NET CLR 1.1.4322; .NET CLR 2.0.50727)",
    "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; Acoo Browser; SLCC1; .NET CLR 2.0.50727; Media Center PC 5.0; .NET CLR 3.0.04506)",
    "Mozilla/4.0 (compatible; MSIE 7.0; AOL 9.5; AOLBuild 4337.35; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)",
    "Mozilla/5.0 (Windows; U; MSIE 9.0; Windows NT 9.0; en-US)",
    "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Win64; x64; Trident/5.0; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET CLR 2.0.50727; Media Center PC 6.0)",
    "Mozilla/5.0 (compatible; MSIE 8.0; Windows NT 6.0; Trident/4.0; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET CLR 1.0.3705; .NET CLR 1.1.4322)",
    "Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 5.2; .NET CLR 1.1.4322; .NET CLR 2.0.50727; InfoPath.2; .NET CLR 3.0.04506.30)",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN) AppleWebKit/523.15 (KHTML, like Gecko, Safari/419.3) Arora/0.3 (Change: 287 c9dfb30)",
    "Mozilla/5.0 (X11; U; Linux; en-US) AppleWebKit/527+ (KHTML, like Gecko, Safari/419.3) Arora/0.6",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.2pre) Gecko/20070215 K-Ninja/2.1.1",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9) Gecko/20080705 Firefox/3.0 Kapiko/3.0",
    "Mozilla/5.0 (X11; Linux i686; U;) Gecko/20070322 Kazehakase/0.4.5",
    "Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.8) Gecko Fedora/1.9.0.8-1.fc10 Kazehakase/0.5.6",
    "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11",
    "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_3) AppleWebKit/535.20 (KHTML, like Gecko) Chrome/19.0.1036.7 Safari/535.20",
    "Opera/9.80 (Macintosh; Intel Mac OS X 10.6.8; U; fr) Presto/2.9.168 Version/11.52",
]

# 随机生成user-agent
class RandomUAMiddleware(object):

    def process_request(self, request, spider):
        request.headers["User-Agent"]=random.choice(USER_AGENTS)


USER_AGENTS = [
    "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; AcooBrowser; .NET CLR 1.1.4322; .NET CLR 2.0.50727)",
    "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; Acoo Browser; SLCC1; .NET CLR 2.0.50727; Media Center PC 5.0; .NET CLR 3.0.04506)",
    "Mozilla/4.0 (compatible; MSIE 7.0; AOL 9.5; AOLBuild 4337.35; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)",
    "Mozilla/5.0 (Windows; U; MSIE 9.0; Windows NT 9.0; en-US)",
    "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Win64; x64; Trident/5.0; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET CLR 2.0.50727; Media Center PC 6.0)",
    "Mozilla/5.0 (compatible; MSIE 8.0; Windows NT 6.0; Trident/4.0; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET CLR 1.0.3705; .NET CLR 1.1.4322)",
    "Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 5.2; .NET CLR 1.1.4322; .NET CLR 2.0.50727; InfoPath.2; .NET CLR 3.0.04506.30)",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN) AppleWebKit/523.15 (KHTML, like Gecko, Safari/419.3) Arora/0.3 (Change: 287 c9dfb30)",
    "Mozilla/5.0 (X11; U; Linux; en-US) AppleWebKit/527+ (KHTML, like Gecko, Safari/419.3) Arora/0.6",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.2pre) Gecko/20070215 K-Ninja/2.1.1",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9) Gecko/20080705 Firefox/3.0 Kapiko/3.0",
    "Mozilla/5.0 (X11; Linux i686; U;) Gecko/20070322 Kazehakase/0.4.5",
    "Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.8) Gecko Fedora/1.9.0.8-1.fc10 Kazehakase/0.5.6",
    "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11",
    "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_3) AppleWebKit/535.20 (KHTML, like Gecko) Chrome/19.0.1036.7 Safari/535.20",
    "Opera/9.80 (Macintosh; Intel Mac OS X 10.6.8; U; fr) Presto/2.9.168 Version/11.52",
]


USER_AGENTS = [
    "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; AcooBrowser; .NET CLR 1.1.4322; .NET CLR 2.0.50727)",
    "Mozilla/4.0 (compatible; MSIE 7.0; Windows NT 6.0; Acoo Browser; SLCC1; .NET CLR 2.0.50727; Media Center PC 5.0; .NET CLR 3.0.04506)",
    "Mozilla/4.0 (compatible; MSIE 7.0; AOL 9.5; AOLBuild 4337.35; Windows NT 5.1; .NET CLR 1.1.4322; .NET CLR 2.0.50727)",
    "Mozilla/5.0 (Windows; U; MSIE 9.0; Windows NT 9.0; en-US)",
    "Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Win64; x64; Trident/5.0; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET CLR 2.0.50727; Media Center PC 6.0)",
    "Mozilla/5.0 (compatible; MSIE 8.0; Windows NT 6.0; Trident/4.0; WOW64; Trident/4.0; SLCC2; .NET CLR 2.0.50727; .NET CLR 3.5.30729; .NET CLR 3.0.30729; .NET CLR 1.0.3705; .NET CLR 1.1.4322)",
    "Mozilla/4.0 (compatible; MSIE 7.0b; Windows NT 5.2; .NET CLR 1.1.4322; .NET CLR 2.0.50727; InfoPath.2; .NET CLR 3.0.04506.30)",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN) AppleWebKit/523.15 (KHTML, like Gecko, Safari/419.3) Arora/0.3 (Change: 287 c9dfb30)",
    "Mozilla/5.0 (X11; U; Linux; en-US) AppleWebKit/527+ (KHTML, like Gecko, Safari/419.3) Arora/0.6",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.2pre) Gecko/20070215 K-Ninja/2.1.1",
    "Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9) Gecko/20080705 Firefox/3.0 Kapiko/3.0",
    "Mozilla/5.0 (X11; Linux i686; U;) Gecko/20070322 Kazehakase/0.4.5",
    "Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.8) Gecko Fedora/1.9.0.8-1.fc10 Kazehakase/0.5.6",
    "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.11 (KHTML, like Gecko) Chrome/17.0.963.56 Safari/535.11",
    "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_7_3) AppleWebKit/535.20 (KHTML, like Gecko) Chrome/19.0.1036.7 Safari/535.20",
    "Opera/9.80 (Macintosh; Intel Mac OS X 10.6.8; U; fr) Presto/2.9.168 Version/11.52",
]

if __name__=="__main__":
    def process_request(self, request, spider):
        request.headers["User-Agent"]=random.choice(USER_AGENTS)

python 有一个现成的随机生成UA(user-agent)的第三方库：fake-useragent 直接：pip install
fake-useragent 即可。 使用：

    from fake_useragent import UserAgent
       ua = UserAgnet()
       ua.random

1. 解压缩压缩包

2. 设置环境变量
新建MYSQL_HOME变量值为刚才下载解压缩后的自定义目录的bin目录下
如：
MYSQL_HOME: D:\Codes\mysql-5.7.19-winx64
PATH环境变量添加Mysql的路径: %MYSQL_HOME%\bin

3. 以管理员身份运行命令提示符
cd D:\Codes\mysql-5.7.19-winx64\bin

4. 安装myql
mysqld install

5. 初始化data目录
https://dev.mysql.com/doc/refman/5.7/en/data-directory-initialization-mysqld.html

mysqld --initialize --console
mysqld --initialize-insecure --console

从5.7.6版开始，Zip压缩包不再提供data目录，所以也不会有MySQL系统数据库的数据文件，我们需要使用mysqld --initialize或者--initialize-insecure对数据库进行初始化

--initialize：初始化时会随机生成一个root用户密码，改密码会以日志的方式打印出来，如果控制台没有密码可能记录在日志文件下，在Windows上可以使用--console选项把信息打印到控制台。使用mysqld –initialize方法安装会生成一个随机字符串组成的密码，这个密码在错误日志<mysql解压目录>\data\<计算机用户名>.err中可以找到。

--initialize-insecure：不会生成随机密码，但是在登录服务器是可以使用--skip-password跳过密码输入：mysql -u root --skip-password。

6. 启动mysql服务
net start mysql

hoganchens-MacBook-Pro:~ hogan.chen$ cat .bash_profile

# added by Anaconda3 4.2.0 installer
export PATH="/Users/hogan.chen/anaconda/bin:$PATH"

alias ussh='ssh hogan@10.211.55.3'
alias masterssh='ssh hogan@10.211.55.7'

alias vssh='vagrant ssh'
alias vstatus='vagrant status'
alias vlist='vagrant box list'
alias vgntup='vagrant up'
alias vhalt='vagrant halt'

alias sshvehicle='cd ~/RoadDB/vehicle; vagrant ssh'
alias sshcloud='cd ~/RoadDB/cloud; vagrant ssh'
alias sshbackend='cd ~/RoadDB/backend; vagrant ssh'

alias tovehicle='cd ~/RoadDB/vehicle'
alias tocloud='cd ~/RoadDB/cloud'
alias tobackend='cd ~/RoadDB/backend'

# use the one of them to change the command line color
export CLICOLOR=1
#alias ls='ls -G'

alias ll='ls -alrt'
alias grep='grep --color'

hogan@ubuntu:~/framework/cmocka/tests$ gcc -o test_ordering_fail test_ordering_fail.c -I ../build/ -I ../include/ -lcmocka

hogan@ubuntu:~/framework/cmocka/tests$ gcc -o test_skip test_skip.c -lcmocka

hogan@ubuntu:~/framework/cmocka/tests$ gcc -o test_ordering test_ordering.c -I ../build/ -I ../include/ -lcmocka

cd ~/share/framework/cmocka/build/example
make clean
make

到目前为止，我们已经使用了 iostream 标准库，它提供了 cin 和 cout 方法分别用于从标准输入读取流和向标准输出写入流。

本教程介绍如何从文件读取流和向文件写入流。这就需要用到 C++ 中另一个标准库 fstream，它定义了三个新的数据类型：
数据类型 	描述
ofstream 	该数据类型表示输出文件流，用于创建文件并向文件写入信息。
ifstream 	该数据类型表示输入文件流，用于从文件读取信息。
fstream 	该数据类型通常表示文件流，且同时具有 ofstream 和 ifstream 两种功能，这意味着它可以创建文件，向文件写入信息，从文件读取信息。

要在 C++ 中进行文件处理，必须在 C++ 源代码文件中包含头文件 <iostream> 和 <fstream>。
打开文件

在从文件读取信息或者向文件写入信息之前，必须先打开文件。ofstream 和 fstream 对象都可以用来打开文件进行写操作，如果只需要打开文件进行读操作，则使用 ifstream 对象。

下面是 open() 函数的标准语法，open() 函数是 fstream、ifstream 和 ofstream 对象的一个成员。

void open(const char *filename, ios::openmode mode);

在这里，open() 成员函数的第一参数指定要打开的文件的名称和位置，第二个参数定义文件被打开的模式。
模式标志 	描述
ios::app 	追加模式。所有写入都追加到文件末尾。
ios::ate 	文件打开后定位到文件末尾。
ios::in 	打开文件用于读取。
ios::out 	打开文件用于写入。
ios::trunc 	如果该文件已经存在，其内容将在打开文件之前被截断，即把文件长度设为 0。

您可以把以上两种或两种以上的模式结合使用。例如，如果您想要以写入模式打开文件，并希望截断文件，以防文件已存在，那么您可以使用下面的语法：

ofstream outfile;
outfile.open("file.dat", ios::out | ios::trunc );

类似地，您如果想要打开一个文件用于读写，可以使用下面的语法：

fstream  afile;
afile.open("file.dat", ios::out | ios::in );

关闭文件

当 C++ 程序终止时，它会自动关闭刷新所有流，释放所有分配的内存，并关闭所有打开的文件。但程序员应该养成一个好习惯，在程序终止前关闭所有打开的文件。

下面是 close() 函数的标准语法，close() 函数是 fstream、ifstream 和 ofstream 对象的一个成员。

void close();

写入文件

在 C++ 编程中，我们使用流插入运算符（ << ）向文件写入信息，就像使用该运算符输出信息到屏幕上一样。唯一不同的是，在这里您使用的是 ofstream 或 fstream 对象，而不是 cout 对象。
读取文件

在 C++ 编程中，我们使用流提取运算符（ >> ）从文件读取信息，就像使用该运算符从键盘输入信息一样。唯一不同的是，在这里您使用的是 ifstream 或 fstream 对象，而不是 cin 对象。


#include <iostream>
#include <string>
#include <fstream>

using namespace std;

int main()
{
	string str("MS/SAM/NGIS/BV-03-C");
    ofstream logfile;

    while ((pos = str.find('/')) != str.npos)
    {
        str.replace(pos, 1, "_");
    }

    string filename = str.append(".txt");

    // logfile.open(filename.c_str(), ios::app);
    logfile.open(filename.c_str(), ios::trunc);
    logfile << "hello world" << endl;
    logfile.close();

    return 0；
}

我们知道在计算机系统中，数值一律用补码来表示（存储）。主要原因是使用补码，可以将符号位和其它位统一处理；同时，减法也可按加法来处理。另外，两个用补码表示的数相加时，如果最高位（符号位）有进位，则进位被舍弃。

补码表示法（two's complement representation）可以防止0的机器数重码，同时又解决了原码和反码无法表示－8的问题，这样就极大的简化了计算机的硬件设计。

什么是数制？用来表示数值的规则，如十进制，二进制．

机器数

用二进制的形式来表示数;最高位为符号位,1表示负数,0表示正数.

如:  1---->00000001;-1---->1000 0001

真值

从上面我们知道了机器数是计算机用来表示数的一种形式，但是用于最高位是符号位。这样就出现这样情况，1000 0001表示的真正数值为1，而不是129.这样我们把一个机器数表示的真正的实际的意义的值称之为真值。

原码、反码、补码

总体上来讲原码反码补码都是计算机本身用来存储数的一种方式。
原码

规则：符号位+真值的绝对值

如：[+1]原码=0000 0001；

[-1]原码=1000 0001；
反码

规则：正数反码为本身

负数反码为原码的取反，但符号位不变

如：[+1]原码=[+1]反码=0000 0001；

[-1]原码=1000 0001=[-1]反码=1111 1110;
补码

规则：正数补码为本身

负数补码为原码的反码的基础之上加1

如：[+1]原码=[+1]补码；

[-1]原码=1000 0001=[-1]反码=1111 1110=[-1]补码=1111 1111；

为何会出现三种表示方式？

通过上面三种我们得到正数1在各种情况下都是一致的：[+1]原\反\补码=0000 00001；

而反码不是一致的。

在计算机内部，为了将运算变得简单。将符号位也投入到运算之中来，这样不需要计算机去分析符号位的作用。但是我们发现

[+1]原码=0000 0001+[-1]原码=1000 0001=0000 00001=1；而不是0，这样一来就出现了错误。如何解决这个问题呢？

为了解决这个问题，反码出现了

[+1]原码+[-1]原码=1000 0001=[+1]反码=0000 0001+[-1]反码=1111 1110=0000 0000（反码）=0000 0000 （原码）=-0；

这样一来解决了原码之间运算的问题，但是问题又出现了-0=1000 0000（原码）；+0=0000 0000 （原码）；这样在计算机看来不一样。是没有意义的。

[+1]原码+[-1]原码=1000 0001=[+1]补码=0000 0001+[-1]补码=1111 1111=0000 0000（补码）=[0000 0000](原码)

这样用[0000 0000](原码)表示0就不会出现问题了。

总的来说，在整数中，原码和补码、反码都是一样的，对于负数反码在符号位不变的情况下各位取反所得；补码为反码基础上加1.而原码补码反码的出现都是为了满足在计算机在运算过程更加简单和便捷而出现的。