江天一色

高性能，高可用，高可运维，灵活性

2012-02-07T22:21:00.001+08:00

庄泗华《1亿在线背后的技术挑战》

N个监控和报警，智能调整阈值

区域自治

快速迭代

笔记本硬盘与台式机硬盘互转

2012-02-04T21:49:00.001+08:00

台式机硬盘做 USB移动硬盘：易驱三用USB转SATA/IDE线

台式机硬盘做笔记本外置硬盘：用易驱三用线的电源，加上一个SATA转ESATA线（速度暴快）

移动硬盘做台式机硬盘：笔记本2.5寸IDE转SATA卡

vmware : 设置从光盘启动

2012-01-25T12:35:00.001+08:00

启动，鼠标按近vmare窗口，载入速度很快，没等按F2就从硬盘启动过去

因此，要按ctrl+alt+insert让系统重启，然后赶快按F2进bios设置

Puppy Linux ：U盘启动时卡在searching for puppy files in computer disk drives

2012-01-22T17:36:00.001+08:00

Puppy Linux，U盘启动时卡在searching for puppy files in computer disk drives

可以在boot时，输入puppy pmedia=usbflash 跳过

U盘启动后提示：vesamenu.c32 Not a COM32R image boot

2012-01-22T15:10:00.001+08:00

U盘启动后提示：vesamenu.c32: Not a COM32R image boot

直接按tab键，根据自动列出来的选项，键盘输入即可

Perl : JSON解码字符串后，提交MySQL查询失败的问题

2012-01-17T16:49:00.001+08:00

用json格式存mysql查询的条件，调用JSON模块的from_json函数解码，拼接出mysql查询字符串

$json_text =  '{ "abc" : "测试" }';

$json_scalar = from_json($json_text, { utf8 => 0 });

$sql_str = “select * from sometable where abc=’$json_scalar->{abc}’”

通过DBI模块将此$sql_str提交到Mysql，查询总是失败。要用utf8:: downgrade把字符串存储模式换过来才行。

#!/usr/bin/perl
# 文件是cp936编码

use JSON;
use Encode;
use Data::Dumper;

my $str = '{ "abc" : "测试" }';
print $str,', ',Dumper($str),"\n";
#{ "abc" : "测试" }, $VAR1 = '{ "abc" : "测试" }';
print "-----\n\n";

$t = from_json($str, { utf8 => 0 } );
print $t->{abc},', ', Dumper($t->{abc}),"\n";
#测试, $VAR1 = "\x{b2}\x{e2}\x{ca}\x{d4}";
#=> 可见$t->{abc}内部存储是 UTF8=1
print "-----\n\n";

utf8::downgrade($t->{abc}, 1);
print $t->{abc},', ', Dumper($t->{abc}),"\n";
#测试, $VAR1 = '测试';
#=> 通过downgrade把$t->{abc}切回 UTF8=0　内部存储
print "-----\n";

mysql：主从同步

2012-01-12T16:58:00.001+08:00

参考：

只导出表结构：mysqldump --opt -d --skip-lock-tables testdb > testdb.sql

可以只导出表结构，配好主从，master不停机，slave慢慢自动同步（注意：有些一直没变化的数据slave会缺，可以后续再备份）

CodeIgniter：指定页面默认编码

2012-01-11T09:29:00.001+08:00

在index.php中添加：

header('Content-Type: text/html; charset=gb2312');

笔记：关于构造冲突串使hash退化为链表

2012-01-10T22:32:00.001+08:00

论文：CrosbyWallach_UsenixSec2003.pdf

先汗一个，这论文都整出来多少年了……

问题在于各基础语言用的是“伪HASH”，桶长较小，冲突串容易构造。

加随机数初始化，且限制提交字符的串长度缓解。

参考：2007_28C3_Effective_DoS_on_web_application_platforms.pdf

perl的fix说明：perlsec.html#Algorithmic-Complexity-Attacks

perl5.8.1之后，大体上是加个随机种子PERL_HASH_SEED，且运行时一些操作可以动态改变hash值在桶内的位置，增加构造冲突串的复杂度。

由于这个随机处理，两次执行相同脚本，相同hash打出来的key顺序也不同。并且每次插入hash值也会导致key顺序发生变动。perl并不保证hash的key顺序一直固定。

可以把PERL_HASH_SEED置0，则不做随机处理，用于一些特殊的函数，如List::Util::shuffle()。

可以参考这个说明：http://perldoc.perl.org/Hash/Util.html

ntp同步时间

2011-12-26T14:41:00.001+08:00

假设 ntp 服务器是 xxx.xxx.xxx.xxx，要更新时间

原来用

ntpupdate xxx.xxx.xxx.xxx

现在用

sntp -P no -r xxx.xxx.xxx.xxx

DNS：检查NS配置

2011-11-20T13:32:00.001+08:00

http://www.intodns.com/

写的很清楚

Perl : 10进制转换成16进制

2011-11-14T16:11:00.001+08:00

#!/usr/bin/perl

use strict;

use warnings;

use Math::BigInt;

#需求：将一个10进制的大数，用16进制分解成4份

#法1：类似C的写法

my $l = 281474983985353;

my $a = $l % 0x100000000;

my $b = ($l-$a)/0x100000000;

my $major = $b >> 16;

my $minor = $b % 0x10000;

my $build = $a >> 16;

my $ext = $a % 0x10000;

print "$major $minor $build $ext\n";

#法2：用Math::BigInt大数库

my $t = new Math::BigInt('281474983985353');

my @result;

while($t){

my ($t, $s) =$t->bdiv(0x10000);

unshift @result, s;

}

print join(" ", @result, "\n");

#法3：可以用pack，需要支持Q选项，与perl编译的版本有关

笔记：关于DNSCURVE

2011-11-14T06:06:00.001+08:00

资料：

注意，DNSCURVE提供点到点的安全，而非端到端；也就是说，能保证采用DNSCURVE通信的相邻两节点DNS查询/应答通信数据的加密、认证。

DNSCURVE：

针对“NS”的公钥认证，维护成本较低；一个NS可以有多个公私钥对
挑战码+DH交换协商对称密钥，支持加密通信
客户端时间不准对解析结果无影响，抗重放攻击
不会降低外部探知整个域配置的难度
没有引入新RR，域名配置文件略微增大，主要是NS记录比以前长，可以继续用UDP
耗CPU的攻击威胁增大，每个包都要涉及加解密计算，否定缓存应答不需要特殊处理
放大攻击的风险较小

DNSSEC：

针对“域”的公钥认证，维护成本较高
不支持加密通信
客户端时间不准可能导致新公钥认证的域名配置被判为错误，需要NTP严格校准时间，会有重放攻击的问题
NSEC/NSEC3会降低外部探知整个域配置的难度
引入新RR，域名配置文件显著变大，以后用TCP比较靠谱
耗CPU的攻击威胁增大，否定缓存应答需要特殊的临时计算
放大攻击的风险大增

二者可结合使用，例如，解析some.test.com，用DNSSEC认证“.”与“com.”，到test.com的ns再开始用DNSCURVE

opendns支持DNSCURVE

结网 by 王坚 (2)

2011-11-03T23:06:00.001+08:00

嘿嘿，写的很好：

结网 by 王坚 (1)

2011-11-03T23:03:00.001+08:00

觉得《结网》里面这几句话很有意思，摘录一下：

Pro DNS and BIND 10 : 附录

2011-11-03T22:50:00.001+08:00

附录A：一些域名的FAQ

附录B：DNS的RFC列表，很长，重点看过的几份：

RFC1034/1035/2181 DNS介绍，基础必看
RFC2308 否定缓存，写的挺好
RFC3833 威胁分析，关键资料
RFC4592 泛域名，感觉不错
RFC4033/4034/4035 讲DNSSEC，这几份读的很烦躁

Pro DNS and Bind 10 : chap 9

2011-11-02T21:03:00.001+08:00

一些返回码：

FORMERR：NS无法识别该查询
SERVFAIL：由于NS的故障无法执行查询，或由于NS配置问题无法支持指定的查询请求
NXDOMAIN：只能由权威给出，表示该域名不存在
NOTIMP：NS不支持指定的查询请求
YXDomain：域名存在，但它不该存在
YXRRSet：配置存在，但它不该存在
NXRRSet：配置不存在，但它应该存在
NotAuth：服务器不是该域的权威
NotZone：域名不在该域内

Pro DNS and Bind 10 : chap 3

2011-11-01T00:19:00.001+08:00

迭代查询可能有几种返回：

域名的cname记录，需要标识是权威应答还是缓存应答
域名或主机不存在NXDOMAIN，包括CNAME到一个不存在主机的情况
出现临时错误，例如网络故障等
referral应答，给出一个更加靠近权威DNS的ns记录

最好只有单个IP的PTR指向mail域名，否则可能会丢信。而不是单个IP的PTR指向多个域名。

两种Dynamic DNS：

允许从外部源实时更新zone RRs，而不中断服务（无法动态新增或删除一个域名/域；已存在域名的RR，除SOA之外，都可以被增/删/改）
从数据库读取zone RRs做解析，数据可以动态更新（BIND-DLZ、PowerDNS、BIND10；域名/域可以动态增/删/改，但是查询性能较差）

SFTP客户端软件：WinSCP

2011-10-30T23:00:00.001+08:00

之前ftp客户端软件用的是ftprush，其实WinSCP也不错，还可以SSH登录。

PowerShell 网络指令包 : NetCmdlets

2011-10-26T09:45:00.001+08:00

非常好用的单行powershell网络指令：NetCmdlets

支持发邮件、查dns、下http、算md5、发tcp/udp包、traceroute、zip压缩等等！

智能Web算法 2

2011-10-17T23:45:00.000+08:00

有可能你的分类器在一个小规模数据集工作良好，但当它作用于一个充分大的数据集时，表现急剧下降。
如果一个分类器极其精确但极其缓慢，它其实与废物差不多！
如果你使用的是基于规则的系统，也许会遇到可用性问题，学习的过程－规则的收集－会导致生产环境中的系统整体变得缓慢起来。
分类方案应该易于维护、易于测试、并且还要能够迅速的产生结果。
更多的数据并不一定意味着更多的信息量。
监督学习：我们告诉分类器应该懂得什么，然后它就尝试着通过修改自身的参数来同化这些知识，例如贝叶斯、神经网络权重、基于规则。
如果你没有告诉分类器什么是正确的，那它该如何工作？
分类器融合：降低单分类器用于未知数据的风险；平滑每个分类器在训练集中的敏感性；表达性组合效果更好。
一个分类器如果输入受到轻微的扰动时会产生不一样的输出，就称为是非稳定的。
搜索、推荐、聚类、分类

笔记：Checkmate with Denial of Service

2011-10-17T14:36:00.001+08:00

Checkmate with Denial of Service

2个点比较有意思：

慢速POST数据耗资源

websocket不限制数据流长度问题

深圳电信对返回为空的http请求插广告

2011-10-16T23:43:00.001+08:00

请求 http://btui.it/h6MN

1) DNS解析正常

2) 对User-Agent头含某些关键字、且最终返回内容为空的http请求，插广告跳转到电信114页面

firefox：查看whois信息的扩展

2011-10-16T00:07:00.001+08:00

可以一键查看当前网址的域名whois，关键信息也提出来了，很不错：Whois Mind

VMware tools 安装

2011-10-15T23:50:00.001+08:00

见：彻底了解虚拟机VMware tools安装

MySQL : 删除mysql-bin.000xxx日志文件的方法

2011-10-14T14:37:00.001+08:00

注释掉my.cnf里面的

#log-bin=mysql-bin
#binlog_format=mixed

重启mysql

删除mysql-bin.000xxx文件

Windows Power Shell : find 的等价语句

2011-10-10T13:35:00.001+08:00

find . -name '*.html' -exec mycmd {} \;

等价语句

Get-ChildItem -Filter '*.html' -Recurse | Foreach-Object { mycmd $_.fullname }

根据CUE分割音乐的软件

2011-10-09T20:26:00.000+08:00

Medieval CUE Splitter：http://www.medieval.it/cuesplitter-pc/menu-id-71.html

还不错。

MySQL: 修改列的取值类型

2011-10-08T14:46:00.001+08:00

alter table t1 alter column testcol varchar(200) default '';

MySQL必知必会 chap 23-28

2011-10-08T14:40:00.001+08:00

存储过程可认为是一条或多条MySQL语句的集合

CREATE PROCEDURE testgetavg()

BEGIN

select avg(some_value) from sometable;

END

调用存储过程 call testgetavg();

CREATE PROCEDURE productpric ( OUT pl DECMAL (8,2) )

BEGIN

SELECT Min(prod_price) INTO pl FROM products;

END;

关键字OUT指定存储过程输出，IN　传入，INOUT　传入传出

查看存储过程：SHOW PROCEDURE STATUS;

MySQL游标只能用于存储过程

触发器是MySQL响应Delete/Insert/Update事件时自动执行的一条语句

事务处理，保留点提供回退，COMMIT/ROLLBACK/SAVEPOINT

字符集：字母和符号表示

编码：某个字符集成员内部表示

GRANT 授权　REVOKE取消授权

MySQL必知必会 chap 17-22

2011-10-08T14:39:00.001+08:00

用UNION组合多个select查询，默认会去掉重复行；用UNION ALL则会保留重复行

MyISAM引擎支持全文本查询，InnoDB不支持全文本查询

指定全文索引FULLTEXT(some_column)，不要在导入数据时使用FULLTEXT。在所有数据都导入完毕后，再添加FULLTEXT

全文搜索时，Match指定列，Against指定搜索表达式，默认不区分大小写：select node_text from products WHERE Match(note_text) Against('rabbit');

指定IN BOOLEAN MODE可以进行更细致的全文搜索，但性能较差

如果数据检索较为重要，可以指定INSERT LOW_PRIORITY INTO降低插入操作的优先级

将select结果写入另一张表：INSERT INTO table_a(column_a, column_b) SELECT column_a, column_b from table_b;

指定更新数据在某些行出错的时候也继续执行：UPDATE IGNORE sometable …

删除表中所有行　TRUNCATE TABLE sometable;

建表：

CREATE TABLE IF NOT EXISTS customers (

id int NOT NULL AUTO_INCREMENT,

name char(50) NOT NULL　DEFAULT 'test_name',

PRIMARY KEY (id)

) ENGINE=InnoDB;

每个表只允许一个AUTO_INCREMENT列，并且它必须被索引（成为主键）

几个引擎：

InnoDB　支持事务处理，不支持全文本搜索

MyISAM 不支持事务处理，支持全文本搜索

MEMORY 功能等同于MyISAM，但数据存在内存中（不在磁盘中），速度很快（特别适合临时表）

定义外键：ALTER TABLE sometable_a ADD CONSTRAINT sometable_a_column FOREIGN KEY (vend_id) REFERENCES vendors (vend_id);

重命名表 RENAME TABLE table_a TO table_b;

视图只包含使用时动态检索数据的查询，视图不能索引，也不能有关联的触发器或默认值

查看视图：SHOW CREATE VIEW someview;

建立视图：CREATE VIEW someview AS SELECT column_a,column_b FROM sometable;

视图一般用于检索，而不用于更新或删除

智能WEB算法

2011-10-08T14:37:00.001+08:00

Lucene 读取文档，分词，索引，搜索　＝》　其中，分词至关重要
PageRank 链接分析，认为用户更有可能点击他认为正确的搜索结果
基于用户相似度的推荐是可靠的，但用户量大时会比较低效
基于条目相似度数量级相对较小，较为可行
基于内容相似度有词法分析精度的问题
商用推荐系统的一个要求是，在不牺牲推荐质量的前提下具有进行实时推荐的能力
数据的特性决定了算法能否成功
聚类没有任何先验知识，因此是"无监督学习"
层次型聚类是在分组中识别分组
凝聚型聚类自底向上关联分组
高维度扩大了数据点所分布的空间，就很难判断出聚类的优劣；并且，在高维度空间中，任何数据集的数据点，无论用何种距离度量，数据点之间的差异都会变小

PHP 提示时间错误的问题

2011-10-08T14:35:00.001+08:00

apache的error_log提示：
[Thu Sep 29 11:12:14 2011] [error] [client xxx.xxx.xxx.xxx ] PHP Warning: date() [<a href='function.date'>function.date</a>]: It is not safe to rely on the system's timezone settings. You are *required* to use the date.timezone setting or the date_default_timezone_set() function. In case you used any of those methods and you are still getting this warning, you most likely misspelled the timezone identifier. We selected 'Asia/Chongqing' for 'CST/8.0/no DST' instead in /data/htdocs/xxx.php on line 19

在php.ini里指定timezone即可：
date.timezone = "PRC"

MySQL 必知必会 chap 1-16

2011-09-18T23:55:00.001+08:00

显示表的列：show columns from sometable; 或 describe sometable;

查看创建表的语句：show create table sometable;

限制查询返回的开始行和行数：select somecolumn from sometable limit 3 offest 5;

查询某个列取值在5和10之间的行：select somecolumn_a, somecolumn_b from sometable where somecolumn_b between 5 and 10;

查询某个列取值在某个集合内的行：select somecolumn_a, somecolumn_b from sometable where somecolumn_b in (3, 5, 7);

下划线匹配单个任意字符：select * from sometable where somecolumn like '_test';

尽量不要把通配符置于搜索模式的开始处

REGEXP正则匹配默认不区分大小写，要区分大小写，可使用BINARY关键字：select somecolumn_a from sometable where somecolumn_b REGEXP BINARY ‘abc .999’;

日期比较：select * from sometable where Date(somedate) between ‘2011-07-01’ and ‘2011-09-30’;

过滤分组：select cust_id count( * ) as orders from ordertable group by cust_id having count( * ) >= 2 ;

JavaScript 高级程序设计第2版 (Nicholas C.Zakas)

2011-09-12T23:20:00.001+08:00

如果将document.domain设置为wrox.com之后，就不能再将其设置回p2p.wrox.com，否则将会导致错误。

使用innerText/innerHTML/outerText/outerHTML替换子节点可能会导致浏览器的内存问题，尤其是在IE中。最好先手工移除被删除子树中的事件处理程序及javascript对象属性。

addEventListener，最好将事件处理程序添加到事件流的冒泡阶段，可以最大限度的兼容浏览器。

添加到页面上的事件处理程序数量将直接关系到页面的整体运行性能。

CSRF　未被授权的系统伪装自己，让服务器认为它是合法的，从而获取某个资源。可选的方案：1）SSL连接；2）每次请求均附验证码。无效的方案：1）用POST而非GET；2）检查来源URL；3）验证cookie。

如果某个域的资源并没有允许访问，javascript就不应该能够请求该域中的资源。js默认只能访问包含它的页面的同一个域下的资源。

跨域请求和响应中不应携带cookie，且要确保未经授权无法访问相应资源。

访问内部资源时用相对url，访问远程资源时用绝对url。

json解析很快，但是eval()比较危险，需要对传给eval的参数进行检查，避免恶意内容XSS的攻击。

同源策略：相同的域，相同的端口，相同的协议

cookie数据并非存储在一个安全环境中，其中包含的任何数据都可以被他人访问。

不要在客户端机器用javascript存储敏感数据，因为数据缓存并不加密。

避免创建多个全局变量和函数，使用命名空间。

最小化现场更新，即，最小化对用户的显示进行更新，可以使用文档碎片createDocumentFragment。

HTML跨文档消息传递，用于支持不同域名的文档通信；不允许对另一个文档的DOM和相关信息直接访问，但允许发送和接收包含数据的消息。

html的

2011-09-11T14:34:00.001+08:00

当html主体中有<body>时，<frameset>里<frame>指定的url浏览器是直接忽略的（不会建连接）。

也就是说，有<body>时，即使有<frameset>也不会生效，也就不用取这部分的<frame>了。

html5把frameset、frame去掉了。

参考：HTML <frameset> Tag

JavaScript 权威指南 chapter 12

2011-09-11T14:19:00.001+08:00

html解析器遇到script时，必须停止解析文档，等待script执行。如果script指定defer属性，表示这块script不生成任何文档输出，浏览器可以继续解析html文档，推迟执行script

脚本执行过程是浏览器进行HTML解析的一部分，如果一个脚本在<head>出现，那么该文档的<body>就还没有被定义，也就是说文档主体还没有被创建，脚本不能对它作操作

onload是当文档或框架被完全装载时调用的，onunload是在刚要卸载页面之前执行的(浏览器要显示新页面了)

reload()重新载入当前页面，replace()替换当前页面(history会失效)

如果一个frame设置了name，例如<frame name=”test_frame” src=”test.html”>，则兄弟框架可以用parent.test_frame引用之

document.write()动态生成文档

cookie的secure属性为真时，表示只有在https和安全协议连在一起时被传输

互联网广告、返利扫盲

2011-09-11T14:17:00.001+08:00

漫谈互联网广告盈利模式、CPS及返利业务

网站盈利模式分析:返利网站

JavaScript 权威指南 chapter 11

2011-08-03T23:54:00.001+08:00

function定义的函数使用词法作用域

var x = “global”;

function f() {

var x = “local”;

function g() { alert(x); }

g();

}

f();  //打印出local

Function() 创建的函数不使用词法作用域，而是当作顶级作用域编译

var y = “global”;

function constructFunction() {

var y = “local”;

return new Function(“return y”);

}

alert(constructFunction()());  //打出global

JavaScript 权威指南 chapter 1 - 10

2011-08-03T23:42:00.001+08:00

变量没有块级作用域，在函数中任意位置定义的变量，在整个函数体都可用

函数使用变量时，先从局部作用域开始找，然后才是全局作用域

typeof(null) 返回的是object，而不是undefined

void舍弃运算数的值，返回undefined

抛出异常 if(x<0) throw new Error(“x must not be negative”); 后javascript解释器会跳转到最近的异常处理器(一直往上找，如果没找到就作为错误处理)

try/catch/finally块，finally一定会执行，就算try中间要跳走，也要等finally执行了再说

object.property　这个属性名是标识符，静态对象硬编码，比较像C++中的静态对象

object[“property”] 这个属性名是字符串值，可以动态指定，相当于关联数组

slice函数返回指定数组的一个片段，splice函数用于插入或删除数组元素

search函数返回第一个匹配的位置

replace函数是正则替换

match函数是正则匹配

exec函数是每次调用执行一次匹配尝试，index往前走

test是尝试匹配一次，返回true/false

Learning Perl 6th

2011-07-11T01:09:00.002+08:00

正则式描述符：
/a 表示匹配ascii字符
/u 表示匹配unicode字符
/l 表示匹配本地字符
命名匹配： (?<name>\w+)
在正则式中复用之前的命名匹配：\g{name} 或 \k<name>
匹配完取内容：$+{name}

相对于given-when的默认smart match，也可以用以前正则匹配的dump match
在when的代码块末尾加continue，就会继续往下匹配，而不是默认的有个匹配后跳出given-when检查
获取外部命令输出的模块 IPC::System::Simple
执行指令挂掉检查，autodie配合Try::Tiny来用
每次取三个元素出来处理：

附录有介绍unicode

mdns协议

2011-07-04T22:29:00.003+08:00

参考：What Is the mDNS Protocol?

mdns适合快速小型组网，例如adhoc，wifi

可以认为是一个节点，加入网络时，发组播跟别的节点说：我叫啥，ip是啥

此时，同一无线局域网下的wifi节点无需专门的中转路由节点，可相互通信

HTTP : The Definitive Guide Chapter 11 - End

2011-06-28T00:09:00.001+08:00

包含用户状态信息的url称为fat url，最好别用

Content-Encoding 取 identity 表示没编码

Delta Encoding ：server只传更新的那部分内容给client，不用把全部内容往回传。client先发A-IM请求给server，server返回IM、Etag、Delta-base头信息，返回码226

Delta-base 表示与当前最新内容生成delta信息的源内容的Etag版本号

WCCP (web cache coordination protocol) 路由器重定向web流量到代理缓存

GRE(generic router encapsulation)：支持WCCP重定向HTTP数据包到一个特殊的server，IP头是到那个server的

Internet Cache Protocol (ICP)：问临近的cache是否有client请求的数据，邻居返回一个HIT或MISS的应答；用UDP通信，挨个问一圈，实在没有再自己去源server请求内容

Cache Array Routing Protocol(CARP)：对url做hash，一个cache server存一部分内容，每个cache server存的url各不相同；问题是，如果一个cache server挂掉，hash要打乱重来，消耗较大；

Hyper Text Caching Protocol (HTCP)：允许通过url、http request、http response头查询邻居是否有请求的数据；与ICP的差别在于request和response的详细程度

Hit Metering Protocol：扩展HTTP协议，在cache与server之间传递一些信息

几个代理相关的头Via/X-Cache/X-Forwarded-For/

APPENDIX B是HTTP状态码说明

APPENDIX E是BASE64是编码方案说明，比较简单，把8位bit合并，再拆分成6位一组，映射到一个字符表中；最后的生成的bit串长必须是24整数位(6和8的最小公倍数)，不足的部分用=号填充

HTTP : The Definitive Guide Chapter 5 - 10

2011-06-26T20:35:00.001+08:00

web server 处理并发连接的方式：

single thread
multiprocess and multithread
multiplex i/o
multiplexed multithread

几种proxy：

surrogate，或称reverse proxy、server acccelerator
transcoder，可以修改server给的response，比如原来给的是png，把它压缩成jpg传给用户
anonymizer，把用户个人标识、referer、email、cookie等涉及隐私的头部都去掉

怎么配置才能让用户用上代理：

client 指定代理服务器
路由设备监听请求，转移到代理，又称intercepting proxy
在用户使用的DNS SERVER上改IP
web server把用户重定向到proxy

客户端自动设代理的配置文件PAC

客户端自动配置代理的协议 WPAD，为客户端自动寻找可用的PAC file，支持好几种配置：

DHCP

SLP
DNS well-known hostnames
DNS SRV records
DNS service URIS in TXT records

HTTP TUNNEL：CONNECT 连外面的SSL，RESPONSE返回的时候，不用带Content-Type头，因为连接成功后，就开始传二进制流了

SSL TUNNEL：HTTP头套在SSL数据的外面

HTTP : The Definitive Guide Chapter 1 - 4

2011-06-20T21:53:00.002+08:00

Media Types：browser根据指定的MIME类型处理收到的数据
100 Continue : 收到request的一部分内容，client得继续交
101 Switching Protocols : server按client要求的换协议了
如果client没发entity，就不要发100-continue的Expect头给server
如果server没收到client的100-continue Expect头，就不能发100 Continue的状态码给client
如果中间节点收到的response包含Connection header，它会按Connection header的做，然后把Connection头删掉再传给用户
中间透明代理如果不看Connection:Keep-Alive就转发给server，就会导致server一直到超时都不关连接，同时client给proxy的keep-alive信息被proxy忽略。因此，代理绝对不能转发Connection头
Proxy-Connection头，绕过上述问题：如果代理不认识Proxy-Connection，就当传了一个未知头；如果中间代理支持Connection:keep-alive，就把Proxy-Connection换成Connection传给server
连接方式：

Parallel connection 同时起多个TCP连接，对内存/CPU要求高
Persisten connection 延长TCP连接使用时间，重用已有TCP连接发起新的HTTP请求，keep-alive；一次发一个request；server返回的内容要在length
Pipeline connection ：只有确认已经使用了持久连接，才能用pipeline；不需等前一个request的response返回，就可以发新的request

Keep-Alive: max=5,timeout=120 最多5个HTTP会话，120秒超时

HTTP Developer’s Handbook Chapter 17 - 25

2011-06-08T23:53:00.001+08:00

SSL 缓存，可复用之前协商过的对称密钥

TLS是IETF搞的，SSL是Netscape搞的

Secure HTTP request 包裹着正常的HTTP request

磁盘阵列介绍：RAID，最常用的是RAID5

XSS 尝试插入恶意代码，获取用户cookie；针对特定站点的信任

CSRF 伪造HTTP请求，利用已认证的用户身份绕过安全检查；针对特定用户的信任

CSRF比XSS更难防，一些考虑做法：

重点表单禁用GET请求
POST请求的结果会更容易看到，因为POST返回的内容是for parent resource，而非an embedded one
表单加上随机数，在server端校验

SOAP服务，指定SOAPAction，通过POST方式发出请求，远程执行完毕后返回格式化的xml内容

WebDAV服务，例如svn/cvs

P3P 用户设置哪些隐私可以被收集，相关参考资料：《P3P Web隐私》

HTTP Developer’s Handbook Chapter 15 - 16

2011-06-08T00:00:00.002+08:00

缓存协议：

Internet Cache Protocol (ICP)：最流行的，squid也用它；轻量级的，HIT/MISS两状态，用UDP通信
Cache Digest Protocol ：通过内容的摘要比对确定是否要更新缓存；用TCP通信，摘要可通过http链接获取
Cache Array Resolution Protocol：多个代理逻辑上并做一个代理；通过url和缓存id标识；有负载不均衡的问题；新添一个proxy，整个hash表要重算
Web Cache Coordination Protocol：解析http request头，重定向到cache proxy；适合做透明代理；直接从底层看端口转流量

负载均衡，是否总是由同一个server服务同一个特殊的client？
《Server Load Balancing》 by Tony Bourke

HTTP Developer’s Handbook Chapter 9 - 14

2011-06-07T23:16:00.003+08:00

url用iso-8859-1编码
ascii字符表：http://www.asciitable.com
Content-Disposition 如果想下载，指定attachment；如果想嵌入，例如流媒体，指定inline
session 除了保持用户的认证状态之外，还保持一些与应用相关的数据
server给的Set-Cookie一些属性不会再由client从Cookie提交回去(只提交name<->value对)，这些属性只是用于browser决定何时该提交cookie
用户数据放在server比在网络中传来传去安全多了
cookie之类的状态管理机制的唯一用途在于标识客户端，不用于用户认证，或传用户数据
默认提交的表单参数写成hidden型的表单参数提交，不要放在表单url里
还有一种方案是在url里带上unique identifier
尽量不要把关键数据放在用户侧
缓存需注意避免三个问题：1) 用户获取过期的数据；2) 把别的用户数据发给当前用户；3) 敏感信息被缓存
Cache-Control 的取值：

public 可以任意缓存
private 可以缓存，但不是公共缓存
no-transform 可以缓存，但不能改内容
must-revalidate 过期后缓存总是要重新验证
proxy-revalidate 除了代理之外，过期都要重新验证
max-age 可以把当前缓存send给用户的时间区间
s-maxage 与max-age相同，但private-cache会忽略这个
cache-extension 非明确指定通用的；proxy可以忽略这个

GET发请求时，加上If-Modified-Since，如果没更新，Server返回304 Not Modified，可以省流量
返回的Content-Range: 600-900/1234 表示总共有1024字节，当前按请求仅返回600-900字节的内容，Content-Type为multi-part/byteranges
部分请求成功返回码为206 Partial Content，失败为416 Requested Range Not Satisfiable

HTTP Developer’s Handbook Chapter 7 General Headers

2011-06-07T20:42:00.001+08:00

Cache-Control

no-cache 不是不让缓存，只是在给用户缓存内容前先检查下；如果指定no-cache=”Set-Cookie”这种，则是指定缓存中不保留的部分
no-store 不做缓存 (IE直接无视此信息)
max-stale 缓存系统不经检查直接返回内容给用户的最大时间
min-fresh 缓存系统只能返回过期时间比min-fresh长的资源给用户
no-transform 不修改内容
only-if-cached 缓存系统不能去找原始服务器，但还是要给用户返回缓存；一般是缓存系统与原始服务器通信有问题

Connection : 指定是否持久连接Keep-Alive/Close，HTTP/1.1默认是持久连接，HTTP/1.0默认是非持久连接；也可以设成Upgrade

Pragma 是HTTP/1.0用于控制cache的，现在就一个用法，Pragma: no-cache跟人家说不要缓存

Trailer 在content之后还可以带HTTP headers，只在Transfer-Encoding: chunked的时候可用

Transfer-Encoding 持久连接的时候，不知道啥时候内容传完，所以要指定chunked传输

Warning 经常用于跟client说缓存出了什么问题

Win7 : 安装SP1提示系统缺少必备的组件

2011-06-05T16:33:00.001+08:00

解决见：win7sp1补丁包无法安装

把 FileRepository 里缺的文件补上，就能装了。

从去年买了笔记本就一直用的预装的系统，升级程序说缺了组件吧，还不说到底缺啥，鬼才知道它缺了啥，受不了。

从11:00拆腾到16:30，按微软官网的帮助搞来搞去，下啥KB947821查查查，下独立安装包试试试，再下iso准备刻盘。。。

服了我自己了，土啊！早点上百度知道、搜搜问问还快一点。

HTTP Developer’s Handbook Chapter 6 Response Headers

2011-06-04T19:16:00.001+08:00

Accept-Ranges 是否支持分段请求

Age 现在返回的内容已经从原始server拿过来多久了；代理算的时候会加上传输时间

Content-Disposition 经常用做指定建议网页另存为的文件名

Etag 资源版本

Location 必须是绝对路径

Vary 中间代理不能修改的头信息；例如Accept-Language，同一网址，有不同语言版本

HTTP Developer’s Handbook Chapter 6 - 状态码

2011-06-04T16:49:00.001+08:00

HTTP/1.1 默认是持久连接，如果client在request加上Connection: close，那么，server可以在发完response后关掉连接

状态码：

信息100-199 ：HTTP/1.1才开始用

100 Continue 客户端收到真正内容之前，server给个反馈

成功200-299：

203 Non-Authoritative Information 表示有数据，但不是之前设想的来源提供的数据
204 No Content 返回内容为空，不用刷新document view
205 Reset Content 需要刷新document view
206 Partial Content 返回请求的部分内容，与request的Range头对应

重定向300-399：经常要带上Location指定资源的新位置

300 Multiple Choise 没法提供请求的资源，但可以在response content或Location头中给出建议的资源
301 Moved Permanently 永久转向
302 Found 临时转向；事实上客户端看到302咋会操作之前没有规定，由客户端自定；一般来说，不论之前资源请求方式是不是GET，在转向之后Location指定的新资源默认用GET取
303 See Other 跟302一样是临时转向，只是显式指定Location指定的新资源要用GET方式取
304 Not Modified 资源从某个时间点开始就没被改过，返回的content为空；与request的If-Modified-Since对应；一般还会带上个Date头，有时还有ETag和Content-Location头；而且由于这个经常是给proxy回的，还会出现Expires、Cache-Control、Vary头等等
305 Use Proxy 要求用代理取，Location中给出指定代理的地址；注意，只有当前请求的这个资源是指定要用这个代理取
307 Temporary Redirect 跟302一样是临时转向，只是取Location指定的新资源时采用跟原始请求相同的method

client错误400-499：

400 Bad Request 请求格式错误，比如少提交了Host之类
401 Unauthorized 请求一个保护资源时，会先给个401，同时带上WWW-Authenticate的头，用户输入正确的认证的信息之后，浏览器一般会自动接下去请求内容
402 Payment Required 要求付费？实际上基本没出现过
403 Forbidden 没有权限请求该内容；不想被黑客盯上也可以直接返回404
404 Not Found 资源不存在
405 Method Not Allowed 不支持该请求指定的method
406 Not Acceptable 没法满足request中指定的Accept条件
407 Proxy Authentication Required 代理跟client说要求认证，带上个Proxy-Authenticate头
408 Request Timeout 请求超时。例如server需要接到第2个request才给内容，但是client之前指定了Connection: close直接断连接了，然后就超时
409 Conflict 冲突，比如client刚请求了某个版本的资源，资源版本又更新了。
410 Gone 不再存在了
411 Length Required
412 Precondition Failed 不满足If-Match之类指定的条件
413 Request Entity Too Large
414 Request-URI Too Long
415 Unsupported Media Type
416 Requested Range Not Satisfiable
417 Expectation Failed 不满足请求指定的Expect条件

server错误500-599：

500 Internal Server Error 不知道cgi出啥错了
501 Not Implemented 服务器不支持该请求指定的method
502 Bad Gateway 代理收到invalid reponse的时候，会返回502给client
503 Service Unavailable 服务器暂时没法处理请求，一般会给个Retry-After跟client说啥时候再来请求
504 Gateway Timeout 代理等server的应答等超时了，会返回504给客户端
505 HTTP Version Not Supported

chm转pdf 的软件: abc amber chm converter

2011-06-04T15:04:00.001+08:00

转的很快，效果也不错，试用版会在上头打个Trial Version的横条说明，我觉得无所谓啦。

下载：abc amber chm converter

HTTP Developer’s Handbook Chapter 1 - 5

2011-06-04T15:03:00.001+08:00

http 是无状态协议，一个请求不需要其他请求的信息

头部信息有３种：

General headers : 请求和应答都能有的
Request headers：只有请求时才有的
Entity headers：与content相关的

请求类型：

GET：url有限制，一般不超过1024字符；一般没有content，所以也就没有entity headers
POST：支持提交大量数据；有一些entity headers说明content的信息，比如post提交的content的长度Content-Length，类型Content-Type
TRACE：过一个代理会加一个Via头，就可以看出是经过哪些代理
OPTIONS：获取一些Web Server的支持信息
CONNECT：中转server向目标服务器发connect请求，但不解释HTTP头，只是透明转发。最常用的就是，客户端通过代理请求某个https资源

Max-Forwards的request header如果置0，则代理必须自己进行应答。要是这时请求类型是OPTIONS，代理还是得自己答

Server发出Set-Cookie的应答后，并不知道browser有没有存cookie；除非browser再发一个请求过来。

HTTP 1.1 要求每个请求都有Host头

If-Match是请求时指定一些，要求返回的内容的ETag能满足的条件。例如ETag用作缓存版本号，这个时候指定If-Match作用就跟If-Unmodified-Since很像

If-Modified-Since可以用于中间proxy给server请求内容，要是有更新，server就缓回带Last-Modified信息的新内容，否则就返回304给proxy

图5.7/5.8给出了TRACE请求指定Max-Forwards时的例子，可用于测试。Max-Forwards只有在TRACE/OPTIONS请求时不能被忽略

Range 指定请求某一部分的内容，比如只取前500字节，就可以写成0-499

TE表示传输数据采用的编码方案，当server无法确定返回内容长度时，就没有Content-Length头，而是在TE头指定chunked

gzip 与 deflate 的资料：使用 gzip 或 deflate 压缩网页内容，与 deflate,说的还不错的文章

Head First SQL

2011-06-01T22:47:00.001+08:00

指定某个列默认值建表： test_column varchar(100) NOT NULL DEFAULT ‘’

_ 指定单个任意字符查询：select * from test_table where test_column like ‘_ttt’;

坚持到200页，实在撑不住了，图太多，看的眼花，放弃了。

DNS and BIND Cookbook

2011-05-31T22:24:00.001+08:00

几个注册局：APNIC/ARIN/RIPE

rr的顺序：[owner] [TTL] [class] <type> <RDATA>

2.6 注意不能直接在zone下直接配CNAME，否则就表示除了CNAME没别的rr，导致不可用

2.18 讲泛域名生效的情况，注意看下

批量指定rr配置：$GENERATE 11-20 $.0.168.192.in-addr.arpa. PTR dhcp-$.foo.example.

Modern Perl

2011-05-14T20:20:00.001+08:00

The Empty List

my $count = () = get_all_clown_hats(); #$count表示get_all_clown_hats()返回的数组大小

Iteration and Aliasing

$_ **= 2 for @nums; #把@nums里面的值都换成原来的平方

Hash::Util可以锁定hash值

正则匹配的\G，记住上回匹配的位置

while ($contents =~ /\G(\w{3})(\w{3})(\w{4})/g)
{
push @numbers, "($1) $2-$3";
}

smart match ~~ 详情见 perldoc perlsyn

use Try::Tiny;
my $fh = try { open_log_file( 'monkeytown.log' ) }
catch { ... };

use autodie;

use Carp;

Path::Class

DNS in Action : chapter 4–chapter 10

2011-05-02T23:18:00.001+08:00

介绍常见的几种RR：A/CNAME/NS……

此书作者认为泛域名容易出错，最好别用，除非用作MX、SRV。(PS：个人十分di赞同)

介绍BIND配置

介绍The BIND 9 lightweight resolver library ，简称lwres

一些DNS排障的工具，rfc1713

dnswalk检查DNS配置错误

NS记录的内容必须是一个域名，而不是一个IP

PTR、MX、NS、CNAME记录的内容不能是别名

6.1，6.2 讲子域授权，glue record，非常清楚！

chapter 7 讲IP反查的配置

chapter 8 讲管域名，IP的组织

chapter 9 讲内网DNS配置

chapter 10 讲内外网配置＋防火墙

DNS in Action : chapter 3

2011-05-02T22:03:00.001+08:00

DNS update：rfc3007

可以动态更新域名配置；但只能修改已有的域名配置，不能新增一个域
只能在primary master server上修改

DNS Notify

AXFR & IXFR

Negative Cache：rfc2308

NXDOMAIN 域名不存在[必须缓存，缓存时间不能超过5min]：返回RCODE为NXDOMAIN
NOERROR_NODATA 域名存在，但没有配该类型的RR[必须缓存，缓存时间不能超过5min]：返回RCODE为NOERROR，answer section无内容，authoritative section包含SOA、NS记录
服务器查询失败[可缓存]：返回RCODE为SERVFAIL，原因是zone file配置错误，或问不到master server
服务器不可达[可缓存]

否定缓存的规则：

否定缓存是肯定要di
非权威的否定应答不缓存
应答里给的权威soa记录也要缓存
没带SOA的否定应答不缓存
已保存的SOA记录得加到应答里面
NXDOMAIN的应答是以QNAME、QCLASS存的
NOERROR_NODATA的应答是以QNAME、QTYPE、QCLASS存的
master file里必须指定$TTL

支持IPV6的DNS，介绍A6、DNAME

DNSSEC，介绍KEY，SIG，NXT

DNS头部的保留字中切出AC（Authenticated Data）、CD（Checking Disabled）

介绍TSIG，TKEY

DNS in Action : chapter 2

2011-05-02T21:21:00.001+08:00

NXT RR：下一个域名；认证一个不存在的域名及type

介绍DNS数据包格式，讲的很清楚

有查询&应答的数据包分析，可以看下

DNS in Action : chapter 1

2011-05-02T21:15:00.001+08:00

windows注册表配置DNS：HKEY_LOCAL_MACHINE/SYSTEM/CurrentControlSet/Services/Dnscache/Parameters

stealth name server：不对外公布的权威server，用于帮助zone file传输、备份

dns查询示例图：

master与slave示例图：

forwarder dns示例图：

Pro DNS and Bind : Chapter 12 - Chapter 15

2011-05-02T20:45:00.002+08:00

Chapter 12： Bind 配置说明，好长……
Chapter 13：zone file的说明，各种类型RR的详细介绍
Chapter 14：bind库函数、resolver的库函数
Chapter 15：DNS数据包结构

Pro DNS and Bind : Chapter 11

2011-05-02T20:42:00.001+08:00

DNSSEC rfc 4033,4034,4035 提供认证、完整性机制

DNSKEY RR 指定公钥

子域授权的NS，用DNSSEC认证，称为Delegated Signer RR (DS RR)

域认证的两种密钥：Zone Signing Key (ZSK)、Key Signing Key(KSK)

更新DS或name server的trusted anchor，都用KSK。更新RRSIG、DNSKEY可用KSK/ZSK

DNSSEC Lookaside Validation(DLV)是另一种链式认证方案，在父域zone file内可以不签名

Pro DNS and Bind : Chapter 10

2011-05-01T05:22:00.001+08:00

DNS 安全概览，每一步都可能出问题，orz…

TSIG：对称密钥，zone transfer加密传输，rfc 2845

SIG(0)：公钥认证，身份认证，加数据完整性，dynamic update时可以用，zone transfer时也可以用，rfc 2931

TKEY：交换对称密钥用的，支持Diffie-Hellman，gssapi(generic security services api)；rfc 2930要求用tsig、sig认证一下

Dynamic DNS(DDNS) ：RFC 3007, RFC 2136

Pro DNS and Bind : Chapter 9

2011-05-01T04:31:00.001+08:00

nslookup、dig的用法

dns包状态：

qr(query response) 这是个应答
aa(authorative answer)应答来自权威
rd(recursion desired) 要求递归查询
ra(recursion available) 支持递归查询
ad(authenticated data)应答来自一个可信的name server，且数据已被认证(dnssec)
cd(check disabled) 不想做任何验证(dnssec)
do(dnssec ok) 支持dnssec

DNS server状态，RCODE

NOERR 正常
FORMERR 无法识别该查询
SERVFAIL 无法执行查询（可能是NAME SERVER本身的问题，也可能是网络问题，总之就是查询失败）
NXDOMAIN 不存在此域名
REFUSED 拒绝
YXDOMAIN 域名不该存在，但它存在了（RFC 2136）
YXRRSET rrset不该存在，但它存在了（RFC 2136）
NXRRSET rrset应该存在，但它不存在（RFC 2136）
NOTAUTH server不是该域的权威（RFC 2136）
NOTZONE name不包含在该域内（RFC 2136）

rndc远程管理bind，默认 tcp 953，要求 tsig加密

nsupdate 动态更新mater server的zone file

Pro DNS and Bind : Chapter 6 – Chapter 8

2011-05-01T04:03:00.001+08:00

chapter 6 bind 安装

chapter 7 bind 配置

chapter 8 高级bind配置

example.com中切出一个子域us.example.com，则在example.com中要指定us.example.com的NS：

假设为ns3.us.example.com(在example.com内)，则example.com的zone file中必须配上ns3.us.example.com的A记录或AAAA记录，这个称为glue record；不然查起来会无限循环
假设为ns1.example.net(不在example.com内)，则example.com的zone file中，就不用配ns1.example.net的A记录或AAAA记录了，反正另外再去查一下IP就有了

优先选权值低的MX记录发邮件，低的发不了，才试高的；如果权值相同，一般就用round-robin负载均衡

一个RR SET里多个RR返回的顺序用rrset-order选项调

如果该域配置了泛域名(wildcards)，那么对不存在配置的域名会返回默认配置的RR，而不是返回NXDOMAIN。

注意，泛域名配置只对授权域有效；如果有子域已经切割出去，当前域的泛域名配置不会对该子域内的任何域名生效，详见RFC 1034。

Pro DNS and Bind : Chapter 5

2011-05-01T03:22:00.001+08:00

ip地址分配: ICANN/IANA –> RIR –> NIR –> LIR –> END USER

IPV6 地址: global routing prefix (48 bit) + subnet id (16 bit) + interface id (64 bit)

global routing prefix : 保留位 (3 bit) + TLA id (13 bit) + sub-tla (13 bit) + nla (19 bit)

TLA ID、sub-tla 是IANA给RIR(例如APNIC之类)分配的

nla 是RIR给下一层组织分配的，例如NIR、LIR

AAAA用于正向查询，IP6.ARPA地址段用于PTR反向查IPV6地址；A6用于正向查询，DNAME用于反向查询；未来用A6 + DNAME

AAAA形式的反向查询链太长了

Pro DNS and Bind : Chapter 4

2011-05-01T03:03:00.002+08:00

slave server : 总是返回该server上的域的权威回答
cache server ：只有从master / slave server 刚刚问过来的回答才置为authoritative，从缓存搞出来的就标为no authoritative
如果一个server支持cache，那么它就必须支持recursive qurey
本地只用于cache的local dns，一般是用于向PC端的stub resolver提供应答，有时也称为proxy server，forwarding server；总是把请求转发给其他dns，自己把应答缓存起来
Stealth Name Server(或DMZ name server、split name server)，不让外界看到的name server，bind的view配置可以支持这种场景，区分内网外网配置

Pro DNS and Bind : Chapter 3

2011-05-01T02:23:00.001+08:00

BIND 根据 RTT 选择查询的NAME SERVER，还会参考ROUND ROBIN

stub resolver 是不支持迭代查询的；也就是说，PC上配的name server要支持递归查询，不然本机的resovler碰到迭代的应答就傻掉了

.IN-ADDR.ARPA 域用于IP反查域名

PTR的配置文件中，RR取值必须为FQDN，以 . 结尾

邮箱服务的MX域名得配对应的PTR，让一些邮箱软件反查

.ARPA是ICANN/IANA在管（划IP段）；分到各个州就是RIR( Regional Internet Registries)，例如APNIC；再分到LIR(Local Internet Registry)或NIR(National Internet Registry)，各国运营商再各自划段

域配置的全量传送AXFR (tcp 53)，增量传送IXFR(tcp 53)，更新通知NOTIFY

slave收到NOTIFY的通知，会去问master的SOA，如果SOA的serial number比当前的记录大，就会发起AXFR或IXFR请求

DDNS(Dynamic DNS) 允许在server执行时从外界动态更新域的RR配置；不过没法添加或删除一个域。

一般外界更新域配置的时候，会加个密啥的，最常用的就是TSIG(RFC 2845)/TKEY(RFC 2930)，bind里的nsupdate就是ddns工具

如果域配置用数据库存取，就可以动态添加或删除一个域了，相关软件：BIND-DLZ、PowerDNS

DNS安全：

zone file本身的安全

动态更新：限源IP，加密&认证 TSIS SIG(0)

zone transfer：限源IP，加密&认证 TSIS SIG(0)

查询：缓存中毒，数据篡改 => DNSSEC

本地resolver查询：缓存中毒，数据篡改，本地IP欺骗 => DNSSEC，SSL/TLS(用于resolver到local dns)

Pro DNS and BIND : chapter 2

2011-04-28T00:05:00.001+08:00

RFC 1912 推荐 ZONE FILE里 $TTL > 1day ，一般默认是2天

@ 表示默认域名串，即 $ORIGIN

NS、MX记录的取值必须是个FQDN，也就是最后有一个点

如果example.com.的一个ns记录是外部域名ns2.example.net.，那么ns2.example.net.上必须有example.com.的zone file，或者是example.com.的slave server。如果没有，就会出错，lame delegation，也就是说，NS记录被配置到无法给出权威回答的server。

多层CNAME不大好

如果一个域名是MX或NS指定的域名，就不要再配CNAME了，直接配A记录，RFC1034说的

反垃圾邮件的SPF会用TXT记录登记信息

Pro DNS and BIND ：CHAPTER 1

2011-04-27T23:41:00.001+08:00

RFC基础定义：1034，1035

根 -> 顶级域TLD -> 二级域SLD

gTLD : .COM , .EDU, .NET 之类，通用

ccTLD: .US, .CN之类，国家

ICANN管根，将gTLD分给一些注册局registry管，将ccTLD分给各国管

有些注册局同时也是注册商registrar，例如verisign管.com，同时也给人提供域名注册服务

TLD的server配置由注册局管理，注册商可以向注册局申请修改记录

stub resolver : 一般是指操作系统内置的解析器

glue recode ：指向下一级NS的记录，一般是NS域名对应的A记录

dns server软件：bind，nsd，。。。

LG GT540 : android 2.1 刷机升级至 android 2.2

2011-04-10T02:15:00.001+08:00

参考：

主要步骤如下：

下载带fastboot的android 2.1 kdz : v20c_00.kdz
下载升级kdz的工具：test-version-upTest_EX
下载android的fastboot驱动：LG Android Fastboot Driver
下载fastboot工具：Fastboot工具包.rar
下载android 2.2的img：superfast-froyo-fastboot
解压test-version-upTest_EX，管理员权限执行windows_enabler中的exe，左键点击其状态栏图标，等待出现"on"字样；管理员权限执行UpTestEX_original.exe，选中v20c_00.kdz，点击upgrade按纽升级
升级完毕后关机
按开机键，震动后长按相机键，出现LG的LOGO后，进入黑屏背光的fastboot模式
用usb线连接手机和电脑，在设备管理器中找到无驱动的android设备，选择安装LG Android Fastboot Driver的驱动(指定解压后文件夹安装)
解压Fastboot工具包.rar、及superfast-froyo-fastboot ，让fastboot.exe与boot.img、system.img在同一文件夹下
cmd命令行窗口进入fastboot.exe所在的文件夹，依次执行：

fastboot.exe -w
fastboot.exe flash system system.img
fastboot.exe flash boot boot.img
fastboot.exe reboot

重启后机器就是android 2.2版了

PostgreSQL : 在windows下的安装配置

2011-03-13T16:20:00.001+08:00

1、安装

下载安装包，语言要选"简体中文，新加坡"的，不然后面服务安装会失败。

2、配置

切换用户：runas /noprofile /env /user:postgres "cmd"

进入命令界面：psql

建数据库：create database mydb;

建新用户：create user someuser password 'somepassword';

授权：

GRANT ALL PRIVILEGES ON database somedb TO someadmin;

REVOKE ALL PRIVILEGES ON somedb from someadmin;

GRANT select ON somedb.sometable TO someuser;

3、其他

备份数据库：pq_dump somedb > somedb.dump

恢复数据库：psql -d somedb -f somedb.dump

ThinkPad T410 : 电池电量低的问题(FRU 42T4797)

2011-02-21T23:40:00.002+08:00

过年的时候发现电池只能撑半小时，之前是可以撑两小时的。
周末终于想起来查一下，先照网上说的重置电源标尺，没效果。
google发现可以升级firmware解决：ThinkPad Battery Firmware Update for Windows to fix a low battery capacity problem - ThinkPad (Full version)
照上面的贴子，按顺序装：

把firmware升级之后，FRU变成42T4911，关机重启之后，电池就恢复正常了。

论坛贴子下载

2011-02-19T16:38:00.001+08:00

见：tiezi-0.1.zip

目前支持Discuz。

想起搞这个的原因是CJJ挂了一阵子，昨晚突然好了，怕是论坛回光返照，还是简单备份一下吧。

输入法 : 换用极点郑码了

2011-02-02T22:07:00.001+08:00

一年一度发愤图强学郑码的时候又到了。

从文泉郑码换到极点郑码。

Firefox Greasemonkey：显示绿晋江小说平均积分的脚本换到userscripts上了

2011-02-02T15:06:00.000+08:00

反正也是Greasemonkey的脚本，懒得打包成firefox扩展了。

原来在这：Jjwxc-Point-Per-Word

现在搬到这：jjwxc-point-per-word

系统加速 : SpeedUpMyPC

2011-01-22T03:32:00.001+08:00

windows系统的永恒主题：系统加速。。。

这回是SpeedUpMyPC，试用了一下，还行。

免费注册地址：http://mag.uniblue.com/stores/sp/signup

Windows Sysinternals 的小工具

2011-01-22T03:29:00.001+08:00

微软自己搞了个Windows Sysinternals 系统实用工具集合，有些挺好用的：

Whois

查whois信息。

RegJump

直接命令行输入 regjump xxxxx，就能跳到xxxxx注册表处。

果然微软自己也受不了一层一层又一层的键值嘛！

彻底卸载Office的工具

2011-01-22T03:18:00.001+08:00

微软自己出的：http://support.microsoft.com/kb/290301/zh-cn

要升级office之前，先到这边下工具彻底卸载掉旧版本，否则可能碰到新版office安装失败。

Perl : 一些笔记

2011-01-02T22:11:00.000+08:00

读入文件时，如果指定$/，则$/必须是字符串；如果要用正则式分隔，就用File::Stream。

例子：用Win32::TieRegistry读出windows已安装软件的列表

Perl的MVC框架介绍：What is the Perl Web Framework du jour? 看来可以试试Mojolicious::Lite、Mojolicious、Jifty 、Dancer

PerlChina的Advent：http://advent.perlchina.org/

pm.org的Advent：http://perladvent.pm.org

cpanm ：替代cpan的模块工具，非常好用

snaked 任务调度器：类似crontab，但时间可以精确到秒

SSH::Batch ：远程SSH批量操作

Set::Array ：数组操作模块

XLSperl：命令行操作xls文件

Benchmark::Timer ：程序运行时间

Text::Xslate ：类似Text::Template的模块，速度很快

CodeIgniter ：学习笔记

2011-01-02T20:09:00.000+08:00

CodeIgniter是个PHP的MVC框架，基础资料：

CodeIgniter 入门(照这个帖子做一遍，有个简单认识)
CodeIgniter 用户指南
CodeIgniter 搜索引擎
30+ Awesome CodeIgniter Tutorials for all Skill Levels

查询结果分页显示的教程：

在分页的url中，增加了index/50之类的参数，参数可以有多层。

每次根据分页url中的参数，载入查询函数，取回当前分页对应的内容显示。例如 someQueryFunction(记录偏移量, 每页显示多少行内容, 该分页查询的条件参数列表)。

读取CSV文件的库：

见CSVReader ，把内容保存为csvreader.php(注意文件名都是小写)，放入systerm\libraries目录。
用$this->load->library('csvreader');载入库函数，后面就可以直接调用了。

CodeIgniter + Mysql : 中文表单乱码问题

2011-01-02T19:35:00.001+08:00

上周用CodeIgniter搞了2个简单的前台页面，发现表单传中文内容正常，往Mysql的表里写的时候总是乱码。

折腾了一阵，总算搞定，参考资料如下：

配置说明：

mysql编码配置：

mysql建表命令：

   create table sometable (
   id int unsigned,
   user varchar(30),
   test text);

CodeIgniter的system\application\config\config.php中设置：

CodeIgniter的system\application\config\database.php设置：

使用说明：

php文件的编码是gb2312，用 $this->db->insert($table, $data); 往表里插数据是正常的gb2312编码。
perl脚本的编码是gb2312，用DBI连接数据库时不用显式指定编码，可直接取回表中gb2312编码的内容。

DBIx::Class introduction - 2010

2010-12-20T13:02:00.002+08:00

DBIx::Class introduction - 2010

View more presentations from leo lapworth.

笔记 : sed

2010-12-06T22:32:00.000+08:00

sed -e "= ; p" 打印行号，然后打印内容

sed -e '/^abc/ { n; /^$/d }' file.txt 删除以abc开头的行下面的一个空行

sed '100q' file.txt 到第100行的时候退出

Linux : 一些笔记

2010-12-06T22:12:00.000+08:00

find . -name '*.log' -print 0 | xargs -0 rm -rf

sort -t 分隔符，-u 去掉重复项

wc -l !!:$ 上一条命令的最后一个参数

vi !^ 上一条命令的第一个参数

ls -l !cp:2 上一条cp命令的第二个参数

sar 查看系统信息

修改内核参数：vi /etc/sysctl.conf ; sysctl -p

笔记 : Automating System Perl

2010-12-06T21:55:00.000+08:00

Perl6::Form、File::Temp、Path::Class、Text::Wrap

Filesys::Df 查看剩余空间

User::pwent、DBM::Deep、Term::Prompt、Proc::ProcessTable

netstat -ano

tcpvcon -anc

有个用IO::Socket发DNS请求和解析DNS应答的例子

Config::Scoped、XML::Simple(很简单)、XML::LibXML(很快)

XML::SAX 适用于体积较大的XML

XML::Twig 适用于大容量数据的一个小子集

XML::Rules、XML::Compile

Config::YAML、Config::Context、Config::Auto

Mail::Sender、Mail::Sendmail、Mail::Mailer、Email::Sender、Email::Simple

Email::Simple::Creator、Email::MIME::Creator

Text::Match::FastAlternatives

Net::Whois::Raw、Net::Whois

Logfile::Rotate、File::Tail、Parse::Syslog

Regexp::Log::DateRange、Regexp::Log::Common

Log::Statistics、Logfile、Log::Dispatch、Log4Perl

Algorithm::Accounting

lstat与stat的差别：lstat返回symbolic link本身的信息，stat返回symbolic link指向的目标文件信息

Net::Pcap、Sinffer::HTTP、NetPacket::IP、NetPacket::TCP

Net::PcapUtils、Net::Pcap::Easy、Term::Prompt

Nmap::Scanner、Text::Autoformat、Text::Beautify

Array::PrintCols、TextFormatTAble、Text::BarGraph

Text::More、Test::Harness

Net::ADNS、EV::ADNS

Network : 路由查找算法笔记

2010-12-06T21:38:00.000+08:00

路由查找 -> 报文转发速度 -> 路由器性能

路由查找算法的几个指标：

查找速度：软件实现，查找过程中需要访问存储器的次数；转发速度，线速转发；报文丢失
存储容量：存储空间小的算法可在cache或on-chip SRAM提高运行速度
路由波动更新速度：
- 静态算法：完全重构，预处理速度？
- 动态算法：在原有基础上做更新
实现的灵活性：软硬件均可实现
可扩展性：支持IPv6？

路由查找算法测试：

Internet地址前缀分布(IPMA项目提供Internet五大骨干路由器中路由表的实时统计数据)

目的地址序列

一些查找算法：

hash链式表查找：表项少，查找快
动态前缀树查找：表项增多时，查找性能差不多，整体较慢
RAM快速查找：查找很快，算法使用的存储空间较大，适用于高速骨干路由器，高速转发

牺牲更新速度，换更快的查找速度？

骨干网使用MPLS

区别服务、策略路由支持？

最长前缀匹配不同于完全匹配，许多适用于完全匹配的算法，例如散列表，不适于最长前缀匹配。

基于树？

基于硬件？

内容可寻址存储器CAM，给出内容->返回地址

缓存CACHE，给出数据地址->返回内容

CAM在一个时钟周期内完全查找，O(1)完成最长前缀查找。

增加用于存放路由表的RAM用量=>提高查找速度

针对大量前缀 >8，<24 -> 算法优化

笔记 : Perl DBI

2010-12-06T21:37:00.000+08:00

Storable模块：nfreeze比freeze慢，但是保证可跨系统使用

Fcntl的flock

DB_FILE可以有三种存储形式 HASH、B树、RECNO（文本）

MLDBM 支持将复杂的数据结构写入文件

DBI的PrinterError对应warn，RaiseError对应die

错误消息：$DBI::errstr

quote函数自动转义引号

trace函数指定输出DB操作详情，debug用

dump_results打印执行结果，指定写入文件

bind_param_inout指定输出的参数写入到什么变量

bind_col

$sth->{NUM_OF_FIELDS}返回的列数

$sth->{NAME}->[$i-1] 第i列的名字

AutoCommit如果设为0，在执行一系列操作后，$dbh->commit(); if($@) { $dbh->rollback(); }，较稳妥。

ODBC标准化了错误码，支持更多函数操作

DBI PROXY : 转发client的query给db，把db返回的结果转给client，这样中转一下，unix机器就能访问windows access的数据库

Archlinux : 升级 libev 4.0 后 awesome 无法启动

2010-11-28T12:06:00.000+08:00

出错提示：awesome: error while loading shared libraries: libev.so.3: cannot open shared object file: No such file or directory

重新编译安装awesome即可：

yaourt -S aur/awesome

LG GT540 : 刷机升级到 android 2.1

2010-11-28T01:58:00.001+08:00

见：GT540 2.1升级教程，方便新手，再附上ROOT方法

按这张贴搞了两次才成功。

忘了备份原始数据了，升级之后啥东西都没了，悲催。。。

笔记 : SQL Cookbook

2010-11-21T17:09:00.003+08:00

连接字符串: concat

条件逻辑： select col_a, case when col_b<100 then 'small' else 'big' end as state from sometable

按某个字段的最后两个字符升序：select col_a,col_b from sometable order by substring(col_b, length(col_b)-2)

重叠结果输出：[SELECT SQL A] union all [SELECT SQL B]

union all不删重复项；union删重复项；除非必要，否则不要用union、distinct

从一个表中取数据导入另一个表：insert into table1(col_a, col_b) select (col_aa, col_bb) from table2 where colcc='somevalue'

出现三次以上部门：select col_a from sometable group by col_a having count(*)>=3

列出索引：show index from emp

正则：select data from sometable where data regexp '[^0-9]' = 0

将同一部门的人名合在一行显示：select dept, group_concat(name order by id, ',') from emp group by dept

滚动结果集，每页五行(limit 5)，显示第2页(offset 5)：select col_a from sometable order by col_a limit 5 offset 5

笔记 : Marstering Perl

2010-11-21T17:09:00.001+08:00

前向查找：(?=pattern) (?!pattern)

后向查找：(?<=pattern) (?<!pattern)

正则的debug：

脚本中 use re 'debug';

命令行 perl -Mre=debug script.pl

Regexp::Common 常用正则表达式

use Carp qw/carp croak cluck confess/;

cluck :打印堆栈后继续执行

confess:打印堆栈后停止执行

Hook::LexWrap 封装子程序，在子程序执行前后进行预定义代码

perl -d:SmallProf script.pl

DBI::Profile

perl -d:DProf script.pl

Devel::Profiler、Devel::Cover、Devel::Peek

Perl::Critic

临时修改某个库函数：*Some::Module::bar = sub { ... }

perl 命令行参数 -s ，简单置值(默认设为1)，例如：

perl -s script.pl -someval=abc -otherval

$someval="abc"、$otherval=1，二者为全局变量

ConfigReader::Simple、Config::Scoped、AppConfig

IO::Interactive

$! 操作系统或库函数调用得到的错误

$? 最近一次调用wait()得到的错误

$@ 最近一次调用eval()得到的错误

$^E 操作系统特有的错误信息

退出值：my $exit_value= $?>>8;

终止程序的信号值：my $signal=$?&127;

若子程序出现内核转储，则低字节第8位置1：my $core_dump = $?&128;

__LINE__ 当前所在行数

use Fatal; 作用是open失败时自动输出die错误信息

Log4perl

do 每次都重新解析文件，而require和use只解析一次文件。

如果找不到文件，$!；如果找到文件，但是无法读取或解析，$@

YAML、YAML::Tiny、YAML::Syck

Storable、Clone::Any

DBM::Deep

二进制数 my $value = ob 10; # $value=2

Devel::Size、Devel::Peek

vec 将一个字符串当成二进制位向量处理

Tie::Cycle、Tie::Hash::Word::Counter

创建一个模块的发布包：

$ Scriptdist Module.pm

$ make disttest

$ make tardist

一些笔记

2010-11-21T17:08:00.001+08:00

smurf 攻击：攻击源向一堆机器发源伪造的icmp包，导致一堆机器向受害机器回复ICMP包，最终受害机器挂掉。

ssl依赖于客户端信任服务器证书的程度，如果客户端信任一个伪造的证书，那么安全也无法保证。

setuid 临时提升普通用户权限

sticky bit : 用户对目录具有写权限时，能增加文件，不能删除文件

修改mac地址：ifconfig eth0 hw ether [MAC]

traceroute 中间有些跳是 ***，没有显示IP地址，原因是这些跳没有响应ICMP超时消息。如果从某一跳开始，后续所有跳都是***，有可能是带***的第一跳试图过滤返回该源IP的ICMP超时消息。

lsof -i 列出所有使用中的tcp/udp端口

tcpdump 参数：-nn 禁止协议查找；-c 捕获包数

交换机通过CAM(内容可寻址)存储器来保存和维护ARP缓存

arp 毒化：arp -s <受害者IP> <自身MAC> pub

混杂模式网卡: ifconfig 显示 PROMISC标识

Excel : 指定条件求和

2010-11-13T01:48:00.001+08:00

Excel : 统计一行中，满足特定条件的列数

2010-11-13T01:43:00.000+08:00

例如，统计每行中，第2列到第4列间，取值为H的列数：

Perl ：一些笔记

2010-11-11T00:47:00.001+08:00

YAML::XS 读入或输出YAML格式的内容，只认unicode

Test::Output 测试stdout、stderr输出的内容

正则式的描述符介绍：The Effective Perler-Know the difference between regex and match operator flags

这篇文章不错：Colonizing the Lacuna Expanse with Perl

Text::CSV_XS 解析文本，注意几个参数：binary、sep_char、allow_loose_quotes，用getline将单行读入到数组，getline_hr将单行读入到hash（预先用column_names绑定hash的关键字）。

Email::Stuff 简单的邮件发送模块

Clone 复制数据结构，传入的参数必须为引用

Vim的Perl补全插件： perlomni.vim

Wireshark : 命令行抓包分析工具 tshark、mergecap等

2010-11-11T00:42:00.001+08:00

Wireshark还配了一些命令行工具，例如：tshark, dumpcap, capinfos, editcap, mergecap

使用教学见：

SecureCRT : vim中文问题

2010-11-10T13:20:00.000+08:00

SecureCRT下，vim查看utf8的文件中文显示乱码、vim下删汉字一次只删半个

SecureCRT设成gbk编码（option->session option->appearance -> character encoding选default）
在/root/.vimrc中添加一行 set fileencodings=utf8-bom,ucs-bom,utf-8,cp936,gb18030,ucs,big5
在/root/.bashrc中添加一行export LC_ALL=zh_CN.GBK

Perl ：ARP中毒例子

2010-10-26T23:33:00.001+08:00

见：Sam's Blog - ARP Poisoning with Perl

正常节点：

A, IP address: 192.168.1.100, MAC address: 00:e1:e2:e3:e4:e5
B, IP address: 192.168.1.1, MAC address: 00:f1:f2:f3:f4:f5

恶意节点的MAC地址：00:aa:bb:cc:dd:ee

中间人攻击的一种形式。