七月 » 2017 » 阿蒙的礼物

存档在 2017年7月

怎样使用Google Voice打电话

2017年7月12日

Google Voice是由Google推出的VOIP服务，可以通过申请，免费提供一个美国电话号码。该号码有在美国及加拿大地区免费语音通话和短信服务的权限。其初衷是能够将个人所用的众多电话号码集中成为一个号码，并且提供更多增值服务。其他地区国家不能直接使用，需要充值才可以，但价格还算低廉。

如果有一个 Google Voice 美国号码，可以在手机上使用 Hangouts 这个 App 来收发短信和拨打电话的。打电话的时候是走网络的，必须联网（手机信号或wifi）。必须穿越。挂美国代理，相当于在美国打电话。拨打电话前，所需资费环聊也会提示你的。

资费：

1.拨打美国和加拿大免费（在非美国加拿大地区拨打，1美分/分钟）。
2.拨打国内手机和座机是1美分/分钟。
3.拨打香港手机和座机是2美分/分钟。

参考：https://kn007.net/topics/free-application-for-google-voice-phone-number/
参考：http://amon.org/shadowsocks

怎样使用Google Voice打电话已关闭评论 »

发表在【技术】

怎样部署Whois Server

2017年7月7日

参考：http://www.freebuf.com/articles/network/107372.html

背景

whois分两种，一种是查询域名的，一种是查询IP的。这里说的时候后者。

背景不提，你大可以认为我是闲的蛋疼，毕竟互联网上公开的whois数据库非常多，而且没有任何使用的限制。国内可能有前人摸索过，但是目前还没有在某个平台上看到有人提起，所以才斗胆来写了这篇文章。

说起IP Whois，有不少专业名词，一个个解释不过来，这里只放几个链接，做做科普就好了。

1、AS （维基百科）

2、BGP （维基百科）

3、RIRs （维基百科）

如果你用过whois（Mac下自带的whois工具是用来查询域名的，使用brew安装的是whois3，其他平台上就只有ip的whois）工具，那么你可以留意一下，其实大部分的whois服务器，都是用的是同一套软件，只不过版本不一样而已。

另外，虽然whois使用的非常少，但是依然有相应的协议和规范(RFC3912)，所以，即使在不同的平台上进行查询，命令格式、查询结果的格式也都是类似的。

whois常用命令行：

whois3: [-4|-6] [-h host | --host=host] [-p port | --port=port] -k | query

-h 指定查询的whois数据库，五大RIR都有自己的whois数据库，另外有部分第三方提供的数据库。如果未指定，就使用默认的whois.ripe.net

-p whois协议有自己的端口，如果使用自建的whois镜像，可能需要指定端口

query 查询语句有很多种，虽然使用同一套程序，但是不同的数据库，可能会支持不同的功能，如果不知道具体使用什么样的查询语句，可以直接使用下面的命令行来获取帮助信息

whois -h whois.apinc.net --help

IP whois 查询能够提供什么样的信息呢？

1.1.220.2是此前我在测试中捕捉到的一个发送垃圾邮件的IP地址，对这个IP的whois查询结果如下

dbint@whois:~$ whois -h whois.apnic.net 1.1.220.2
% [whois.apnic.net]
% Whois data copyright terms    http://www.apnic.net/db/dbcopyright.html
% Information related to '1.1.192.0 - 1.1.255.255'
inetnum:        1.1.192.0 - 1.1.255.255
netname:        TOTNET
descr:          Dynamic IP Address for residential Broadband Customers
country:        TH
admin-c:        AG100-AP
tech-c:         AG100-AP
status:         ASSIGNED NON-PORTABLE
mnt-by:         MAINT-TH-TOT
mnt-lower:      MAINT-TH-TOT
mnt-routes:     MAINT-TH-TOT
mnt-routes:     MAINT-TH-TOT-ISP
mnt-irt:        IRT-TOT-TH
changed:        apipolg@tot.co.th 20140525
source:         APNIC
irt:            IRT-TOT-TH
address:        TOT Public Company Limited
address:        89/2 Moo 3 Chaengwattana Rd, Laksi,Bangkok 10210 THAILAND
e-mail:         apipolg@tot.co.th
abuse-mailbox:  abuse@totisp.net
admin-c:        ira3-ap
tech-c:         ira3-ap
auth:           # Filtered
mnt-by:         MAINT-TH-TOT
changed:        apipolg@tot.co.th 20150703
source:         APNIC
person:         Apipol Gunabhibal
nic-hdl:        AG100-AP
e-mail:         apipolg@tot.co.th
address:        TOT Public Company Limited
address:        89/2 Moo 3 Chaengwattana Rd, Laksi, Bangkok 10210 THAILAND
phone:          +66-2574-9178
fax-no:         +66-2574-8401
country:        TH
changed:        apipolg@tot.co.th 20110215
mnt-by:         MAINT-TH-TOT
source:         APNIC
% Information related to '1.1.192.0/19AS23969'
route:          1.1.192.0/19
descr:          TOT Public Company Limited
origin:         AS23969
mnt-by:         MAINT-TH-TOT
changed:        boy@totbb.net 20120220
source:         APNIC
% Information related to '1.1.192.0/19AS9737'
route:          1.1.192.0/19
descr:          TOT Public Company Limited
origin:         AS9737
country:        TH
mnt-routes:     MAINT-TH-TOT
mnt-by:         MAINT-TH-TOT
changed:        apipolg@tot.co.th 20120223
source:         APNIC
% This query was served by the APNIC Whois Service version 1.69.1-APNICv1r7-SNAPSHOT (WHOIS1)

我们检索出了IP地址所属的网段，AS号，注册时间，注册组织以及注册组织所属的国家。某些情况下，注册组织可能会上报IP地址的规划情况，那么我们就可以大致的判断出这个地址段是用来做什么的了。

获取看这个链接你会得到更直观的结果:点击查看

4134是中国CN2(百度百科)网络的AS号。基本上在国内，必须要接入CN2网络，才能连接到互联网(没有具体考证，从08年前后电信泄露的文档中推断出来的)

只从上面的图中，1.92.0.0/13这个段被直接分别分配给了一个公司，相比之下，某些身份只能拿到一些零散的C段，那么这个公司一定是一个很有分量的公司。

实际上这些数据都是AS注册组织向RIR机构上报的信息，因为层层上报的原因，在加上RIR机构是完全没有办法来判断是到底有没有虚报，所以这些信息仅仅只能作为一个参考作用。

从4134所有网段的描述信息里，还是找到了几个IDC的网段。有兴趣的可以自己尝试一下。

除了这些信息，whois数据对威胁情报，也起到了不小作用。比较直观的一点就是，IP地址的分配是动态的，并不是说DHCP那个动态，而是，尽管IP地址资源有限，还是有会一些IP地址出现冗余，被回收和重新分配。

一个主要的原因是，欧美地区在推行IPv6的同时，一些IPv4的地址就不再需要了，空出来的这部分就被释放掉，交回RIR进行重新分配，然后又有其他的机构去申请使用。所有会出现，一个IP地址，可能上个月是欧洲的，这个月就变成了中国的。

另外，对于腾讯和阿里，拥有自己的AS号，是可以直接从whois数据中检索出他们所拥有的全部地址段的。

这里要介绍的，是自建whois镜像，每个人有自己关注的点，如何从whois数据库中找到你需要的信息，是因人而异的。只是看不惯很多whois查询站点数据不准，还没完没了的验证码和广告，觉得有必要分享给大家。

系统环境准备

whois server正常运行需要的内存不大，但是初次导入数据的时候需要消耗巨大的内存。官方的文档里推荐至少8G内存，8GSWAP，至少120G磁盘空间。

实践下来，CentOS下需要调整很多内核设置，而且最终运行效果也不是很理想，所以不推荐用CentOS来承载。

在CentOS下失败了多次之后，在Ubuntu上一次部署成功。所以推荐的，还是Ubuntu(我使用的是Ubuntu Server 14.04 x64)

需要JDK1.8

需要Mariadb 5.5

需要Maven

需要make(Ubuntu Server默认是没有gcc和make工具的)

需要gcc

需要jmx (jmx下载地址 Mac下jmx有BUG，无法使用，就别折腾了)

增强配置

由于在初次导入数据的时候需要对文本进行大量的解析，如果你打算把whois服务器开放的话，查询量也会很大所以需要对系统和Mariadb的配置做一些调整。

sysctl -w kern.maxfiles=1048600

sysctl -w kern.maxfilesperproc=1048576

如果使用的是Ubuntu Server这两条配置默认是满足的，可以不考虑其它的。

MariaDB虽然接近于MySQL，我没有尝试使用MySQL来做whois数据的存储。

一些配置如下：

max_allowed_packet = 20M

wait_timeout = 31536000

innodb_buffer_pool_size = 2356M

innodb_additional_mem_pool_size = 32M

编译安装

源码地址：下载地址

下载并且解压，然后在whois源码目录中运行：

mvn clean install -P release

编译过程可能要很长时间，我自己的机器上，编译了整整一天。-_-|||

建立数据库结构

初始化数据库的脚本放在whois-commons/src/main/resource/目录下

dbint@whois:~/whois/whois-commons/src/main/resources$ ls -alh
total 100K
drwxrwxr-x 3 dbint dbint 4.0K May  2 22:50 .
drwxrwxr-x 4 dbint dbint 4.0K May  2 22:50 ..
-rw-rw-r-- 1 dbint dbint 5.3K May  2 22:50 acl_schema.sql
-rw-rw-r-- 1 dbint dbint 3.7K May  2 22:50 applicationContext-commons.xml
-rw-rw-r-- 1 dbint dbint 4.6K May  2 22:50 dnscheck_schema.sql
-rw-rw-r-- 1 dbint dbint 1.3K May  2 22:50 internals_data.sql
-rw-rw-r-- 1 dbint dbint 2.4K May  2 22:50 internals_schema.sql
-rw-rw-r-- 1 dbint dbint 2.3K May  2 22:50 mailupdates_schema.sql
drwxrwxr-x 2 dbint dbint 4.0K May  2 22:50 patch
-rw-rw-r-- 1 dbint dbint   35 May  2 22:50 version.properties
-rw-rw-r-- 1 dbint dbint 1.2K May  2 22:50 versions_schema.sql
-rw-rw-r-- 1 dbint dbint  123 May  2 22:50 whois_data.sql
-rw-rw-r-- 1 dbint dbint 4.3K May  2 22:50 whois.properties
-rw-rw-r-- 1 dbint dbint  34K May  2 22:50 whois_schema.sql

其中，xxxx_schema.sql就是用来建立数据库结构的脚本，其他的脚本不要动，实践证明，没啥卵用。

whois.properties是whois的核心配置文件，后面会给出我的配置样例。

数据库结构包括：

LOCAL—————————————-使用whois_schema.sql初始化

ACL_LOCAL——————————–使用acl_schema.sql初始化

DNSCHECK_LOCAL———————使用dnscheck_schema.sql初始化

MAILUPDATES_LOCAL—————–使用mailupdates_schema.sql初始化

INTERNALS_LOCAL———————使用internals_schema.sql初始化

这几个表是必须的，哪怕你根本不用acl和mailupdate的功能，这几个schema也必须要有。

另外，由于我们要建立的是一个完整的whois镜像，所以每一个镜像源需要有一个与之对应的schema。

我只镜像了五大RIR的数据，所以有五个镜像schema。

WHOIS_MIRROR_RIPE_GRS

WHOIS_MIRROR_APNIC_GRS

WHOIS_MIRROR_ARIN_GRS

WHOIS_MIRROR_AFRINIC_GRS

WHOIS_MIRROR_LACNIC_GRS

以上五个schema，都使用whois_schema.sql来初始化。

如果需要，可以考虑添加RADB和JIRR的数据，实际上，这两个RIR机构的数据也是包含在APNIC的数据里面的，我没有添加。

whois主程序使用空密码的dbint账户来连接数据库，可以用下面的方式来创建账户：

CREATE USER 'dbint'@'localhost' IDENTIFIED BY '';
GRANT ALL PRIVILEGES ON *.* TO 'dbint'@'localhost';
FLUSH PRIVILEGES;

我当然知道这有点不安全，反正数据都是别人的，你拿走也没有任何意义，就这样配置好啦。

如果你想自己指定一个账户也行，但是你必须在后面的配置文件里详细写清楚。

whois配置

1、把之前下载的jmxterm-<my version>-uber.jar复制到whois源码目录下

2、把whois-commons/src/main/resource/whois.properties文件复制到whois源码目录下，并改名为properties

3、maven编译生成的主程序文件在whois-db/target/whois-db-1.87.jar，使用不同的发行版本编译，得到的文件名会有所差异，自行区分。需要把这个包复制到whois源码目录下。

4、运行whois的一些在tools目录中，把这些文件全部拷贝到whois源码目录中。

5、修改whois.init脚本，把其中JMXTERMPATH修改为之前下载的jmx文件的文件名。

6、在whois源码目录下，创建空的var文件夹(dump文件，日志，export文件都会放在这里面)

7、修改properties文件(这里是大头，官方文档中没有完全说明，我摸索了好久才理解的，经管理解了，但是依然巨坑无数，所以，各位如果有好的办法，请务必分享一下)

# The main / default whois source (RIPE|TEST)
whois.source=LOCAL
whois.additional.sources=RIPE-GRS,APNIC-GRS,LACNIC-GRS,AFRINIC-GRS,ARIN-GRS
# 默认情况下，whois只对LOCAL做数据查询，但是我们的镜像数据分散在多个schema中，所以需要额外添加。注意，不需要写完整的shema名，whois会自动把source name转换成WHOIS_MIRROR_(SOURCE_NAME)的形式
# GRS是whois的自动跟新机制，每天凌晨自动同步数据，不需要深究
# Service ports
#设定whois数据的监听端口
port.query=8187
#whois协议有专门的端口，我使用的是8187
port.api=8188
#ripe-ncc提供的whois server也可以使用RESTful接口
port.nrtm=0
#拒绝给其他服务器提供nrtm数据更新服务
# File system locations
dir.rpsl.export=var${jvmId:}/export
dir.rpsl.export.tmp=var${jvmId:}/export_tmp
dir.rpsl.export.internal=internal
dir.rpsl.export.external=dbase_new
dir.rpsl.export.external.legacy=dbase
dir.freetext.index=
dir.update.audit.log=var${jvmId:}/log/audit
dir.grs.import.download=var${jvmId:}/grs
freetext.index.update.interval.msecs=60000
# API configuration
api.rest.baseurl=http://rest.db.ripe.net
#使用五大RIR机构的数据来进行同步，还有部分小的RIR机构，包含在了五大机构的数据中
# Comma separated list of GRS sources
grs.sources=RIPE-GRS,APNIC-GRS,LACNIC-GRS,AFRINIC-GRS,ARIN-GRS
grs.sources.dummify=
# Comma separated list of IP ranges from which sensitive operations are accessible
#whois server完全没有身份验证，所有的安全防护都通过限制IP地址进行。这里限制的是某些敏感操作
ipranges.trusted=127.0.0.1,::1
# Comma separated list of IP ranges from which the OSI layer2 load balancer health checks are executed from
#设置whois服务监听地址
ipranges.loadbalancer=127.0.0.1,::1
# Mail properties
# RIR的会员组织可以通过邮件的方式来接收更新数据，不是member就不需要这项了
mail.smtp.enabled=false
mail.smtp.host=
mail.from=RIPE Database Administration local <unread@ripe.net>
mail.update.threads=2
mail.dequeue.interval=1000
mail.smtp.retrySending=true
# NRTM server
# 不启用NTRM更新，也是RIR会员组织专项
nrtm.enabled=false
nrtm.update.interval=15
# NRTM client
nrtm.import.enabled=false
nrtm.import.sources=
# RpslExport
rpsl.export.enabled=true
# GRS source-specific properties to acquire dumps
grs.import.enabled=true
grs.import.sources=RIPE-GRS,APNIC-GRS,LACNIC-GRS,AFRINIC-GRS,ARIN-GRS
# GRS RIPE-NCC
grs.import.ripe.resourceDataUrl=ftp://ftp.ripe.net/ripe/stats/delegated-ripencc-extended-latest
grs.import.ripe.download=ftp://ftp.ripe.net/ripe/dbase/ripe.db.gz
grs.import.ripe.source=RIPE-GRS
# GRS APNIC
grs.import.apnic.resourceDataUrl=ftp://ftp.apnic.net/pub/stats/apnic/delegated-apnic-extended-latest
#grs.import.apnic.download=
# APNIC没有完整的dump数据，都是分散的，所以我采用了多次导入的方式grs.import.apnic.source=APNIC-GRS
# LACNIC是唯一一家不提供归档数据的，所以需要注册成为一个会员，通过其他的方式来获取数据，即使注册了会员，也啥都看不到
# GRS LACNIC
grs.import.lacnic.resourceDataUrl=ftp://ftp.lacnic.net/pub/stats/lacnic/delegated-lacnic-extended-latest
#grs.import.lacnic.userId=
#grs.import.lacnic.password=
grs.import.lacnic.source=LACNIC-GRS
# GRS AFRINIC
grs.import.afrinic.resourceDataUrl=ftp://ftp.afrinic.net/stats/afrinic/delegated-afrinic-extended-latest
grs.import.afrinic.download=ftp://ftp.afrinic.net/dbase/afrinic.db.gz
grs.import.afrinic.source=AFRINIC-GRS
# GRS ARIN
# ARIN的数据也存在一个比较严重的问题，他提供的dump文件格式不是whois所接受的，也没有像APNIC那种分散的归档文件，所以暂时是空的
grs.import.arin.resourceDataUrl=ftp://ftp.arin.net/pub/stats/arin/delegated-arin-extended-latest
grs.import.arin.download=
grs.import.arin.source=ARIN-GRS
#GRS RADB
#grs.import.radb.download=ftp://ftp.radb.net/radb/dbase/radb.db.gz
#grs.import.radb.source=RADB-GRS
# GRS JPIRR
#grs.import.jpirr.docwnload=ftp://ftp.nic.ad.jp/jpirr/jpirr.db.gz
#grs.import.jpirr.source=JPIRR-GRS
# SSO translation properties
crowd.rest.url=http://crowd.prepdev.ripe.net:8095/crowd
crowd.rest.user=db
crowd.rest.password=evarylli
# Unref cleanup
unrefcleanup.enabled=false
unrefcleanup.deletes=false
whois.countrycodes=AD,AE,AF,AG,AI,AL,AM,AO,AQ,AR,AS,AT,AU,AW,AX,AZ,BA,BB,BD,BE,BF,BG,BH,BI,BJ,BL,BM,BN,BO,BQ,BR,BS,BT,BV,BW,BY,BZ,CA,CC,CD,CF,CG,CH,CI,CK,CL,CM,CN,CO,CR,CU,CV,CW,CX,CY,CZ,DE,DJ,DK,DM,DO,DZ,EC,EE,EG,EH,ER,ES,ET,EU,FI,FJ,FK,FM,FO,FR,GA,GB,GD,GE,GF,GG,GH,GI,GL,GM,GN,GP,GQ,GR,GS,GT,GU,GW,GY,HK,HM,HN,HR,HT,HU,ID,IE,IL,IM,IN,IO,IQ,IR,IS,IT,JE,JM,JO,JP,KE,KG,KH,KI,KM,KN,KP,KR,KW,KY,KZ,LA,LB,LC,LI,LK,LR,LS,LT,LU,LV,LY,MA,MC,MD,ME,MF,MG,MH,MK,ML,MM,MN,MO,MP,MQ,MR,MS,MT,MU,MV,MW,MX,MY,MZ,NA,NC,NE,NF,NG,NI,NL,NO,NP,NR,NU,NZ,OM,PA,PE,PF,PG,PH,PK,PL,PM,PN,PR,PS,PT,PW,PY,QA,RE,RO,RS,RU,RW,SA,SB,SC,SD,SE,SG,SH,SI,SJ,SK,SL,SM,SN,SO,SR,SS,ST,SV,SX,SY,SZ,TC,TD,TF,TG,TH,TJ,TK,TL,TM,TN,TO,TR,TT,TV,TW,TZ,UA,UG,UM,US,UY,UZ,VA,VC,VE,VG,VI,VN,VU,WF,WS,YE,YT,ZA,ZM,ZW
whois.languagecodes=ab,aa,af,ak,sq,am,ar,an,hy,as,av,ae,ay,az,bm,ba,eu,be,bn,bh,bi,bs,br,bg,my,ca,ch,ce,ny,zh,cv,kw,co,cr,hr,cs,da,dv,nl,dz,en,eo,et,ee,fo,fj,fi,fr,ff,gl,ka,de,el,gn,gu,ht,ha,he,hz,hi,ho,hu,ia,id,ie,ga,ig,ik,io,is,it,iu,ja,jv,kl,kn,kr,ks,kk,km,ki,rw,ky,kv,kg,ko,ku,kj,la,lb,lg,li,ln,lo,lt,lu,lv,gv,mk,mg,ms,ml,mt,mi,mr,mh,mn,na,nv,nb,nd,ne,ng,nn,no,ii,nr,oc,oj,cu,om,or,os,pa,pi,fa,pl,ps,pt,qu,rm,rn,ro,ru,sa,sc,sd,se,sm,sg,sr,gd,sn,si,sk,sl,so,st,es,su,sw,ss,sv,ta,te,tg,th,ti,bo,tk,tl,tn,to,tr,ts,tt,tw,ty,ug,uk,ur,uz,ve,vi,vo,wa,cy,wo,fy,xh,yi,yo,zu
whois.maintainers.power=RIPE-NCC-HM-MNT
whois.maintainers.enduser=RIPE-NCC-END-MNT
whois.maintainers.legacy=RIPE-NCC-LEGACY-MNT
whois.maintainers.alloc=RIPE-NCC-HM-MNT,RIPE-NCC-HM-PI-MNT
whois.maintainers.enum=RIPE-GII-MNT,RIPE-NCC-MNT
whois.maintainers.dbm=RIPE-DBM-MNT,RIPE-NCC-LOCKED-MNT,RIPE-DBM-STARTUP-MNT,RIPE-DBM-UNREFERENCED-CLEANUP-MNT,RIPE-ERX-MNT
whois.dummy_role.nichdl = DR1-TEST
# Source aware data sources
# 如果你为whois指定了特定的数据库账户。需要在下面指定
whois.db.driver=org.mariadb.jdbc.Driver
whois.db.master.driver=net.ripe.db.whois.common.jdbc.driver.LoggingDriver
whois.db.master.url=jdbc:log:mariadb://localhost/LOCAL;driver=org.mariadb.jdbc.Driver
whois.db.master.username=dbint
whois.db.master.password=
whois.db.slave.url=jdbc:mariadb://localhost/LOCAL
whois.db.slave.username=dbint
whois.db.slave.password=
whois.db.grs.master.baseurl=jdbc:mariadb://localhost/WHOIS_MIRROR
whois.db.grs.slave.baseurl=jdbc:mariadb://localhost/WHOIS_MIRROR
# 这里配置的只是数据库的前缀，每添加一个GRS数据源，就要建立一个相应的数据库，命名方式是WHOIS_MIRROR_(SOURCE_NAME)
# 后面这部分的设置基本上没什么用，不用改动
# Common data sources
mailupdates.database.url=jdbc:mariadb://localhost/MAILUPDATES_LOCAL
mailupdates.database.username=dbint
mailupdates.database.password=
dnscheck.database.url=jdbc:mariadb://localhost/DNSCHECK_LOCAL
dnscheck.database.username=dbint
dnscheck.database.password=
acl.database.url=jdbc:mariadb://localhost/ACL_LOCAL
acl.database.username=dbint
acl.database.password=
internals.database.url=jdbc:mariadb://localhost/INTERNALS_LOCAL
internals.database.username=dbint
internals.database.password=
#Feature Toggles
feature.toggle.changed.attr.available=true

数据导入和更新

首先，启动whois服务：

./whois.init start

在var/console.log中可以看到whois运行的一些信息，会有很多错误，但是只要whois能够成功运行，问题就不大。

使用jmx-term来下发数据导入的任务

./whois.init jmx

>bean net.ripe.db.whois:name=GrsImport

>run grsImport "RIPE-GRS" "first"

grsImport有两个参数，第一个表示要导入的数据源，名字必须跟porperties中指定的grs.import.ripe.source对应，第二个参数只是注释，用来区分每一次操作。

数据源可以直接指定“all”，一次性下发所有数据源的导入任务。但是由于APNIC，ARIN和LACNIC的数据都存在一些问题，不建议这么干。

同理，导入APNIC的数据可以这样：

>run grsImport "APNIC-GRS" "first"

停止whois服务：

./whois.init stop

如果数据正在更新，会等待更新完毕才退出，所以退出之前请确认没有数据导入的任务正在执行。

注：数据导入会消耗非常长的时间，我在工作站上运行的，光导入初始数据就花了两天。

whois server会每天自动同步，前提是你所指定的每一个grs source都已经完成了初始化导入并且配置了更新文件的路径。(更新文件路径在我给出的配置文件中已经帮你写好了，但是ARIN和LACNIC的初始数据导入有不少问题，暂时不建议使用。)

另外，APNIC的数据没有提供完整的dump文件，而是把一个dump文件拆分成了多个部分。

最终我的办法如下：

1、在配置文件中不配置APNIC的初始化数据文件。

2、在whois程序目录创建dump文件夹

3、下载https://ftp.apnic.net/apnic/whois/中的所有.gz压缩文件到dump目录

4、使用jmx强制导入

./whois.init jmx

>bean net.ripe.db.whois:name=Bootstrap

>run loadDumpRisky initialimport dump/压缩文件.gz

导入过程中会产生大量错误，但是最终数据还是可以用的。每有一个压缩文件，就得手工导入一次。

使用whois查询

前面提到有Linux/Mac平台下有whois工具可以使用

本地镜像导入之后，就可以使用下面的命令行来做查询了。

whois -h 127.0.0.1 -p 8187  query

同时，whois server也提供了REST API，这个我还没有研究透，暂时不讨论。官方的文档里有比较详细的介绍。

如果你需要在程序中使用whois的API，可以参考官方的说明文档 RIPE-NCC Whois RIPE API

查询单个IP的基本格式是：

http://amon.org:8188/whois/search?source={source}&query-string={query}

比如，查询1.1.220.2：

http://127.0.0.1:8188/whois/search?source=apnic-grs&query-string=1.1.220.2

返回结果可以是json或xml，可以用accept-content 来指定。

另外，RIPE官方也提供了比较完整的API，如果你懒得折腾，但是又很需要这些数据，可以直接使用RIPE-NCC官方的数据：http://rest.db.ripe.net/

一些心得

你可能会觉得，源码是别人的，文档也是别人的，我这篇文章到底有啥意义。咳咳，你自己折腾一遍你就知道了，真的是很多很多的坑……

官方的文档根本不是提供给我们看的，而是提供给各家RIR机构的。虽然官方说明了几种不同的数据导入方式，但是每一种都100%会失败。

你也可能觉得，反正网上有别人做好的whois服务器，直接用别人的就好了，干嘛自己费这么大劲儿去折腾。

其实，很简单，当全球的网段划分信息都摆在你面前的时候，你会懂我的。

如何分析？

这个我想等各位来帮我补充，诸如从whois数据中筛选出腾讯云和阿里云的全部IP地址段，这种我觉得都没啥意思了。算是抛砖引玉吧。

对于做威胁情报的平台，whois数据中会更新IP地址的变化，一旦IP地址被重新分配，那么此前的情报用处就不大了。目前IBM就是这么做的，在情报时间线中标明了某一个时刻，某一家RIR机构宣布IP地址的归属发生了变化，这个时刻以前的数据，就只能作为一个参考，而不作为评估依据。

每天大概会有4000个IP段发生变化，还是值得关注一下的。还有就是，AS存在一个挂载的问题，注册信息里显示国家为CN的AS，有不少，但绝大部分都挂载在AS4134下面，这个可以很直观的看出来。

其他类似的AS也有不少，这些AS就是全球的互联网的承载，或者叫骨干网。设想一下，如果这些网络的骨干节点被攻击，可能影响到的就是半个地球的人了（稍微夸大了一下，应该不会那么容易被攻击的）。

从这些数据里，可以简单的识别出一些IP地址的归属和具体用途，前面也提到了。对Desc字段中包含 Co., Ltd的IP地址段做筛选，可以罗列出不少IDC的地址段。某些ISP甚至会标注IP段是不是用来做宽带地址池的，或者做静态线路的。

期待大家来发掘这份数据吧。任何关于whois服务器的问题，可以在微博上戳我@戒小贤。后续我把数据源准备完毕，可能会考虑开放我们的数据库以及我们的一些分析结果。感谢@宫一鸣cn及时点拨，我才没有走错路。^_^

* 作者：戒贤，本文属FreeBuf原创奖励计划文章，未经许可禁止转载

怎样部署Whois Server已关闭评论 »

发表在【技术】

怎样部署jWhois服务器

2017年7月6日

参考：http://amon.org/whois-server

【Whois服务器源码】

JWhoisServer

官网：https://jwhoisserver.net/
下载：http://sourceforge.net/projects/jwhoisserver/files/

参考：https://domaincocoon.com/products/whois-server-installation-configuration-jwhoisserver

应用：.GE WHOIS
参考：http://whois.ac/long.ge

【Shell支持Whois命令】

输入：

whois

输出：

-bash: whois: command not found

通过 yum whatprovides 命令来摸清需要安装什么包：

yum whatprovides *bin/whois*

输出：

Loaded plugins: fastestmirror
Loading mirror speeds from cached hostfile
 * base: centos.unixheads.org
 * epel: mirror.sjc02.svwh.net
 * extras: mirror.linuxfix.com
 * updates: mirror.pac-12.org
jwhois-4.0-45.el7.x86_64 : Internet whois/nicname client
Repo        : epel
Matched from:
Filename    : /usr/bin/whois



whois-5.1.1-2.el7.x86_64 : Improved WHOIS client
Repo        : base
Matched from:
Filename    : /usr/bin/whois.md
Filename    : /usr/bin/whois

或者：

yum search whois

输出：

Loaded plugins: fastestmirror
Loading mirror speeds from cached hostfile
 * base: centos.unixheads.org
 * epel: mirror.sjc02.svwh.net
 * extras: mirror.linuxfix.com
 * updates: mirror.pac-12.org
======================================================================================== N/S matched: whois =========================================================================================
jwhois.x86_64 : Internet whois/nicname client
perl-Net-Whois-IP.noarch : Perl extension for looking up the whois information for ip addresses
perl-Net-Whois-Raw.noarch : Get Whois information for domains
pwhois.noarch : Perl written whois client
whois.x86_64 : Improved WHOIS client

  Name and summary matches only, use "search all" for everything.

可见 jwhois 和 whois 两个包都可以。

安装 jwhois ：

yum install jwhois

使用 whois 命令：

whois amon.org

输出：

[Querying whois.pir.org]
[whois.pir.org]
Domain Name: AMON.ORG
Registry Domain ID: D1374287-LROR
...

参考：http://www.68idc.cn/help/server/linux/20160920628382.html
参考：http://www.freebuf.com/articles/network/107372.html
参考：http://abigbadboy.blog.163.com/blog/static/2597155201343091758697/
参考：https://www.question-defense.com/2011/02/07/install-whois-on-centos-linux-using-yum-package-manager

参考：https://github.com/whois-server-list/whois-server-list
参考：https://pypi.python.org/pypi/python-whois/0.6.5
参考：https://github.com/phpWhois/phpWhois/

当查询 https://whoisdog.cn/inve.st ，输出：

Whois Server Version 3.2.2

.ST domains can now be registered with many different competing registrars. Go to http://www.registry.st/registrars for detailed information.

Domain Name: inve.st
Registrar: ST Registry
Name Server: ns.softcomca.com
Name Server: ns2.softcomca.com
Status: ok
Updated Date: 2016-05-22
Creation Date: 2000-06-06
Expiration Date: 2018-06-07

>>> Last update of whois database: Wed Jul 5 21:40:26 2017 UTC <<<

参考：https://www.gnu.org/software/jwhois/manual/jwhois.html
参考：https://sourceforge.net/projects/jwhoisserver/
参考：http://jwhoisserver.sourceforge.net/
参考：http://repo.jwhoisserver.net/m2/net/jwhoisserver/jwhoisserver/

参考：https://www.ripe.net/ripencc/pub-services/db/reimp/

怎样部署jWhois服务器已关闭评论 »

发表在【技术】

怎样注册.IS域名

2017年7月6日

【介绍】

.IS是冰岛的国别域名后缀。

【注册】

比价：https://www.domcomp.com

€29.90
官网：https://www.isnic.is

注册费 €42.00 ；转入费 €0.00 ；Push费 €6.00
官网：https://www.netim.com

$59.00
官网：https://www.directnic.com

【转移】

.IS注册局注册的优点在于便宜，但DNS解析只允许一系列已认证的DNS服务器，因此只能使用转发功能。其中NetIM的DNS服务器在列。

ns1.netim.net
ns6.netim.net

操作流程：

1. 在 isnic.is 注册，系统分配一个账号：LLNN-IS

2. 在 isnic.is 注册.IS域名，并续费N年

3. 在 NetIM.com 注册账号，并提交一个 0元转入订单

4. support@netim.com 将发送一封邮件给此.IS域名的联系邮箱

In regard to the transfer of the domain domain.is, please contact your current registrar and ask them to change the Administrative, Technical and Billing contact to NS53-IS at the .IS registry.
Please confirm to support@netim.com once this is done, so we can complete the transfer on our side.

请联系您的当前注册商，要求他们把此域名的管理联系人、技术联系人、财务联系人的联系方式变更为 NS53-IS 。
请在完成这项操作后回信，我们将在我们这端完成域名转入工作。

5. 域名成功转入 NetIM 后，再尝试使用 NetIM 方提供的DNS解析功能。

【删除】

删除：https://member.expireddomains.net/domains/expiredis/

libr.is
删除时间：UTC 2017年12月7日03时23分 http://www.timeanddate.com/worldclock/meeting.html

【应用】

曾惦记 EX.LIBR.IS ，曾羡慕 Who.is 。

【市场】

Namebio shows only 16 sales in the last ten years.

【存量】

There are only about 61.500 .is domains registered as today. About 2/3 of them are registered in Iceland, using icelandic words, names and even letters! We estimate that only about 20.000 to 25.000 .is domains are english words and names, yet.

lq.is pq.is qc.is qj.is qv.is qy.is vq.is xj.is yg.is yh.is yj.is yk.is yu.is yv.is zd.is zj.is zl.is zm.is zt.is

29.is 46.is 49.is 53.is 57.is 59.is 61.is 62.is 65.is 71.is 86.is 91.is 92.is 94.is 97.is

意见：Letters Q W Z C are not part of the Icelandic alphabet. So what’s left is the less popular combos.

代码签名证书

2017年7月3日

组织端代码签名证书（Code Signing for Software Vendors and Organizations）

参考：https://msdn.microsoft.com/zh-cn/library/windows/desktop/mt637086.aspx

参考：https://www.shuzizhengshu.com/html/chanpin/daimaqianming/item-48.html

代码签名即软件的所有者使用受全球认可的第三方发放的能证明其真实身份的 “代码签名数字证书” 为其开发的软件添加一个标记, 即所谓的 “签名”, 因而增强了可信度.

参考：http://bbs.csdn.net/topics/300153013
参考：http://www.cacert.org/
参考：https://cn.globalsign.com/support/support_ssl_1002.html

有专门提供数字认证的公司，需要向其购买证书，安装到自己的系统中，在生成程序后给程序加上签名。

申请证书：

参考：https://blog.itnmg.net/free-code-signing-certificates/

严格核实代码与软件的可信赖性，代码签名证书保障代码程序及内容安全

Symantec 代码签名证书针对程序代码和内容建立了一种数字化的验证及保护程序，可在软件发行者和用户透过互联网和行动网络下载、安装代码程序和内容时，由系统跳出开发者的信息，大幅提高安全性。简单来说，代码签名证书的功能为：验证内容的来源为与完整性，而终端使用者也会意识到该代码程序及内容自发布后皆未遭到非法窜改，进而对开发商及组织机构产生高度信赖感，保护了软件开发商的利益，使得软件开发商能安全地快速地通过互联网发布软件或应用程序。

即日起，本公司组织端代码签名证书服务开放个体工商户申请（需成立满一年以上），为不同营业规模及性质的软体开发商扩展更全面的证书支持服务。
选购组织端代码签名证书具有以下优点：
开发商所发行的代码程序或内容若通过代码签名验证可提升软件的下载、采用率和发行率。
减少代码程序及内容出现错误讯息和安全性警告，建立品牌的信任关系。
防止使用者下载到含有恶意档案的代码程序及内容。
终端使用者透过互联网和行动网络下载、安装代码程序和内容时，由系统跳出开发者的信息，大幅提高安全性。
确保终端用户知道该软件是合法的，且该代码自发行以来没有被篡改过。

Symantec 代码签名证书支持下列操作系统及网站浏览器

Microsoft Authenticode 代码签名证书：ActiveX 数字签证（32 位和 64 位，像是 ocx、dll 或其他）和其他 Windows 内核软件。
Apple Mac 代码签名证书：ObjectSign 可被用来在 Apple Mac 应用程序上进行数字签名。

参考：https://codesigncert.com/comodocodesigning
参考：http://www.sslbus.com/codesign/comodo-cod
参考：http://www.instantssl.cn/code-signing/index.html

代码签名证书已关闭评论 »

发表在【技术】