ArchSummit
2014全球架构师峰会
大数据和云计算
在网络安全行业的应用
从漏洞修复看各国网络战防御能力
ZoomEye架构
1
数据分析
--从心脏出血漏洞看各国防御应急能力
2
ZoomEye平台架构
ZoomEye – 网络空间搜索引擎
ZoomEye – 网络空间搜索引擎
ZoomEye – 网络空间搜索引擎
针对全球42亿IP地址,探知资产状况
存活性
开放的端口
运行的服务
端口上的应用
应用的版本
应用的插件
插件的版本
……
组件指纹识别引擎Wmap/Xmap
调度框架Lucifer
高性能存储
数据深度挖掘
可视化组件
组件指纹识别引擎 Wmap/Xmap
识别网络设备厂商和型号
交换机
路由器
摄像头
平板电脑
工控设备
……
组件指纹识别引擎 Wmap/Xmap
识别WEB服务组件
组件指纹识别引擎 Wmap/Xmap
第一个版本
2007年:检测一个网页是否有挂马
Qemu:虚拟16个Windows XP
每个XP运行带沙箱的32个IE6
第二个版本
2008年:一个小集群
包含了96台服务器
一个8服务器组成的MongDB集群
第三个版本
2009年:所有网站的技术组件感知、被黑监控
添加了:
基于Gearman做了一个调度系统
5个不同区域的机房部署了服务器
部署了一个hadoop集群,主要用于存储
使用了lucense
添加了一个mysql数据库
Mongodb继续扩容
采集器除了沙箱系统外,添加了大量的采集worker插件
第四个版本
2011年:所有开放80口的IP,对应的技术组件、及被黑感知
继续扩大机房建设
Hadoop开始用于分析
Lucense开始换为solr
Mongodb继续扩容
继续添加服务器
继续添加worker采集插件,采集更多样化的数据
累计大约到了400 server的数量
第五个版本
2013年:所有IP的HTTP服务(包括非80),
采集对应的技术组件、及被黑感知
继续扩大机房建设
Hadoop换为DSE的发布版本
Solr开始工作
Mongodb继续扩容
添加了一个cassandra数据库
继续添加worker采集插件,采集更多样化的数据
继续添加服务器
累计大约到了700 server的数量
第六个版本
Now :漏洞响应与态势感知
累计大约到了1000 server/vmbox的数量
整体架构
调度框架 Lucifer
workshop 车间
worker 工人
jobserver 作业调度者
recover 回收器
sender 发送器
collector 收集器
高性能存储集群
“搜索负载均衡”,负责接收“UI界面”的搜索请求,并向“数据节点”发送搜索请求。
“索引节点”,负责收集索引请求,并向“数据节点”发送索引请求。
数据分析
--从心脏出血漏洞看各国防御应急能力
*
历史上第一个上央视的漏洞
12306铁道购票系统
淘宝
支付宝
网神VPN
中华电信hinet邮箱
全球态势
全球受影响的公网IP共计:2,433,550
全球可被攻破对象暴露面TOP35
美国84万暴露在公
网的受影响IP地址
美国 838526
德国 309303
越南 170235
英国 136075
荷兰 84627
法国 71975
日本 67458
俄罗斯 60629
加拿大 60608
台湾 58770
澳大利亚 48012
意大利 45247
瑞士 31814
波兰 27975
西班牙 27159
中国 26621
捷克 24259
新加坡 21408
中国周边和欧美20个地区可被攻破暴露面
美国84万暴露在公
网的受影响IP地址
美国占全球34% ,中国仅占1%
美国 838526
德国 309303
越南 170235
英国 136075
法国 71975
日本 67458
俄罗斯 60629
加拿大 60608
台湾 58770
澳大利亚 48012
中国 26621
新加坡 21408
巴西 19545
韩国 14965
乌克兰 12207
香港 10358
印度 10193
印尼 4325
马来西亚 4081
菲律宾 1715
一个星期内全球修复趋势图
受影响的HTTPS、邮件系统等协议端口,一周的修复趋势
中国周边和欧美20个国家修复率
国家 第一天 第三天 修复率
新加坡 21408 9173 57%
美国 838526 429473 49%
澳大利亚 48012 25940 46%
法国 71975 39607 45%
越南 170235 97732 43%
英国 136075 79152 42%
加拿大 60608 36363 40%
德国 309303 199831 35%
日本 67458 45547 32%
马来西亚 4081 3078 25%
印尼 4325 3309 23%
巴西 19545 15089 23%
香港 10358 8182 21%
乌克兰 12207 9862 19%
印度 10193 8306 19%
中国 26621 21794 18%
菲律宾 1715 1426 17%
俄罗斯 60629 50770 16%
韩国 14965 13791 8%
台湾 58770 55064 6%
全球 2433550 1468022 40%
将第一天与第三天的受漏洞影响数量相比较
全球平均修复率40%
新加坡 57%
美国 49%
越南 43%
中国 18%
韩国 8%
台湾 6%
中国全球排名102
一个星期内全球修复趋势图
中国周边和欧美20个国家修复率
全球平均40%
TIPS:第一天修复最快的信息系统
美国
众议院常设委员会
美国联邦贸易委员会
美国联邦数据库
美国军事装备提供商
汉考克控股银行
德意志银行
woodland银行
lakeside银行
列克星敦电力和照明(lexington power&light)
电力监控厂商(electricity monitors)
电力和天然气厂商
石油承包商和服务公司(balch)
石油运输公司(Timms)
石油供应商和销售商公司(Jacobs)
光纤提供商(fiberguide)
电信服务商(Viper)
奥斯汀地区电信网络
电信解决方案提供商(personaloffice)
电信业务提供商(INFOSTRUCTURE)
长途电话和电信网络运营商(i2Gemini)
TIPS:第一天修复最快的信息系统
台湾
高雄市政府教育局
高雄市立社會教育館
教育機構防洩漏個資掃瞄平台
中華電信hicloud雲端服務
中華電信hinet網頁郵件服務
南荣科技大学网络认证系统
树德科技大学网络认证系统
中壹科技大学VPN系统
建国科技大学VPN系统
国立东华大学VPN系统
中山大学VPN系统
TIPS:第一天修复最快的信息系统
日本
衆議院議員
独立行政法人-海上技术安全研究所
自民党-京都府支部联合会
航海训练所
大東銀行
日本注册会计师协会
日本sunoco石油公司
日本kohan/kogyo鋼鈑工業公司
総研フィールド公司
独占赛马会
筑波大学
大阪大学
山梨大学
横浜国立大学
TIPS:第一天中国修复情况
中国
阿里
腾讯
百度
数据对比发现:
中国基础行业对安全重视急需提高
大数据为网络安全行业开启了新篇章