第三百九十六章网络爬虫
藏宝阁小说网www.cbge.cc，最快更新《超级淘宝店》最新章节！
德玛西亚交付了第二座生命之泉，方泽也可以铺开自己的传送网络了。
每一座生命之泉的运货量很大，一座就完全可以满足恕瑞玛对外的所有需求，所以这一座生命之泉继续放在石门市和恕瑞玛毫无意义。
方泽和焦雅讨论了一下，最后定在了长安和魔都。
之所以放在长安，是因为长安基本算得上是西北最大的交通枢纽，整个华夏西北部分的所有地方可以将货物很方便的运送到长安，然后再由长安送到东南沿海的区域。
之前国家一直在喊西部大开发，西部大开发，但实际上效果并不好，究其原因就在于陆运的便利性的确是比不上海运，而且成本极高，所以东南沿海的一些工厂一直在喊着要往内陆迁，但是却迁不过去，究其原因就是运输不放便。
现在从长安到魔都的传送网络建立之后，对于中西部的开发绝对有一个飞跃性的帮助。
确立了地点之后，国家的施工队伍便出发了，按照华夏魔幻的基建速度，估计在第三座生命之泉到达的时候，长安到魔都的传送大厅就建造完成了。
因为两边都是极大的城市，所以方泽决定将第二座第三座生命之泉都建造在长安和魔都，打通中西部和东南沿海的传送网络。
送走了焦雅，内瑟斯也到了，开始对古埃及公主进行审讯。
方泽本来想要去围观的，但是恕瑞玛的人工智能辉夜突然向方泽报告了一件事情。
又有一个高阶人工智能诞生了。
这个不知名的高阶人工智能虽然暂时在能力方面比不上已经被方泽升级之后的辉夜，但是潜力巨大。
看起来是国家自己建造的人工智能出现了。
方泽顿时猜到了这个高阶人工智能是从哪里来的，自己好像把人工智能的相关技术交给国家才没多久，国家居然这么快就制造出了自己的人工智能。
方泽让辉夜开始监视这个人工智能，看看这个新生的人工智能在做些什么。
辉夜很快就做了回复。
国家建造的这个人工智能已经完全的接入了全世界的网络，并且大规模的制造爬虫开始爬去所有的资料。
所谓的爬虫就是一种网络工具，可以从网站上爬去，又叫网络爬虫。
可能一般人没有听说过这个名词，但实际上，爬虫才是网络上最大的流量制造者。
网络上百分之八十的流量都是爬虫，这是一个流传很广的话，虽然有一点夸张成分，但是让爬虫行业的相关人员估算的话，爬虫制造的流量也至少在百分之五十以上。
有很多验证码之类的东西，除了防黑客之外，主要也是为了防爬虫的，虽然实际上除了麻烦到真正的网民之外，并没有什么卵用。
不过这么做的目的也是为了提高爬虫的成本，而不是为了防止他。
什么是网络爬虫，网络搜索引擎其实就是一种爬虫，但是这是一种良性的爬虫，并不会对网站的服务器造成太大的负担。
而数量最多的其实是商业爬虫。比如有三家卖一模一样商品的网站，如果网站的后台检测到了曾经有一个ip访问了网站，对于网站上的商品很感兴趣，但是并没有购买。
这个时候网站的负责人就会觉得是不是因为价格的原因导致了这个客户的流失，所以他就会雇人，或者成立专门的部门，从另外两家的网页上爬取商品价格进行对比，
当爬虫获取到了资料返回之后，另外两家的网站负责人就会发现，有一个ip访问了他们的网页，但是并没有购买他们的商品，他们就会觉得是其他的什么因素，比如他们的价格比不上其他两家的，他们的介绍写的不华丽，于是他们也会使用爬虫去爬取其他两家的商品资料，然后其他两家自然也发现了又有客户造访，但是没有购买商品，于是就这么无限循环了下去。
把这个例子扩展到全华夏，一件商品最起码有上千家，上万家的店铺在出售，这些商铺都会使用爬虫爬取其他各家的资料来进行对比，这就导致了，网络爬虫的数量越来越多，队伍越来越庞大，对于服务器造成的压力也越来越大。
而现在，这个新生的高阶人工智能，爬取的可不仅仅是商业资料，他正在试图爬取所有的一切资料，搜索引擎搜得到的，他要爬取，搜不到的，他也要爬取。
甚至，这个高阶人工智能利用关键词，开始入侵各个论坛，社交软件里面，开始爬取他能获得的所有有用的身份，而这一切行动掩藏在庞大的网络爬虫的之下，所以没有任何人察觉到这个高阶人工智能的行动，而只是奇怪最近流量有点大，但是收入却并没有增加。
真正的网络监察时代来临了，只要这个高阶人工智能想，他可以将一个网民从刚开始上网，在网络上发出的第一个字到最后一次离开网络时浏览了什么网页全部查出来。
只要你在网络上留下痕迹，这个高阶人工智能就能凭借着自己强大的网络爬取能力，想法设法的获得。
这不禁让方泽想到，有一次他看见了电信公司的后天监视程序，上面密密麻麻的记载着所有的移动网络这个时候正在浏览什么网页。
方泽看到这种情况之后，问向了辉夜，“你能阻止这个高阶人工智能的行动吗？”
“可以。”辉夜点头回答道，“高阶人工智能也是可以成长的，我在启动之后，已经进化了不少，而这个高阶人工智能是用我的模板建造的，这样的话我就始终走在他前面，我可以中断他的行动，但是却没有办法将他从网络上排挤出去。”
“那也可以。”方泽对着辉夜说道，“你现在立刻阻止这个新生的人工智能对于个人信息的爬取。”
“好的主人，还有什么吩咐吗？”
“对了，你阻止了这个人工智能的爬取之后，你自己对所有的网络个人信息进行爬取，然后建立一个数据库。”
“那样的话，我需要一个庞大的存储空间。”
德玛西亚交付了第二座生命之泉，方泽也可以铺开自己的传送网络了。
每一座生命之泉的运货量很大，一座就完全可以满足恕瑞玛对外的所有需求，所以这一座生命之泉继续放在石门市和恕瑞玛毫无意义。
方泽和焦雅讨论了一下，最后定在了长安和魔都。
之所以放在长安，是因为长安基本算得上是西北最大的交通枢纽，整个华夏西北部分的所有地方可以将货物很方便的运送到长安，然后再由长安送到东南沿海的区域。
之前国家一直在喊西部大开发，西部大开发，但实际上效果并不好，究其原因就在于陆运的便利性的确是比不上海运，而且成本极高，所以东南沿海的一些工厂一直在喊着要往内陆迁，但是却迁不过去，究其原因就是运输不放便。
现在从长安到魔都的传送网络建立之后，对于中西部的开发绝对有一个飞跃性的帮助。
确立了地点之后，国家的施工队伍便出发了，按照华夏魔幻的基建速度，估计在第三座生命之泉到达的时候，长安到魔都的传送大厅就建造完成了。
因为两边都是极大的城市，所以方泽决定将第二座第三座生命之泉都建造在长安和魔都，打通中西部和东南沿海的传送网络。
送走了焦雅，内瑟斯也到了，开始对古埃及公主进行审讯。
方泽本来想要去围观的，但是恕瑞玛的人工智能辉夜突然向方泽报告了一件事情。
又有一个高阶人工智能诞生了。
这个不知名的高阶人工智能虽然暂时在能力方面比不上已经被方泽升级之后的辉夜，但是潜力巨大。
看起来是国家自己建造的人工智能出现了。
方泽顿时猜到了这个高阶人工智能是从哪里来的，自己好像把人工智能的相关技术交给国家才没多久，国家居然这么快就制造出了自己的人工智能。
方泽让辉夜开始监视这个人工智能，看看这个新生的人工智能在做些什么。
辉夜很快就做了回复。
国家建造的这个人工智能已经完全的接入了全世界的网络，并且大规模的制造爬虫开始爬去所有的资料。
所谓的爬虫就是一种网络工具，可以从网站上爬去，又叫网络爬虫。
可能一般人没有听说过这个名词，但实际上，爬虫才是网络上最大的流量制造者。
网络上百分之八十的流量都是爬虫，这是一个流传很广的话，虽然有一点夸张成分，但是让爬虫行业的相关人员估算的话，爬虫制造的流量也至少在百分之五十以上。
有很多验证码之类的东西，除了防黑客之外，主要也是为了防爬虫的，虽然实际上除了麻烦到真正的网民之外，并没有什么卵用。
不过这么做的目的也是为了提高爬虫的成本，而不是为了防止他。
什么是网络爬虫，网络搜索引擎其实就是一种爬虫，但是这是一种良性的爬虫，并不会对网站的服务器造成太大的负担。
而数量最多的其实是商业爬虫。比如有三家卖一模一样商品的网站，如果网站的后台检测到了曾经有一个ip访问了网站，对于网站上的商品很感兴趣，但是并没有购买。
这个时候网站的负责人就会觉得是不是因为价格的原因导致了这个客户的流失，所以他就会雇人，或者成立专门的部门，从另外两家的网页上爬取商品价格进行对比，
当爬虫获取到了资料返回之后，另外两家的网站负责人就会发现，有一个ip访问了他们的网页，但是并没有购买他们的商品，他们就会觉得是其他的什么因素，比如他们的价格比不上其他两家的，他们的介绍写的不华丽，于是他们也会使用爬虫去爬取其他两家的商品资料，然后其他两家自然也发现了又有客户造访，但是没有购买商品，于是就这么无限循环了下去。
把这个例子扩展到全华夏，一件商品最起码有上千家，上万家的店铺在出售，这些商铺都会使用爬虫爬取其他各家的资料来进行对比，这就导致了，网络爬虫的数量越来越多，队伍越来越庞大，对于服务器造成的压力也越来越大。
而现在，这个新生的高阶人工智能，爬取的可不仅仅是商业资料，他正在试图爬取所有的一切资料，搜索引擎搜得到的，他要爬取，搜不到的，他也要爬取。
甚至，这个高阶人工智能利用关键词，开始入侵各个论坛，社交软件里面，开始爬取他能获得的所有有用的身份，而这一切行动掩藏在庞大的网络爬虫的之下，所以没有任何人察觉到这个高阶人工智能的行动，而只是奇怪最近流量有点大，但是收入却并没有增加。
真正的网络监察时代来临了，只要这个高阶人工智能想，他可以将一个网民从刚开始上网，在网络上发出的第一个字到最后一次离开网络时浏览了什么网页全部查出来。
只要你在网络上留下痕迹，这个高阶人工智能就能凭借着自己强大的网络爬取能力，想法设法的获得。
这不禁让方泽想到，有一次他看见了电信公司的后天监视程序，上面密密麻麻的记载着所有的移动网络这个时候正在浏览什么网页。
方泽看到这种情况之后，问向了辉夜，“你能阻止这个高阶人工智能的行动吗？”
“可以。”辉夜点头回答道，“高阶人工智能也是可以成长的，我在启动之后，已经进化了不少，而这个高阶人工智能是用我的模板建造的，这样的话我就始终走在他前面，我可以中断他的行动，但是却没有办法将他从网络上排挤出去。”
“那也可以。”方泽对着辉夜说道，“你现在立刻阻止这个新生的人工智能对于个人信息的爬取。”
“好的主人，还有什么吩咐吗？”
“对了，你阻止了这个人工智能的爬取之后，你自己对所有的网络个人信息进行爬取，然后建立一个数据库。”
“那样的话，我需要一个庞大的存储空间。”