第５期 ２０１５年３月 Ｎｏ．５ 无线互联科技・网络地带 Ｍａｒｃｈ，２０１５ 不能无限制地增加爬虫的线程数，因为数据库的容量是有 ４结语 限的，所以我们应该为网络爬虫选择一个适当的线程数， 才能更有效地利用爬虫资源以及空间资源。 文章首先简要介绍了网络爬虫的基本概念及其工作原 理，然后具体分析了爬虫程序的结构和功能。在最后还结 合自己设计的网络爬虫代码进行了详细说明与介绍。 ［参考文献］ ［１］罗刚，王振东．自己动手写网络爬虫［Ｍ］．北京：清华大学出版社，２０１０． ［２】房志峰中文搜索引擎中的分词技术研究［Ｊ］．科学技术与工程，２００８（９） ［３］曾伟辉．深层网络爬虫研究综述［Ｊ］．计算机系统应用，２００８（５）． ［４】余正平．搜索引擎的关键词分析与处理［Ｊ】．情报探索，２００８（５）． Ｄｅｓｉｇｎ ａ Ｗｅｂ Ｃｒａｗｌｅｒ Ｂａｓｅｄ ｏｎ ＷＥＢ ＤＵ Ｃｈａｎｇｙａｎ ＬＩ Ｘｉａｎｇｌｏｎｇ （Ｄｅｐａｒｔｍｅｎｔ ｏｆＥｌｅｃｔｒｏｎｉｃ Ｔｅｃｈｎｏｌｏｇｙ Ｓｃｈｏｏｌ ｏｆＰｕｂｌｉｃ Ｓｅｃｕｒｉｔｙ Ｐｏｌｉｃｅ，Ｎｉｎｇｂｏ ３１５８０１，Ｃｈｉｎｏ Ａｂｓｔｒａｃｔ：Ｔｈｉｓ ｐａｐｅｒ ｉｎｔｒｏｄｕｃｅｓ ｉｎ ｄｅｔａｉｌ ｔｈｅ ｐｒｉｎｃｉｐｌｅ ｏｆ ｗｅｂ ｃｒａｗｌｅｒ，ｔｈｅ ｎｅｅｄ ｔｏ ｄｅｓｉｇｎ ｔｈｅ ｗｅｂ ｃｒａｗｌｅｒ ｉｎ—ｄｅｐｔｈ ｒｅｓｅａｒｃｈ， ｉｎｃｌｕｄｉｎｇ ｔｈｅ ｕｓｅ ｏｆ ｐｒｏｇｒａｍｍｉｎｇ ｌａｎｇｕａｇｅｓ，ｔｏ ｒｅｓｏｌｖｅ ａｎｙ ｗｅｂ ｐａｇｅ，ｏｎ ｔｈｅ ｂａｓｉｓ ｏｆ ｒｅｐｔｉｌｅｓ ｃｒａｗｌｉｎｇ ｔｈｅ ｅｎｔｉｒｅ ｎｅｔｗｏｒｋ，ｕｓｅ ａｎｙ ａｌｇｏｒｉｔｈｍ ｗｉｔｈ ｈｉｇｈ ｅｆｉｃｉｆｅｎｃｙ，ｈｉｇｈ ａｃｃｕｒａｃｙ ｇｒｏｕｎｄ ｇｒａｓｐｉｎｇ ｆｏｒｃｅｓ ｒｅｌａｔｅｄ ｉｎｆｏｒｍ￣ｉｏｎ，ａｎｄ ｓｔｏｒｅｄ ｉｎ ａ ｄａｔａｂａｓｅ． Ｋｅｙ ｗｏｒｄｓ：Ｗｅｂ ｃｒａｗｌｅｒ；Ｍｕｌｔｉｔｈｒｅａｄｉｎｇ；Ｄｅｐｔｈ ｉｒｆｓｔ￣ＷＥＢ ｓｃｒａｐｉｎｇ （上接第４８页） 可以为电力行业提供一个完整的网络管理解决方案。其功 必须有两人同时在场方可进行，＿人操作，＿人监护，并做 能主要在这几个方面：（１）“网络接入控制平台”是广域网 好如何在操作失败而导致网络设备异常的情况下的处理预 里的电力企业和用户进入互联网的人口，广域网里的企业 案，履行必要手续。（２）处理光接口信号时，不得将光发送 就可以使用广域网提供的服务了。广域网外部的用户可以 器的尾纤端面或上面活动连接器的端面对着眼睛，并注意 通过互联网通道或是拨号这些远程接入的方法来进入广 尾纤端面和连接器的清洁。（３）熟练掌握所维护的设备的 域网，从而使用到局域网提供的服务。（２）监控的对象是 基本操作。（４）做好设备的日常巡视工作。（５）对外来人员 计算机病毒、网络状态和性能、用户的合法性以及入侵嫌 （参观者或领导）应讲明道理，关照他请勿动手。 疑、网络资源的使用情况等。（３）在网络管理模型和安全 接入上可以提供很多不同类型的增值服务。 在电力系统中，计算机网络建设越来越庞大，且组网 方式繁多而复杂，自然就加大了维护人员的工作量和故障 计算机应用程序接口和网络应用管理平台可以采用应 定位、处理的难度，这就要求维护人员必须不断提高自身 用程序接口技术，ＣＯＲＢＡ￣Ｈ．ＴＡＶＡ可以让操作系统不同、平台 的业务水平和处理故障的能力，同时要针对实际情况，把 不同的应用程序相互交换信息。以上所述的电力行业网络 以上的定位原则和处理方法做到灵活应用。 应用程序管理模型有机地将电力企业的计算机应用以及 ６结语 网络技术结合起来了，给电力企业计算机应用网络提供了 良好的全面的解决方案。 文章提出的计算机网络应用程序管理模型能够有效 地将电力企业的计算机应用以及网络技术结合起来，能有 效地管理计算机网络、计算机应用程序、计算机系统安全 以及计算机用户，值得大力推广。 ５对维护人员的要求 （１）对运行中的网络设备在进行变更设置的操作时， ［参考文献］ ［１１徐严军，浅谈电力行业网络安全解决方案［］ 价值工程，２０１０（２７）． ［２】叶克江．电力行业网络安全技术研究［Ｊ］．价值工程，２０１０（２８）． ［３］任延冬．电力系统自动化技术发展［Ｊ］．教育研究，２００９（６）． ［４刘振威，杨宁电力系统自动化技术研究［４］Ｊ］．合作经济与科技，２００９（２）． Ｃｏｍｂｉｎｅｄ ｗｉｔｈ ｔｈｅ Ａｎａｌｙｓｉｓ ｏｆ ｔｈｅ Ｅｌｅｃｔｒｉｃ Ｐｏｗｅｒ Ａｕｔｏｍａｔｉｏｎ ａｎｄ Ｎｅｔｗｏｒｋ Ｔｅｃｈｎｏｌｏｇｙ Ｙｕ Ｊｉａｌｉ Ｇｏｎｇｊｉ Ｕｎｉｖｅｒｓｉｔｙ Ｓｃｈｏｏｌ ｏｆ Ｓｏｆｔｗａｒｅ，Ｓｈａｎｇｈａｉ ２０００９２，Ｃｈｉｎｏ （Ｈａｉｂｏｗａｎ Ｐｏｗｅｒ Ｓｕｐｐｌｙ Ｂｕｒｅａｕ ｏｆ Ｉｎｎｅｒ Ｍｏｎｇｏｌｉａ Ｅｌｅｃｔｒｉｃ Ｐｏｗｅｒ Ｃｏ．，Ｌｔｄ．Ｗｕｈａｉ Ｅｌｅｃｔｒｉｃ Ｐｏｗｅｒ Ｂｕｒｅａｕ，Ｗｕｈａｉ ０１６０００，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ：Ｔｈｅ ｄｅｖｅｌｏｐｍｅｎｔ ｏｆｐｏｗｅｒ ｓｙｓｔｅｍ ａｕｔｏｍａｔｉｏｎ ｉｓ ｔｈｅ ｄｅｖｅｌｏｐｍｅｎｔ ａｎｄ ｎｅｔｗｏｒｋ ｔｅｃｈｎｏｌｏｇｙ ｃｌｏｓｅｌｙ，ａｎｄ ｅｖｅｎ ｃａｎ ｂｅ ｓａｉｄ ｔｏ ａｕｔｏｍａｔｉｏｎ ｏｆ ｅｌｅｃｔｒｉｃ ｐｏｗｅｒ ｓｙｓｔｅｍ ｂａｓｉｃａｌｌｙ ｉｓ ｔｏ ｒｅｌｙ ｏｎ ｈｅ ｄｅｖｅｌｏｐｍｅｎｔｔ ｏｆ ｎｅｔｗｏｒｋ ｔｅｃｈｎｏｌｏｇｙ ｔｏ ｐｒｏｍｏｔｅ．Ｔｈｉｓ ｐａｐｅｒ ｄｉｓｃｕｓｓｅｓ ｔｈｅ ｍａｉｎ ａｐｐｌｉｃａｔｉｏｎ ｏｆ ｃｏｍｐｕｔｅｒ ｎｅｔｗｏｒｋ ｔｅｃｈｎｏｌｏｇｙ，ｔｈｅ ｅｌｅｃｔｒｉｃ ｐｏｗｅｒ ｓｙｓｔｅｍ ｏｆ ｃｏｍｐｕｔｅｒ ｎｅｔｗｏｒｋ ａｐｐｌｉｃａｔｉｏｎ，ｔｈｅ ｅｌｅｃｔｒｉｃ ｐｏｗｅｒ ｉｎｄｕｓｔｒｙ ｓｔｒｕｃｔｕｒｅ ａｎｄ ｍａｎａｇｅｍｅｎｔ ｏｆ ｃｏｍｐｕｔｅｒ ｎｅｔｗｏｒｋ ｓｅｃｕｒｉｔｙ． Ｋｅｙ ｗｏｒｄｓ：Ｅｌｅｃｔｒｉｃ ｐｏｗｅｒ ａｕｔｏｍａｔｉｏｎ；Ｎｅｔｗｏｒｋ ｍａｎａｇｅｍｅｎｔ；Ｎｅｔｗｏｒｋ ｓｅｃｕｒｉｔｙ ５０—