学海网

毕业论文-百度垂直搜索业务建库统计平台，共44页，22468字
摘 要
近来，垂直搜索越来越受到互联网行业的商家和媒体关注，垂直搜索的模式与价值被逐步的挖掘，渐渐的显露与清晰。以垂直搜索为入口的更多互联网盈利模式被不断的推出和被越来越多的用户接受并使用。百度、谷歌、360等互联网公司也在垂直搜索领域展开了激烈的竞争。
百度垂直搜索产品线主要包括新闻、MP3、图片、视频、地图等搜索业务以及以上各产品线包含的子产品。在百度新的战略计划中，垂直搜索有着更加重要的地位和价值。百度垂直搜索的服务质量也亟待提高与优化。作为产品线中重要的一环，运维工作的高效与准确直接关系着线上服务的稳定与快速。
本论文所介绍的项目，能够为垂直搜索产品线中数据层的重要建库业务提供良好的信息采集与归档功能，并支持可视化的Web页面展示。系统能够提供准确的数据支持，为数据增长趋势提供可靠的数据参考，最终为运维工作带来明显的效率提升。
系统基于Linux服务器平台实现，为图片搜索、视频搜索、百度地图3条产品线，8个重要建库业务提供关键信息挖掘的工具。系统采用MySQL数据库格式化存储，服务器程序基于Python语言的django框架，Web页面采用JS与CSS语言编写。经过测试和上线实际应用，能够完成项目需求的标准，为百度垂直搜索运维团队后端组提供方便快捷的服务。
关键词：垂直搜索；运维自动化；数据可视化

目 录
摘 要 I
Abstract II
引 言 1
1 论文概述 2
1.1 课题背景、意义及目的 2
1.1.1 百度垂直搜索架构 3
1.1.2 课题的背景与意义 3
1.1.3 课题的目的 4
1.2 论文的主要工作 4
2 核心技术介绍 5
2.1 百度Noah运维平台及CT任务调度系统 5
2.1.1 百度Noah运维平台 5
2.1.2 Noah平台CT任务调度系统 5
2.2 Shell脚本 6
2.3 Web开发框架Django 6
2.4 JavaScript与CSS 7
3 系统需求分析 8
3.1 系统总体功能 8
3.2 需求分析 9
3.2.1 系统功能要求 9
3.2.2 系统用例 10
3.3 运行环境 11
3.3.1 硬件要求 11
3.3.2 软件要求 12
4 系统设计与实现 13
4.1 设计的目标 13
4.2 设计遵循的原则 13
4.3 系统架构设计 14
4.4 数据库的设计 14
4.5 功能模块的设计 16
4.5.1 软件模块划分的目的 16
4.5.2 软件模块划分的原则 16
4.5.3 模块划分的概述 16
4.5.4 模块的详细设计与实现 19
5 系统测试 33
5.1 系统测试概述 33
5.2 测试用例设计实例 33
5.3 测试结果分析 35
结 论 37
参 考 文 献 38
致 谢 39

论文的主要工作
论文所研究的主要目标是完成百度垂直搜索业务建库统计平台的开发。通过对目前产品线后端建库业务的服务器部署情况，关键信息提供方式，所需要的关键数据等信息的调研，并根据目前后端运维工作的需求，详细介绍整个系统的设计与实现，描述项目的成功上线，投入实际使用，最终完成需求中的要求的过程。根据以上叙述，论文完成了以下工作：
（1） 第一章：论文概述。主要介绍了课题的背景，目的和意义，以及项目实景应用带来的立意，和未来的发展前景。
（2） 第二章：核心技术介绍。分析本系统的体系设计结构，并对在项目开发过程所用到的核心技术进行了简单介绍。
（3） 第三章：系统需求分析。根据百度垂直搜索业务建库端信息收集的基本需求，与实际工作相集合，完成对项目的总体设计及功能模块的构建工作。
（4） 第四章：系统设计与实现。提出设计目标与原则，对系统进行功能和模块划分，对数据库进行详细设计，详细介绍了本系统的实现过程。
（5） 第五章：系统测试。根据软件工程的测试方法，对系统进行了黑盒测试和白盒测试等分析系统的测试。
（6） 结论：对论文内容简单总结，归纳了百度垂直搜索业务建库统计平台项目开发所带来的收益，和在开发过程中学习到得知识。