yjs项目页面抓取需求文档

《yjs项目页面抓取需求文档》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、YJS项目页面抓取需求文档文件状态□草稿■正式□修改版本1.0批准人生效时间应届生页面抓取需求版本历史记录版本制订者生效时间更改内容审核人审核意见1.0骆安20130219创建文档第3页共20页版本：1.0应届生页面抓取需求目录1.设计目的42.适用范围43.参考文档44.设计稿路径45.YSJ项目抓取55.1.YSJ页面抓取55.1.1.需求描述55.1.2.页面抓取解析55.1.3.文本摘要6第3页共20页版本：1.01.设计目的抓取YJS全职与实习项目，补充网站校园招聘项目为运营提供审核、编辑后台内容素材

2、2.适用范围本文档适用于YJS抓取项目团队，预期读者产品人员、UI设计师、前端工程师、开发工程师、测试工程师等。3.参考文档无4.设计稿路径无Page205.YSJ项目抓取5.1.内容抓取5.1.1.需求描述对应届生每天更新的全职和实习的校园招聘项目进行内容抓取，并根据大街网字典匹配和基本的语意匹配出相关字段帮助运营审核项目。抓取来源：应届生网站（www.yingjiesheng.com）直接抓取应届生网站的项目，包括全职和实习项目全职项目列表页：http://www.yingjiesheng.com/comm

3、end-fulltime-1.html实习项目列表页：http://www.yingjiesheng.com/commend-parttime-1.html抓取频率：一个小时抓取一次，新增项目内容抓取后入库5.1.2.页面抓取以为http://www.yingjiesheng.com/job-001-508-068.html项目为例说明。项目抓取字段项目名称方括号内作为工作地点抓取，应届生用[河南

4、天津]分割方括号后作为项目名称抓取Page20项目描述发布时间、工作地点、来源：名称+链接、职位类型：全职OR实习

5、项目内容清除YSJ内容页面中非项目描述其他所有广告、链接、iframe等干扰内容抓取项目描述内容清除原来字体大小、行间距等样式，保留加粗、颜色、超链接等样式内容转换成统一格式，清除含应届生链接，同时保证图片、表格、附件链接等重要信息完整备注表格有无更好的处理方式1.1.1.文本摘要系统对抓取的内容进行摘要处理，为运营审核后台提供相关数据参考支持。摘要内容要求专业项目内容中招聘目标用户的专业要求与大街字典库比对摘要保存预期摘要举例：市场营销、财务管理、会计学、金融学、工商管理等要求学历项目内容中招聘目标用户的学历

6、要求与大街字典库比对后摘要保存预期摘要举例：本科、学士、硕士、研究生、博士等截止时间项目内容中申请截止、到期、结束、停止时间等时间预期摘要举例：截止时间：2013年6月30日Page201.1.项目页审核后台1.1.1.页面入口处理抓取的YJS项目数据，为运营提供查询、审核、创建、修改、删除等操作；页面入口用户场景运营人员审核抓取项目功能入口大街网后台系统→企业俱乐部功能描述使用抓取项目审核功能交互点击左侧导航，右侧呈现相应内容备注无Page201.1.1.审核列表页审核页表页为运营提供抓取项目查询，审核操作，

7、完成对抓站项目的内容审核管理，操作流程如下图：图1：待审核项目运营处理流程图备注：不同的审核状态进入审核页面的按钮状态不同Page20审核列表页原型：审核列表页面用户场景运营人员使用审核后台管理抓站项目功能入口大街网后台系统→企业俱乐部→抓取项目招聘功能描述查询工具抓站项目ID：用户输入项目ID点击查询后，下方刷新出查询结果更新时间：用户选择更新时间（日期）点击查询后，下方刷新出查询结果项目名称：用户输入项目名称（模糊匹配）点击查询后，下方刷新出查询结果数据列表功能样式：与项目招聘保持一致，显示结果数量、页数，

8、可选择每页显示数量、首页尾页后一页等页面跳转审核状态：用户可选择未审核和审核通过，默认显示为未审核+审核通过列表区域抓站项目ID：抓站项目流水ID项目标题：抓取的项目标题发布日期：抓取来的项目发布日期，格式YYYY-MM-DD行业：显示运营后台添加项目公司所属行业地区：显示运营后台添加项目工作地点，如北京、上海、南京审核日期：最后一次审核日期，格式YYYY-MM-DD审核ID：最后一次审核操作者ID审核状态：未审核、审核通过、审核不通过审核（重新审核）操作：点击审核（重新审核）文字按钮，当前页面跳转去审核详情页

9、面查看页面：点击修改查看页面文字按钮，新开窗口打开项目页面功能交互后台字典、日期控件、交互保持统一Page20备注1.1.1.审核详情页审核列表页面用户场景审核人员使用的抓站内容详细审核页面功能入口大街网后台系统→企业俱乐部→抓取项目招聘Page20功能描述操作功能审核通过：点击按钮后项目状态置成审核通过状态，数据一次性同步到项目后台审核不通过：点击按钮后项目状态置成审核不通过状态，数