新媒体云平台建设-媒体内容发布系统方案

新媒体云平台建设媒体内容发布系统目录目录 21技术方案建议书 41.1 项目背景与需求理解 51.1.1 项目背景 51.1.1.1 党和国家的政策要求 51.1.1.2 省委省政府的战略决策 51.1.1.3 广电总局的技术发展方向 51.1.1.4 XX客户对新媒体的发展规划 61.1.2 需求理解 71.1.2.1 战略目标 71.1.2.2 项目目标 81.1.2.3 项目内容 81.1.2.4 承办单位概况 91.1.2.5 现状描述 101.1.2.6 合理化建议 151.1.3 建设原则 201.1.3.1 化与模块化 201.1.3.2 实用性与可扩展性 201.1.3.3 可靠性与稳定性 211.1.3.4 先进性与兼容性 211.1.3.5 安全性 211.2 平台方案 221.2.1 总体技术架构 231.2.1.1 建设思路 231.2.1.2 总体体系架构 231.2.1.3 系统功能架构 241.2.1.4 系统技术架构 271.2.1.5 系统数据流转和周边关系 291.2.1.6 可提供技术文档 291.2.2 媒体内容发布系统 311.2.2.1 媒体内容发布系统方案 311.3 项目进度计划 1571.3.1 团队组织保障与管理 1571.3.1.1 项目组织概述 1571.3.1.2 项目组织结构 1571.3.1.3 团队沟通管理 1591.3.2 质量管控方案 1631.3.2.1 质量控制体系 1631.3.2.2 质量控制计划 1641.3.2.3 质量控制措施 1641.3.2.4 质量控制程序 1691.3.3 项目实施计划 1741.4 技术支持和售后服务 Error!Bookmarknotdefined.1.4.1 技术服务能力及承诺 Error!Bookmarknotdefined.1.4.2 技术支持方案 Error!Bookmarknotdefined.1.4.2.1 技术咨询和运维支持服务 Error!Bookmarknotdefined.1.4.2.2 故障诊断及修正性维护服务 Error!Bookmarknotdefined.1.4.2.3 适应性维护服务 Error!Bookmarknotdefined.1.4.2.4 系统升级服务 Error!Bookmarknotdefined.1.4.2.5 新增功能开发服务 Error!Bookmarknotdefined.1.4.2.6 故障救援服务 Error!Bookmarknotdefined.1.4.2.7 系统性能评估及优化服务 Error!Bookmarknotdefined.1.4.2.8 定期巡检服务 Error!Bookmarknotdefined.1.4.2.9 建立维护档案服务 Error!Bookmarknotdefined.1.4.2.10 资料定期传送及专题讨论服务 Error!Bookmarknotdefined.1.4.2.11 重大事件服务 Error!Bookmarknotdefined.1.4.3 售后服务方案 Error!Bookmarknotdefined.1.4.3.1 售后服务具体措施 Error!Bookmarknotdefined.1.4.3.2 应急措施 Error!Bookmarknotdefined.1.4.3.3 质保期后的服务 Error!Bookmarknotdefined.技术方案建议书项目背景与需求理解项目背景党和国家的政策要求党的十八大以来，以习近平同志为总书记的党中央高度重视传统媒体和新兴媒体融合发展。习近平总书记在中央网络安全和信息化领导小组会议上发表重要讲话时指出，没有信息化就没有现代化。当今世界，信息技术革命日新月异，对国际政治、经济、文化、社会、军事等领域发展产生了深刻影响。信息化和经济全球化相互促进，深刻改变了人们的生产和生活方式。网络信息是跨国界流动的，信息流引领技术流、资金流、人才流，信息资源日益成为重要生产要素和社会财富，信息掌握的多寡成为国家软实力和竞争力的重要标志。信息技术和产业发展程度决定着信息化发展水平，要加强核心技术自主创新和基础设施建设，提升信息采集、处理、传播、利用、安全能力，更好惠及民生。习总书记还多次在不同场合强调要利用新技术新应用创新媒体传播方式。在此背景下，推动融合发展，打造新型主流媒体，正成为当下新闻单位的重要任务。省委省政府的战略决策省委书记主持召开省委常委会会议。会议提出，建设全省统一的移动政务新媒体平台是积极占领新媒体阵地、更好地履行意识形态主体责任、维护网络意识形态安全的重要手段，是推进媒体融合发展、壮大网上主流思想舆论的重要途径，是实现治理体系和治理能力现代化、密切党委政府和人民群众联系的有效工具。会议决定，以XX客户台新媒体云平台为基础，加快建设覆盖全省、功能完备、互联互通、运行通畅的长江云移动政务新媒体平台。广电总局的技术发展方向广电总局发布的《融合媒体平台建设技术白皮书》中提出了新时代融合媒体的发展方向与技术趋势。文中提到未来的融合媒体应具有以下特征：1.即时传播、海量传播。要树立抢占先机的意识，高度重视首创首发首播，充分挖掘和整合信息资源，多发多播，在信息传播中占据主动、赢得优势。2.充分开放、充分竞争。要树立全球视野，强化市场观念，提高市场营销和产品推介能力，做大做强自身品牌。3、一体化发展。要实现各种媒体资源、生产要素的有效融合，做到你中有我、我中有你，协同发展。4、品质上追求专业权威。要依托强大的采编力量、权威的信息渠道、的采编流程，进行专业化的内容生产，确保报道的真实准确、全面客观。要加强信息资源的挖掘和加工，深耕信息内容，推出思想性强、观点鲜明的深度报道和评论言论，进一步提升信息内容的品质。5、具备即时采集、即时发稿的报道机制。要用好微博、微信等传播平台，加强短视频、微视频的创作生产，丰富报道方式，把报道内容直观形象地呈现出来。6、量身订做、精准传播。既要提供共性内容产品，也要加强个性化内容生产。要认真研究用户的不同需求，有针对性地生产特色信息产品，点对点推送到用户，提高内容的实效性。7、具备多媒体化的展示方式。要综合运用图文、图表、动漫、音视频等多种形式，实现内容产品从可读到可视、从静态到动态、从一维到多维的升级融合，满足多终端传播和多种体验的需求。“新媒体云平台”平台致力于服务我省各级党委政府、媒体单位等，打造我省区域新媒体云平台，打造我省政务新媒体云平台，打造民生服务、政务服务、智慧城市服务的超级入口。完全符合总局对于融合媒体发展的指导与要求。XX客户对新媒体的发展规划XX客户在打造与中部崛起重要战略支点相称的新型传媒集团的实践中，作出了自己的战略决策：用“TV+”拥抱“互联网+”,推动媒体深度融合发展，从而实现体制机制、生产流程、产品形态、传播方式等的系统创新和整体转型。瞄准“建设区域性生态级媒体平台”的长远战略,借鉴互联网的“大数据、云计算”思维,以“新媒体云平台”为依托整合全台资讯和新媒体矩阵,以“媒体云”为平台聚合全省、链通全国。该项目的建设完全符合XX客户对新媒体的发展规划。需求理解新媒体云平台平台建设是科学运用云计算、大数据技术，贯彻落实中央和省委关于意识形态主体责任、媒体融合发展、政务公开等重要文件精神，切实落实各级党委（党组）意识形态主体责任和政务公开责任，积极适应传媒格局和舆论生态变化新形势的重要实践。新媒体云平台平台是广播电视台联合互联网顶尖技术专家，利用云计算、大数据开发的移动政务新媒体云平台，具有国际领先、国内首发的原创技术。具备对全省各级移动政务新媒体产品的快速生成和汇聚、新闻宣传与舆论管理、信息共享、公共服务等多种功能。主要有三大创新能力：一是能够大规模快速定制移动客户端，发布省市县各级新闻和政务信息，聚合微博微信帐号，提供公共服务入口。二是实现全省“两微一端”内容生产的共享互通，形成我省新媒体内容的“云稿库”，打造我省信息生产和汇聚的“中央厨房”。三是通过全平台“一键推稿”和“一键删除”功能，实现实时信息管控。新媒体云平台平台可支撑万级新媒体产品，服务亿级用户，具有“3+2+N”功能，即“三大平台”：全省新媒体产品汇聚平台、全省媒体融合云平台、全省新媒体管理平台；“两大入口”：“智慧”的超级入口、世界看的超级入口；“N个产品”：支撑省市县党政机关、省市县媒体、公共服务部门、高校和企事业单位的N个新媒体产品。战略目标打造“政务+新闻+服务”新媒体大数据中心及覆盖全省、功能完备、互联互通、运行顺畅的移动网络公共信息服务体系，形成良性发展的新媒体生态圈。最终实现以下目标:·统一平台，分级运营统一“新媒体云平台”系列品牌，统一建设软硬件支撑平台，统一监管各级信息发布，政务媒体服务融合，各级单位自主运营，实现政务服务、政务信息、新闻资讯、民生服务互联互通。·联合运营分步建设广告、营销、版权、电商、游戏等联盟打造共建共赢的平台联营机制。·资源共享基于软硬件技术共享，内容自动汇聚，可视化信息传播，用户统一认证，用户行为跟踪记录等机制，实现技术、内容、渠道、用户、数据、管理的多元共享。·全面开放提供常用的API接口和开发文档，提供模板、风格和应用开发机制，通过开放平台与应用商店满足个性化需求变得简单可行。项目目标根据新媒体云平台平台总体规划，按照“统一规划，分步实施”的原则进行系统建设。本期项目建设完成后，能够为新媒体云平台平台提供统一的数据处理和共享能力，提供开放的应用接入和支撑能力，提供满足互联网用户需求的业务服务能力，提供有效的新媒体产品运营能力，实现数据的全平台共享，实现服务能力的全平台呈现，实现内容发布的全平台管控，做到对微博、微信、APP客户端等新媒体发布渠道的一键推稿，一键删稿。部署全省各级移动客户端，实现交通出行类、医疗类、教育类、纳税类、维权类、社会保障类、政务服务类等服务的快速上线，为公众提供服务。项目内容本项目建设主要包含十个方面的工作：(1)用户统一认证平台和内部管理门户系统开发实施；(2)统一的媒体内容发布平台开发实施；(3)统一的政务民生服务平台开发实施；(4)舆情监测系统和两微一端统一管控系统开发实施；(5)统一的运营支撑平台开发实施；(6)统一的大数据分析平台和用户数据中心开发实施，包含大数据处理与管控平台的购置与定制开发、用户画像管理系统的购置与定制开发、媒体内容标签库开发实施和智能推荐引擎系统的购置与定制开发；(7)云服务总线开发实施；(8)统一运维监控平台开发实施；(9)移动客户端开发实施；(10)系统总集成实施；承办单位概况广播电视台（集团）是一家拥有广播、电视、电影、电视剧、新媒体、有线网络、报刊等资源的综合性传媒机构。2011年广播电视台成立台属、台控、台管的长江广电传媒，成功搭建起宣传性事业和经营性产业协调发展的全新体系。台下设综合办公室等职能部门7个，龟山广播电视发射台等所属单位7个。台（集团）内容部门19个，拥有卫视等12个电视频道，之声等10个广播频率，网络广播电视台等4家新媒体。集团暂设机构24个，其中，经营管理办公室、财务管理部等内设机构7个；我省广播电视信息网络股份有限公司（上市公司）、长江垄上传媒有限公司等控股公司5个；原有所属46家企事业单位（包括35家企业单位，7家转企改制单位，4家事业单位）整合为16家。员工总数1.2万人，总资产102.52亿元。广播电视台承担着省委、省政府重要的宣传喉舌功能，旗下的XX客户长江新媒体集团作为媒体融合的积极践行者和推动者，在媒体融合方面的探索，不仅得到了中央、省各上级部门的肯定，还吸引了央视国际、新华社、人民日报等央媒，以及深圳、河南、云南、吉林等多家省级媒体同行前来交流学习，同时也引起了业界上市公司的兴趣，前来洽谈合作。XX客户长江新媒体集团的微摇科技，作为“微信摇电视”全国首发试点，自2014年6月29日在卫视《如果爱》节目实现全国电视“第一摇”以来，已为CCTV-8电视剧频道、CCTV-2财经频道、湖南卫视、江苏卫视、浙江卫视等14家卫视提供了微信摇电视服务，并为全国百家省级地面电视频道、省会城市电视台推出“百台计划”，为全国1000家县级电视台推出“千县计划”，帮助全国广电媒体通过微信摇电视，实现广电媒体与移动互联网的连接，从而创造新的商业模式。目前微摇“一央十卫百台千县”的互动平台，已经是全国最大的T2O互动平台，携程、途家、艺龙、微信电影票、腾讯理财通均已通过微摇平台投放电子优惠券。微摇2014年成立时注册资本1000万元；2015年3月完成A轮融资，腾讯系微影、海航资本等成为微摇新股东，公司估值达到1.46亿；2015年11月完成第二轮融资，万达投资领投，公司估值达到4.23亿元。XX客户长江新媒体集团与电信合作开展的“幸福新农村”IPTV项目，探索了一条农村信息化惠民服务的新路子。“幸福新农村”在功能开发上有三大显著特点：一是三屏互动，各类电视节目和资讯，用户不仅可以通过电视机收看，还可以通过电脑、手机收看。二是十户联防，以行政村为单位，每10户家庭组成一个联防小组，小组内发生了任何紧急的状况，在“幸福新农村”首页会弹出一个紧急通知，实现多方救助。三是“幸福新农村”采用“一村一界面”的方式，以行政村为单位，通过定制化的IPTV开机首页面，在丰富的IPTV电视节目基础上，结合行政村特色及需求，辅之以村委公告、地方新闻、三农热线、远程党教等特色应用栏目，为行政村推送各类“富农、惠农、便农、乐农”信息。满足了农村在政务、生产、文化、生活等各个方面的信息化需求，成为建设和谐农村、平安农村、现代化农村的重要举措。该项目得到了省委书记李鸿忠、省长王国生的充分肯定，认为该项目有效解决了农村信息传达“最后一公里”的问题，是加强农村基层组织建设的重要抓手，省委组织部将其作为创新项目予以推介。目前，广播电视台以XX客户长江新媒体集团为建设责任主体，集合全台力量，整合全省资源，借力全国互联网公司的先进技术，全力打造新媒体云平台平台。现状描述项目概述党的十八大以来，以习近平同志为总书记的党中央高度重视传统媒体和新兴媒体融合发展，习总书记多次在不同场合强调要利用新技术新应用创新媒体传播方式。在此背景下，推动融合发展，打造新型主流媒体，正成为当下新闻单位的重要任务。xxx年2月29日，我省委书记李鸿忠主持召开省委常委会会议,传达学习2月19日习近平总书记在党的新闻舆论工作座谈会上的重要讲话精神。会议决定，以XX客户台新媒体云平台为基础，加快建设覆盖全省、功能完备、互联互通、运行通畅的新媒体云平台移动政务新媒体平台。新媒体云平台平台建设是科学运用云计算、大数据技术，贯彻落实中央和省委关于意识形态主体责任、媒体融合发展、政务公开等重要文件精神，切实落实各级党委（党组）意识形态主体责任和政务公开责任，积极适应传媒格局和舆论生态变化新形势的重要实践。新媒体云平台平台是广播电视台联合互联网顶尖技术专家，利用云计算、大数据开发的移动政务新媒体云平台，具有国际领先、国内首发的原创技术。具备对全省各级移动政务新媒体产品的快速生成和汇聚、新闻宣传与舆论管理、信息共享、公共服务等多种功能。主要有三大创新能力：一是能够大规模快速定制移动客户端，发布省市县各级新闻和政务信息，聚合微博微信帐号，提供公共服务入口。二是实现全省“两微一端”内容生产的共享互通，形成我省新媒体内容的“云稿库”，打造我省信息生产和汇聚的“中央厨房”。三是通过全平台“一键推稿”和“一键删除”功能，实现实时信息管控。新媒体云平台平台可支撑万级新媒体产品，服务亿级用户，具有“3+2+N”功能，即“三大平台”：全省新媒体产品汇聚平台、全省媒体融合云平台、全省新媒体管理平台；“两大入口”：“智慧”的超级入口、世界看的超级入口；“N个产品”：支撑省市县党政机关、省市县媒体、公共服务部门、高校和企事业单位的N个新媒体产品。项目总投入情况项目总投入约2.5亿元。申请扶持7000万元,单位自筹1.8亿元。预期目标新媒体云平台平台是以XX客户长江新媒体集团为建设责任主体，集合国内顶尖的互联网公司和IT业界顶尖技术专家，利用云计算、大数据技术开发的一款互联网平台级产品。本次系统将建成一个全国领先的“长江号信息云航空母舰”，打造“政务+新闻+服务”新媒体大数据中心及覆盖全省、功能完备、互联互通、运行顺畅的移动网络公共信息服务体系，形成良性发展的新媒体生态圈。网络及硬件环境现状新媒体云平台平台现有资源服务器目前新媒体云平台项目有主机服务器13台，虚拟机50多台，实体服务器2台。负载均衡使用一台A10作硬件负载均衡，利用定义在A10上面的虚拟IP地址来为用户的一个或多个应用服务器提供服务。因此，它能够为大量的基于TCP/IP的网络应用提供服务器负载均衡服务。需要做负载均衡的机器有：·对外web服务器集群·后台内容管理服务器集群·mysql主服务器集群·mysql从服务器集群·附件服务器集群·搜索服务器集群·视频点播服务器集群出口带宽新媒体云平台项目出口带宽800M，采用的是中国电信的光纤接入，同时使用CDN将对外交付带宽扩大到15G。融媒体平台可使用的资源网络目前融媒体架构如上图，网络出口通过安全网关分别与外部域的新闻网、制作网和媒资网进行连接，安全网关下连2台核心交换机，核心交换机之间建立主备关系，业务系统中的刀框及部分核心业务直接连接到核心交换机上。部分PC服务器设备连接到2台接入交换机上，然后接入交换机再与核心交换机之间进行互联。本期新媒体云平台项目新增安全设备如下：A、一套数据库审计B、一套运维审计C、一台WAF设备服务器台目前现场有2个刀箱，每个刀箱内有7个刀片，共14台刀片服务器。每个刀片内存为128G。若每台服务器使用8G，每个刀片能虚拟16台服务器。每个刀箱能虚拟112台，两个刀箱总共虚拟出224台。目前已使用虚拟机为62台，剩余162台。存储存储总容量为389TB，已使用12TB，剩余377TB。计划扩容的资源计划扩容的服务器为26台（包括8片刀服务器）。其中16台将用VMware虚拟化再虚出150台虚机；剩余10台服务器用作大数据分析平台。存储也将利用原融媒体平台的资源扩到300T。应用系统在保证现有系统安全平稳运行的基础上，充分考虑新媒体云平台移动政务新媒体平台的定位和未来技术发展，给出现有系统切实可行的接入、集成、迭代更新的技术方案和实施方案。投标人须在2016年8月31日前，妥善完成原有平台数据迁移、全部用户数据、客户端迁移等工作，产品功能、技术性能和用户体验不得低于原有产品功能。信息安全现状现有网络环境中，仅有2台出口防火墙设备，本期平台新增了一台WAF、一套数据库审计和一套运维审计系统，补充了之前在安全审计方面的不足，但与等保三级要求还是有一些差距。甲方参与人员情况本次项目甲方集合了国内多家顶尖的互联网公司和IT业界顶尖技术专家作为咨询团队，XX客户直接参与的研发团队20多人，均为在XX客户工作的核心业务骨干，包括有知名高校教育背景的青年专家、有海外工作和学习经历的技术专家和高级工程师。合理化建议关于网络及硬件方面XX客户新媒体云平台平台项目本期以满足系统基本功能，基本性能指标为主，不需要过高的资源，因此在现有机房充分利旧融媒体平台设备。随着时间的推移，现有机房设备无法满足新媒体云平台的发展需求，新媒体云平台机房的规划已提上日程，根据新媒体云平台项目的需求提出如下建议：网络 建议未来新媒体云平台平台网络在出口层部分可以通过物理隔离的方式来对不同出口进行相关的安全隔离，各出口有其独立的防火墙设备。对于互联网出口方向还需要部署专门的防DDoS和流控设备。在互联网出口方向建立一个专门的DMZ区域，将对外提供服务的所有服务器都部署在这个区域内，DMZ区域内部署独立的WAF、WEB防篡改和负载均衡等设备。核心网络建议采用高端的数据中心级交换机，两台核心交换机之间可以使用现在主流的横向虚拟化技术，将两台物理设备虚拟化成一台逻辑设备。同时下连的汇聚交换机和接入交换机也可以与核心交换机之间采用纵向虚拟化技术，这样可以将整个核心网络部分的所有网络设备虚拟为一台逻辑设备，如此极大的较少了网络中的二层环路和降低的运维成本。核心交换机上旁挂负载均衡器、入侵检测系统等安全设备，同时可以将核心网络通过VRF等技术，进行逻辑隔离，将内网区域和外网区域完全的隔离出来，核心交换机上为两个区域维护独立的路由表，两个区域之间相互不影响。虚拟化平台云平台基于虚拟化技术实现，虚拟化是一个抽象层，它将物理硬件与操作系统分开，从而提供更高的IT资源利用率和灵活性。虚拟化技术可以实现具有不同操作系统的多个虚拟机在同一物理机上独立并行运行。通过采用服务器虚拟化技术，将服务器进行虚拟化资源整合，将原有冗余的物理服务器削减，将分散的资源集中，从而减少原有服务器数量，提高服务器的利用率。目前X86平台虚拟化领域主要产品有VMware、KVM、Hyper-V、CitrixXen。通过对虚拟化软件的成熟度、核心架构、容纳能力、高可用性、兼容性等进行对比，VMware和KVM具有领先的优势。高可用对比表 X86虚拟化技术功能对比 VMware KVM Hyper-V Xen 虚拟机在线迁移（无停机） 有 有 有 有，但不支持FC-SAN的外部存储 自动负载均衡 有 有 有 需要第三方工具 宕机后的自动转移（有短暂停机） 有 有 利用MSCS 有，但不支持FC-SAN的外部存储 宕机后的自动转移（无停机） 有 有 有 无 在线的存储迁移（无停机） 有 有 有 无兼容性对比表 X86虚拟化技术功能对比 VMware KVM Hyper-V Xen 支持32位的服务器 是 否 否 只能运行Linux虚拟机 支持64位的服务器 是 是 是 是 支持有虚拟化指令的处理器(Intel-VT,AMD-V) 是 是 是 是 支持所有Windows 是 是 部分支持。不支持Windows2000/NT及更早的OS 部分支持。不支持Windows2000/NT及更早的OS 支持所有Linux 是 是 只支持SUSE10 是 支持其他OS，如SCO、Solarisx86 是 是 否 否VMware作为国外商业化产品，价格昂贵，且不符合国产化的要求，建议使用KVM加上OpenStack（根据需要可以在此基础上做深度定制化开发）作为云平台建设的方案。大数据分析平台新媒体云平台本期项目中已经使用OCHadoop大数据引擎创建了大数据分析平台，建议新媒体云平台机房在现有大数据分析平台的基础上做大数据分析平台扩容：1）在线扩容OCHadoop由一个Namenode和一定数目的Datanodes组成。Namenode是一个中心服务器，负责管理文件系统的名字空间(namespace)以及客户端对文件的访问。集群中的Datanode一般是一个节点一个，负责管理它所在节点上的存储。Namenode执行文件系统的名字空间操作，比如打开、关闭、重命名文件或目录。它也负责确定数据块到具体Datanode节点的映射。Datanode负责处理文件系统客户端的读写请求。在Namenode的统一调度下进行数据块的创建、删除和复制。在集群中的两台服务器上部署Namenode实例（一主一备），而集群中的其它机器分别运行一个Datanode实例。可扩展性是产品的一个重要特性，向集群中添加节点是很容易实现的。添加一个新的DataNode节点，首先在新加节点上安装好OCHadoop，要和NameNode使用相同的配置（可以直接从NameNode复制），修改"/usr/Hadoop/conf/master"文件，加入NameNode主机名。然后在NameNode节点上修改"/usr/Hadoop/conf/slaves"文件，加入新节点主机名，再建立到新加点无密码的SSH连接。提供的OCManger产品中可以便捷的实现集群的节点扩容，管理员无需登录服务器进行复杂的部署调试工作，只需要建立服务器的互信后直接通过管理界面即可完成集群的扩容工作。2）负载均衡在大数据平台中企业的内外部采集的全量数据都是存储在HDFS分布式文件系统中。HDFS的数据也许并不是非常均匀的分布在各个DataNode中。特别是当现有的集群上增添新的DataNode节点。当新增一个数据块（一个文件的数据被保存在一系列的块中）时，NameNode在选择DataNode接收这个数据块之前，会基于负载均衡考虑到很多因素。其中的一些考虑的是：·将数据块的一个副本放在正在写这个数据块的节点上。·尽量将数据块的不同副本分布在不同的机架上，这样集群可在完全失去某一机架的情况下还能存活。·尽量均匀地将HDFS数据分布在集群的DataNode中。3）在线升级OC-Hadoop的优化通过调整参数和打补丁的方式，补丁采用rpm包，参数和补丁包均可以通过图形化用户界面实现自动更新。OC-Hadoop的更新区分管理节点和数据节点，如果更新管理节点，会逐个更新并重启管理节点，管理节点内部会自动切换，管理节点的HA保证现有系统不受影响；如果更新数据节点，会逐个更新并重启数据节点，数据节点是分布式架构，数据有多个副本，计算任务能重新分配至其他可用节点重新计算，保证了系统不受影响。OC-Hadoop的优化是向下兼容，保证原有数据文件不受影响。关于应用系统迁移建议现有系统迁移和数据迁移采取以下迁移方案：1.现场调研，分析系统结合应用系统的业务功能和使用情况，对系统进行分析，分析系统的目的在于了解系统，判断系统移植的工作量及确定移植工作的重点和方案，主要包括以下一些内容：·后台操作系统是什么及其版本信息，Windows、Unix、Linux等。·后台数据库是什么及其版本信息，是SQLServer、Oracle、Informix还是其它。·前台开发工具是什么及其版本信息，是.NET、JBuilder、Delphi还是其它。·应用系统采用了什么开发模式，C/S还是B/S模式。·应用系统使用的接口。·相关的一些开发组件及其版本信息。·相关的运行环境及其版本信息，如Tomcat、.NETFramework等。数据库的相关信息，主要有几个库，这些库之间的关系。·涉及到的数据类型。·是否使用到了视图、存储过程、存储函数、触发器、序列等；如果没有使用到这些，后台数据库的移植工作将主要是进行数据迁移；如果用到了这些，且数量较多，后台数据库的移植工作将是脚本的移植转换工作。·是否用到了后台数据库的系统字典，因各数据库的系统字典格式和内容均不一样，这时候需要分析原数据库的系统字典的涵义，只能根据使用的实际情况作相应的处理。·系统的运行规模和效率要求，如并发访问量，使用的频度，时间响应要求等，主要是确定优化的方案，如果要求不高，优化的时候主要是采用创确定方案在分析了系统之后，应确定移植的重点和难点，并确定移植方案。2.搭建环境，系统并行搭建环境包括搭建原系统运行环境和新系统环境，让新老环境同时运行，便于后续做功能和性能对比测试。3.系统移植，保持不变在功能移植的过程中，保持一个原则就是不改变其应用逻辑，因为在功能移植的阶段重点是在解决系统差异上面，如果过多的考虑应用逻辑问题，移植工作的进度将会受到影响，也增加了移植工作的难度，同时如改变应用的程序逻辑，将存在功能修改错误的风险。后台数据库的移植工作主要是脚本的移植和数据迁移工作。一般采用的顺序是先进性脚本的移植，再进行数据的迁移。4.系统测试，保证完整功能移植完成之后，需要进行一个完整性测试，主要包括功能测试和性能测试，测试主要考察功能测试点是否能够正常执行同时要考察测试结果数据是否正确。关于信息安全建设现有网络安全设备、数据库审计系统和运维审计系统，与等保三级要求还是有一些差距。建议补充以下几方面的安全设备：入侵检测设备，防DDoS攻击设备，防病毒能力设备和日志审计系统等。另外，建议本次项目在实施过程中制定合理的管理办法以及项目实施办法，保障项目安全，有序的实施。建设原则标准化与模块化平台需基于通用标准、协议，系统采用模块化体系架构开发，各模块间彼此有接口又相互独立，各个功能模块可拆分、可选、可定制，支持将来各模块功能的单独扩展和定制。系统提供开放性的标准化插件接口，可扩充系统的功能应用。实用性与可扩展性平台结合我省的具体要求，可以充分满业务支撑要求，具有很强的适应性，应充分考虑了与现有各应用系统的集成和新系统的建设，应具有较强的可扩展性。可靠性与稳定性平台必须具备较高的可靠性与稳定性，应在资源使用、数据存储等方面设计合理，系统后台支持应采用目前为业界认可的软件系统,系统设计时应充分考虑各类容错和冗余机制，确保系统稳定运行。先进性与兼容性平台应使用先进的虚拟化、云计算、大数据、网络安全等技术，能够根据未来业务需求平滑扩展。在采用“私有云+公有云”架构基础上，充分利用“楚天云”资源、楚天网络IDC设施及商业公有云，使系统具备能力弹性。安全性平台应满足网络安全和云计算安全的各项要求，应具备严格的身份认证功能，完善的用户权限控制机制，完善的日志及跟踪功能，方便的数据备份及灾难恢复能力。保证系统在用户认证、数据传输和数据存储等多方面的安全要求。平台应具备集中管控，满足安全播出、可管可控要求的各项功能。平台设计方案总体技术架构建设思路构建一个平台和三级支撑,实现统一部署、统一维护、纵向联通、横向融合。总体体系架构·基础设施层(IaaS)基础设施层是支撑整个平台的硬件设备和网络平台，建立完善的网络系统、主机系统、安全系统、存储系统和系统基础软件等系统，并通过虚拟化等技术手段合理组织、分配和管理基础资源，为平台支撑层和应用运营层软件提供高效、灵活、方便的基础支撑服务。·平台支撑层(PaaS)平台支撑层主要包括内容生产平台、大数据分析平台和能力共享平台。本层围绕服务总线组织设计，平台的组件通过封装成服务在服务总线上进行注册，为应用系统提供统一的服务支持，通过服务总线对注册的服务进行调度、监控、管理。政务民生服务应用通过云服务总线所提供的集成服务进行相应的集成，集成方式可包括页面集成、应用集成、数据集成、安全集成以及流程集成等。如：水电缴费、交通罚单处理等。对平台中的服务根据其所提供的方式和内容进行分类管理，可分为业务应用类服务、基础类服务等。内容生产平台与云资源库、大数据分析平台共同构成作为本层的基础，为上层各服务的提供支撑。大数据平台进行统一数据采集，以及与内外部进行数据交换和共享。·应用运营层(SaaS)提供统一门户管理界面，提供用户的统一认证和鉴权能力；综合业务运营包含媒体内容管理、政务服务管理、用户中心、结算中心和运营决策；支撑运营三类应用：新媒体、政务和民生服务应用，支撑两微一端(新媒体云平台客户端、微博和微信)的信息管控。系统功能架构·已建设内容(橙色部分)当前已通过融媒体平台项目建设了基础设施环境和融媒体软件，实现新媒体云平台无缝对接媒资、广播和新闻网等资源信息。·本期建设内容(绿色部分)1)建设支撑高并发的用户统一认证平台和内部管理门户移动化快捷登录模式建设，为所需的快捷、海量用户登录提供保障。构建统一的用户注册认证鉴权系统，实现单点登陆。面向业务运营与系统运维人员提供内部管理门户，实现内部使用各系统的统一单点登录，降低内部用户管理的复杂度，提高管理效率。2)建设统一的媒体内容发布平台平台按照统一管理、分级运营的原则，承载省市县各级两微一端、网站、移动网站各类新媒体产品，提供统一的内容和能力支撑平台，发布省市县各级新闻和政务信息，聚合管理微博微信和第三方内容信息，构建完善的融媒体发布体系。3)建设统一的政务民生服务接入平台政务民生服务接入主要是接入政府职能部门提供的各类审批、证明、查询、缴费等服务，建立一个政务民生服务接入平台，通过标准化接口，实现政务民生服务的接入、管理和监控功能，支持个性化政务民生应用集成，形成统一的政务民生服务库。4)建设舆情监测系统和两微一端统一管控系统以政府舆情监控分析为应用目标，以政府关注的重点关键词、专题、舆情信息为核心，在互联网多种渠道进行有效搜集的基础上，综合先进的数据处理、文本分析、机器学习算法及技术，构建面向政府的舆情信息系统，以实现政府对反腐、反恐、涉华、维稳、民生舆情、征信等内容的监控与分析。实现全平台内容信息的统一管理，对入驻平台的网站、APP、微信、微博等新媒体产品发布的信息，进行全网监控。能有效监管两微一端和网站信息，实现一键发布和一键删除功能。提供对相关管理部门的管控接口。5)建设统一的运营支撑平台着眼“新媒体云平台”未来运营发展的需要，提供完善的运营支撑能力。按照业务实际情况，实现用户管理、积分管理、活动管理等核心功能，提供整体的运营支撑能力，满足“新媒体云平台”针对各类细分用户的运营需要。6)建设统一的大数据分析平台和用户数据中心根据渠道终端上采集到的用户基础信息与行为信息，建设统一的用户资源库，并进行统一用户管理，将全网用户信息标准化，用户信息集成化，用户服务集中化。集中存储管理所有用户信息，建立统一用户模型，提供统一用户信息服务能力，促进用户信息深层利用，实现“以用户为中心”的发展战略。在统一用户数据中心建设的基础上，基于用户基础数据与行为数据，利用大数据挖掘技术，建立用户画像体系和内容标签体系，实现跨终端的用户个性化内容推荐，提升用户体验，增强用户粘性。7)建设云服务总线面向内部应用系统和外部媒体和政务民生服务的接入，提供基于内容生产平台和大数据分析平台的服务管理、服务代理、服务编排和服务保障能力，提供统一的数据服务接口能力，提供标准接入及管理规范，支撑对内和对外应用的有效管控。8)建设统一运维监控平台构建平台的统一运维和监控能力，实现资源服务管理、运维管理、门户应用等核心功能，有效保障系统的正常运行和日程维护。以运营服务为理念进行设计，目标是提供以用户体验为导向的服务，实现基础设施即服务、平台即服务、监控运维即服务和安全即服务。9)建设移动客户端汇聚全省两微一端产品和第三方数据资源，针对地市县的需求，大规模快速定制移动客户端，有效支持个性化需求，并部署开通。APP手机客户端应包括政务公开、办事大厅、民声热线、新闻发布、两微汇聚、视音频服务、多屏互动、频道共享等功能。根据运营推广的要求，完成APP手机客户端的各项功能的定制开发。·未来建设内容(蓝色部分)1)建设数据资产管理，形成数据驱动生产模式，聚合内外部数据，挖掘有效价值，形成标准的数据产品服务，提升用户对新媒体云平台的使用粘性。2)建设服务能力系统，例如广告投放、挖掘工具和自助分析，提升数据自助取数、分析和挖掘使用的能力，具备新媒体云平台广告精准投放的能力。3)建设能力开放API标准，具备对外服务衔接能力；建设统一的开发测试平台，有效管控内部信息资源的应用开发流程，形成标准化作业和上下线各类应用。4)建设计费中心，形成客户运营商模式，具备费用结算能力，有效支持业务运营。建设百花齐放的应用中心，合理化管理媒体应用、政务应用和服务应用。系统技术架构本项目涉及的技术主要有:系统技术架构基于Hadoop分布式计算体系构建，可以满足计算能力线性扩展、多租户能力、数据汇总能力；批处理场景采取Hadoop的Map/Reduce、Hive或者Spark来完成；流式数据处理采用Sparkstreaming和Sparksql实现，高效查询服务基于Hbase及redis缓存技术实现。整体架构可分为资源采集层、中央厨房层、应用层、服务层。在数据抽取方面，面向新媒体云平台客户端等，通过SDK、埋码等方式采集用户观看、浏览等行为信息。监测内容推荐效果，追踪用户后续行为。面向传统关系型数据库、数据文件等提供高效的数据、文件采集技术。通过Flume计算框架，实现日志文件（如web日志、APP日志等）采集与解析；通过FTP方式实现对数据文件的采集；采用Kafka实现对消息数据的采集；采用Sqoop方式实现将数据库加载到HDFS文件系统。数据存储与计算方面，基于分布式文件系统实现海量数据高效存储。支持多种数据结构的混合存储与高效访问，为数据导入、数据分析、事务服务提供支持，数据类型包括但不限于：结构化数据、非结构化数据、半结构化数据。应具备文件多副本冗余、节点错误告警等功能，支持多种数据压缩格式、支持数据存储动态扩展、支持动态负载平衡、具备可扩展性等基本功能。采用分布式文件系统提供统一的大数据数据存储，满足全网全量数据留存；基于Yarn提供跨平台的资源管理，满足资源的统一调度与管理；采用Hadoop和Spark实现非实时ETL，采用Map/Reduce、Hive、Spark实现海量数据的批处理，主要处理用户数据中心的数据处理；采用Spark支撑数据实时处理；采用Hbase、Redis等提供海量数据高并发查询，主要针对用户记录、昵称、观看记录等海量数据查询需求。在数据访问方面，基于分布式数据库及缓存服务，提供高效的查询服务，满足高并发条件下的快速访问需求。并发访问能力支持线性扩展，并提供高可靠方案。支持资源隔离，在极端情况下，只损失部分用户访问需求，而对其他用户能够无感知的进行前台访问。应用库、内外开放资源库采用Mysql构建前台库，满足应用对数据的需求。内容推荐方面，基于用户画像进行智能推荐。用户画像是新媒体云平台产品运营和精准营销的基础，用户画像的核心技术是实现用户特征标签化，标签通常是人为规定的高度精炼的特征标识，如年龄段标签、地域标签。通过画像技术，可以做分类统计和数据挖掘应用。系统数据流转和周边关系1)新媒体云平台与数据资源侧系统的关系·融媒体平台需要从媒资库、新闻网等周边系统获取视音频、新闻素材等信息，作为内容生产平台的基础数据。·内容生产平台需从经视、网络、PGC等周边系统直接获取信息。·内容生产平台收录本台节目直播信号和地方台流信号。·内容生产平台对视音频、新闻材料制作完成后，同步到公有云CDN。·内容生产平台对视频转码完成后提供给IPTV。2)新媒体云平台与外部集成合作系统的关系·具备集成市县提供的音视频、图文、稿件、节目单、直播流、微直播等能力。·新媒体云平台发布外部应用接入规范，具备集成市县政务民生服务的能力。3)新媒体云平台内部数据流转的关系·内容生产平台对媒体信息加工完后加载入媒体内容库，大数据分析平台处理完用户、政务等数据后同步到用户库和政务服务库。·云资源库包括媒体内容库、用户库、政务服务库和开放资源库，是新媒体云平台平台的核心应用资源库，聚拢内外部加工处理后的媒体内容、用户、政务服务等数据，支撑内外部应用和统计分析；可提供技术文档公司作为国内的大型软件提供商之一，对于文档工作十分重视。在工程中，我方将配置专门的文档小组整理产品研发、工程施工和售后服务等各阶段的文档资料。技术文件指工程实施过程中涉及的所有文件。根据质量保证体系的要求，针对主机系统、网络和应用软件开发，将主要技术文件分阶段归类如下：1. 合同阶段《技术方案建议书》2. 需求分析阶段《需求规格说明书》3.工程施工阶段《总体建设方案说明书》《概要设计说明书》《详细设计说明书》《系统集成方案》《平台部署方案》《产品部署方案》《测试方案计划书》《系统功能测试报告》《系统性能测试报告》《产品使用》《产品部署安装手册》4. 工程验收阶段《项目初验申请报告》《项目终验申请报告》5. 维护阶段《系统日常维护手册》6.其它培训资料、系统升级修改相关文档7.作为总集成商，制定并提供以下标准规范《应用服务接入标准规范》《服务总线管理规范》《数据库开发及使用标准规范》《数据共享和交换标准规范》《网络及通信标准规范》《信息安全标准规范》《运维管理标准规范》《政务民生服务接入规范》《内容生产平台接入规范》以上技术文件由卖方分阶段向买方提供，提供全套技术文件五份(电子版和文档手册)。媒体内容发布系统媒体内容发布系统方案平台概述媒体内容发布平台致力于服务我省各级党委政府、媒体等单位，打造我省区域新媒体云平台，及我省政务新媒体云平台，形成民生服务、政务服务、智慧城市服务的超级入口。该平台借助互联网将广电新闻媒体资源、政务服务信息、网络舆情信息等海量数据汇聚到统一平台，同时该平台将对接政府各部门的电子政务数据库，实现全省政务公共服务集群化、矩阵效应。通过对内容资源的管理、内容的快速发布、终端内容的有效管控，实现“PC网站+手机网站+手机客户端+平板客户端”的多终端一体化展现，实现全省各地、各部门移动政务服务的互联互通、便捷高效、统一服务。平台符合如下标准要求：·支持多站点化：可绑定独立域名，提供丰富的应用、模板和风格选择；支持站点间数据共享，快速开通新站点。可支撑5000以上独立域名的管理发布能力，并可根据系统发展提供扩展能力。·支持多终端分发：“PC网站+手机网站+手机客户端+平板客户端”多终端一体化，支持内容一次发布多屏呈现。·支持全媒体发布：提供图文、图集、视频和音频的全媒体内容融合展现方式。·支持社交化：编辑可一键推送内容至微博、微信等主流社交和自媒体平台，高效统一维护多平台内容。网友也能一键分享内容至社交平台，方便信息传播，并带来更多的访问量。·支持开放性：提供API接口和开发文档，实现外部资源的汇聚。提供模板、风格和应用开发机制，实现产品个性化定制需求。·实时分析：为编辑、运营等不同角色人员提供相应的实时数据报告。·统一管控：与舆情监控等系统联动，实现实时监控平台上的舆情信息；支持全平台群发稿件，各子站发布情况统计回流；支持全平台删除稿件，自动删除关联的微信微博信息。·快速部署：支持网站和两微一端产品方便快速的推广部署，易于管理。技术架构1）系统充分满足各种应用与表现形式的开发需要，内容和表现分离，完美支持UTF8、DIV+CSS。系统需充分考虑编辑的典型使用习惯与特点，做到功能强大，布局紧凑，使用便捷；2）系统具有良好的可扩展性，以满足网络媒体快速增长和变化需求；3）系统接口采用XML技术统一数据交换格式，使用XMLSchema进行数据标准规范的定义和描述，对WEB服务的支持；4）采用现有成熟产品和技术进行建设，提升项目实施的质量；5）界面设计考虑到易于操作、易于使用、界面友好等问题；6）整个系统将采用国际流行和通用的三层架构以及面向对象的开发技术进行设计和实现。7）应用支撑平台和应用系统在设计时，考虑未来各个系统(已建，正建和将建的系统)能够基于异构的技术平台上进行互联互通、灵活的集成，提高系统的整体性能和可靠性；8）具备标准的软件体系结构、内部和外部接口，提供多种开发工具接口，保证系统能与其它系统进行快速、顺利的信息交换，便于系统扩展和升级。9）采用UTF8国际通用的语言编码生成网页；10）保证有足够的可扩展性和互连性。系统的设计和建设充分考虑现有的网络与硬件资源和扩展及系统二次开发的需要，并支持未来可能出现的新业务的需要。安全标准1）系统具有重要软硬件模块备份及交叉部署功能，具备较高级别的安全防护措施，避免因部分设备的故障而发生影响核心业务的现象发生；2）以结构化和非结构化数据相结合的方式进行存储管理；以静态页面形式发布到Web服务器；图片、内容分离存储，可以放置在不同服务器上；3）系统具有完善的安全机制和有效的责任追究机制，能够提供操作系统级、应用系统级、数据库级三重用户管理和权限管理功能，对所有用户的所有操作建立日志，保证整个系统始终处于安全监控和保护之中，支持数据库读写分离和集群部署；4）系统具有完备的备份策略，能够对于整站数据（含各软件模块和数据库）进行本地和异地双重备份，对所有数据信息有备份机制，包括数据库、静态页、图片等；5）支持严格的分级权限控制和多重数据备份机制，确保网站数据安全；6）网站的脚本和程序的编写严谨、严格，不存在明显或重大的漏洞，不会留有后门程序。服务器及数据库的设置应周全、严密，在不影响系统正常运行的前题下，尽可能地少开服务，少开端口。7）系统具备7×24小时连续运行的前提保障，能够对相关服务和程序进行监控，帮助管理员和网管进行诊断、排错和分析，具备后台相关的日志备查。功能设计内容资源管理内容模型基于内容管理发布的需要，为文章、图集、音视频、直播等多种内容和形式提供各种内容模型进行管理，针对不同的资源或内容适用不同的模型操作，实现多种表现形式融合展现。内容模型通用功能如下：·内容模型的创建、查看、分享、修改和删除·PC+移动的内容审核机制·按栏目、标题、推荐、排序、渠道等条件进行索引·内容的缩略图智能裁切适应多终端 ·同时发布到PC站、手机站、手机端，推送到微博、微信·对单一内容进行统计分析，包括整体概况、阅读分布情况、30天内传播趋势·对单一内容进行操作历史的记录·草稿编辑功能专题内容模型功能主要包含以下内容：1、文稿·编辑器插入链接、图片、视频、附件等·基于浏览器工具栏的插件，实现当前浏览内容一键转载·基于全文智能去重，提取文章标题、缩略图、概要和关键词等信息·批量采集主流新闻网站和视频网站内容·根据调用参数的不同可用于相关推荐和专题推荐具体功能说明如下：·分页功能，按屏幕自动分页，根据屏幕分辨率自动分成多篇内容。·图片在线编辑功能，编辑器预设多种图片样式、版式、效果等，方便编辑人员进行排版、切割、旋转等操作。·信息截取，可以通过拖拉划取范围的形式选取文字作为关键字、描述、标题。·格式清除，去除word、写字板等其他编辑器中的格式代码。·多终端发布，可发布至任意客户端栏目、分类。·统计功能，统计当篇文章的字数、图片、素材、附件、页数、批注等功能2、图集·可视化编辑·单张或批量上传图片·批量修改图片说明·拖动对图片进行排序·单张或批量增删