随着电子商务产业的成熟,垂直化的服务开始受到重视。如主营服饰的凡客诚品、专业经营正品鞋的拍鞋网和电子产品起家的京东等都提供了个性化的体验。随着垂直领域的电商、导购网站近些年的崛起,各垂直领域纷纷涌现了大量优秀的产品为用户更好的服务。服务的质量,依赖于服务器端对数据处理的质量。家居导购数据平台通过爬虫和电子商务平台获取数据,经过预处理、入库,为数据分析挖掘、前端导购提供可靠的支撑,同时为编辑人员提供生产环境,通过分析日志等信息为产品和运营部门提供技术支持。该项目的主要功能模块包括：界面模块、数据获取模块、筛选/编辑子系统、网站内容管理子系统、日志统计分析子系统、图片服务器、数据写入服务、通行证管理模块、数据备份模块。本人独立完成了如下工作：筛选/编辑子系统的设计与开发,编辑人员在该子系统中完成对图片的筛选和编辑,包括选择符合要求的图片,编辑图片信息,通过渠道、风格、时间等条件检索图片。该子系统中引入了MongoDB存储风格图和单品的信息,提高关键词检索的速度。图片服务器的设计与开发,该模块独立于其他子系统或模块,提供上传图片、删除图片、生成缩略图、打水印、存储图片等功能,并通过hash策略实现了通过修改配置文件扩展图片服务器的策略,同时将各功能独立以实现服务可伸缩,方便将来针对某项服务进行单独优化。数据获取模块中数据写入服务的设计与开发,以及编辑数据库的设计,该服务内部设置定时检测机制,用于自动更新商品信息。通行证管理模块的设计与开发,为筛选/编辑子系统和网站内容管理子系统提供通行证管理服务。该项目通过内测,已经处于运行阶段。本人设计和实现的各个模块或子系统运行正常,不仅能够满足用户需求,且各模块具有可扩展性,有助于系统的升级和扩展。