Web数据挖掘

摘要： 以水肥一体机控制系统中各功能参数为研究对象,对水肥一体机的结构组成及工作原理进行分析,并采用Web数据挖掘技术,对水肥一体机及作物生长大数据进行深度分析,形成水肥一体机工作过程知识数据库。将常规水肥一体机的传感系统数据与Web数据库中的知识参数进行比对,形成水肥一体机控制指令,操纵水肥一体机进行混肥、施肥及灌溉。根据水肥一体机反馈传感数据进一步形成相关操纵控制指令,经验证,基于Web数据挖掘技术建立的知识数据库可与水肥一体机控制系统进行有效结合,并提高了水肥一体机的智能化水平。

摘要： 首先从开发优势与应用原理两个角度阐述数据挖掘技术,进一步分析如今可用的数据挖掘算法;同时,提出一种优化改进的Apriori算法。该算法在完成常规数据源选择、数据采集与存储、数据预处理等操作后、构建了一种近邻和决策树两种数据挖掘分类模型,进而在发现频繁项集过程中,将数据建模和模型评估,并对其每个子元素进行计数操作,对子元素的计算数值小于当前的项集阶数时的则进行特征描述标记;最后,对两种模型的混淆矩阵数据进行计算,比较模型的预测准确率,最终得出准确率较高的数据模型,从而提高了算法的整体效率。

摘要： Web数据挖掘是将传统数据挖掘技术与Web技术相结合,并综合统计学、可视化等多个学科领域的一种技术.电子商务是与Web技术紧密联系的行业,各大电商平台都应用了Web技术与用户进行交互.近年来,越来越多的学者开始关注Web数据挖掘在电子商务中的应用,主要着重于对电子商务网络营销、电子商务服务质量以及网络安全与Web数据挖掘技术相结合的3个方面进行研究.电子商务怎样与Web数据挖掘技术更好地契合、实现电商平台利益最大化和用户体验最优化成为人们关注的问题,也吸引了众多专家学者进行研究.基于此,文章通过对检索文献的整理、归纳,综述数据挖掘在电子商务领域中的应用研究现状,为进一步的研究指明方向,并指出未来的研究方向是可视化Web数据挖掘技术在电子商务中的应用.

摘要： 基于web的数据挖掘技术能很好地满足读者个性化需求, 通过对web日志文件的挖掘, 利用路径分析技术、关联规则技术、序列模式技术、聚类分析技术、协同过滤技术等, 了解读者行为习惯、个性化需求以及潜在的信息需求, 从而满足图书馆网站人性化、个性化的设计需要, 打造图书馆智慧门户, 彰显图书馆以人为本的服务宗旨.%The data mining technology based on web can satisfy personalized demands of readers. By digging through web log files, we can use path analysis, association rules, sequence pattern, cluster analysis and collaborative filtering techniques to understand reader's behavior, personalized demands and potential information needs, so that we can meet user-friendly and personalized design needs of library website, build library intelligent portal and reflect their people-oriented service principals.

摘要： 随着现代信息技术的快速发展,大数据云计算的应用范围越来越广泛,尤其是通过将Web数据挖掘与人工智能领域相结合,可以提高Web数据挖掘的整体质量.本文通过对于云计算的概念以及关键技术进行分析,重点阐释云计算下的Web数据挖掘方法,有效提高Web数据挖掘的整体效果.

摘要： 随着互联网的发展,电子商务已日渐渗透进人们的生活当中,为了给网络消费用户提供更好的电商服务,个性化推荐服务将显得尤为重要.本文主要从Web数据挖掘出发,分析Web数据挖掘技术和个性化推荐算法,研究设计针对武威地区的农产品个性化推荐系统,深入研究了Web数据挖掘技术和个性化推荐算法在电子商务拓展中的应用.

摘要： 随着当代信息技术的飞速发展,互联网的应用越来越普遍,而以网络作为媒介传递的信息产出量和需求量都呈爆炸式增长趋势,21世纪逐步迈入大数据时代,海量的数据信息成为极具价值的财富,由此可见,针对网络信息的安全防范极为必要,此时Web数据挖掘技术应运而生,它将数据挖掘与Web进行结合,是一种更新更具优势的技术,本文从信息安全防范的角度出发,以Web数据挖掘技术为中心,对两者的整合进行深入探讨.

摘要： 本课题对当前的WEB数据挖掘算法进行了深入研究,给出了WEB数据挖掘相关算法在气象数据网站上实现的详细技术,设计了针对中央气象台等气象网站的链接发现算法、数据挖掘算法.对气象网站的网络数据包进行了抓包解析,构建了数据抓取采用的数据包,模拟浏览器进行了数据包提交.编写了数据挖掘爬虫程序,完成了基于气象信息的WEB数据挖掘技术的研究与实现.

摘要： 其他网络商店的商品实时价格是Web商店店主所关注的重要数据,Web数据挖掘使得这一需求变为现实。通过正则表达式算法与分词算法的比较研究,给出了基于正则表达式的商品价格抽取算法和基于分词的网站目录树抽取算法、HTML网页商品抽取算法与商品价格抽取算法。应用系统的实践表明,正则表达武算法的挖全率与正确率较低,而分词算法的挖全率与正确率都达到99%以上,完全满足应用需求,同时可以为商品的市场预测与分析提供依据。

摘要： 其他网络商店的商品实时价格是Web商店店主所关注的重要数据,Web数据挖掘使得这一需求变为现实。通过正则表达式算法与分词算法的比较研究,给出了基于正则表达式的商品价格抽取算法和基于分词的网站目录树抽取算法、HTML网页商品抽取算法与商品价格抽取算法。应用系统的实践表明,正则表达武算法的挖全率与正确率较低,而分词算法的挖全率与正确率都达到99%以上,完全满足应用需求,同时可以为商品的市场预测与分析提供依据。

摘要： 其他网络商店的商品实时价格是Web商店店主所关注的重要数据,Web数据挖掘使得这一需求变为现实。通过正则表达式算法与分词算法的比较研究,给出了基于正则表达式的商品价格抽取算法和基于分词的网站目录树抽取算法、HTML网页商品抽取算法与商品价格抽取算法。应用系统的实践表明,正则表达武算法的挖全率与正确率较低,而分词算法的挖全率与正确率都达到99%以上,完全满足应用需求,同时可以为商品的市场预测与分析提供依据。

摘要： 其他网络商店的商品实时价格是Web商店店主所关注的重要数据,Web数据挖掘使得这一需求变为现实。通过正则表达式算法与分词算法的比较研究,给出了基于正则表达式的商品价格抽取算法和基于分词的网站目录树抽取算法、HTML网页商品抽取算法与商品价格抽取算法。应用系统的实践表明,正则表达武算法的挖全率与正确率较低,而分词算法的挖全率与正确率都达到99%以上,完全满足应用需求,同时可以为商品的市场预测与分析提供依据。

摘要： 其他网络商店的商品实时价格是Web商店店主所关注的重要数据,Web数据挖掘使得这一需求变为现实。通过正则表达式算法与分词算法的比较研究,给出了基于正则表达式的商品价格抽取算法和基于分词的网站目录树抽取算法、HTML网页商品抽取算法与商品价格抽取算法。应用系统的实践表明,正则表达武算法的挖全率与正确率较低,而分词算法的挖全率与正确率都达到99%以上,完全满足应用需求,同时可以为商品的市场预测与分析提供依据。

摘要： 目前大部分网页正文提取算法都要先对网页代码做一定程度的规范修正才能取得较好的效果，针对这一问题，提出一种不需修正代码的用超链接标签分隔节点的网页正文抽取新算法。用超链接标签将网页代码分隔成节点形式，找出其中含有正文内容的一个节点，以此节点为基础向前和向后抽取其余的正文内容，从而得出整个网页的正文。算法对多种形式的网页的正文均能正确的抽取，不要求网页的代码必须规范，取得了很好的测试效果。

摘要： 目前大部分网页正文提取算法都要先对网页代码做一定程度的规范修正才能取得较好的效果，针对这一问题，提出一种不需修正代码的用超链接标签分隔节点的网页正文抽取新算法。用超链接标签将网页代码分隔成节点形式，找出其中含有正文内容的一个节点，以此节点为基础向前和向后抽取其余的正文内容，从而得出整个网页的正文。算法对多种形式的网页的正文均能正确的抽取，不要求网页的代码必须规范，取得了很好的测试效果。

摘要： 目前大部分网页正文提取算法都要先对网页代码做一定程度的规范修正才能取得较好的效果，针对这一问题，提出一种不需修正代码的用超链接标签分隔节点的网页正文抽取新算法。用超链接标签将网页代码分隔成节点形式，找出其中含有正文内容的一个节点，以此节点为基础向前和向后抽取其余的正文内容，从而得出整个网页的正文。算法对多种形式的网页的正文均能正确的抽取，不要求网页的代码必须规范，取得了很好的测试效果。

摘要： 目前大部分网页正文提取算法都要先对网页代码做一定程度的规范修正才能取得较好的效果，针对这一问题，提出一种不需修正代码的用超链接标签分隔节点的网页正文抽取新算法。用超链接标签将网页代码分隔成节点形式，找出其中含有正文内容的一个节点，以此节点为基础向前和向后抽取其余的正文内容，从而得出整个网页的正文。算法对多种形式的网页的正文均能正确的抽取，不要求网页的代码必须规范，取得了很好的测试效果。

摘要： 目前大部分网页正文提取算法都要先对网页代码做一定程度的规范修正才能取得较好的效果，针对这一问题，提出一种不需修正代码的用超链接标签分隔节点的网页正文抽取新算法。用超链接标签将网页代码分隔成节点形式，找出其中含有正文内容的一个节点，以此节点为基础向前和向后抽取其余的正文内容，从而得出整个网页的正文。算法对多种形式的网页的正文均能正确的抽取，不要求网页的代码必须规范，取得了很好的测试效果。

摘要： 本发明公开了一种解耦WEB客户端与大数据挖掘分析的数据挖掘平台及实现方法，本方案由WEB客户端，数据挖掘服务单元，以及数据挖掘开发平台配合构成，数据挖掘服务单元分别与WEB客户端和数据挖掘开发平台数据连接，其接收并管理WEB客户端的请求，以及感知数据挖掘开发平台开发打包的相关数据挖掘算法，在WEB客户端和数据挖掘开发平台之间搭建调用通道；WEB客户端通过数据挖掘服务单元调用数据挖掘开发平台开发的相关数据挖掘算法。本方案能够将WEB客户端开发技术与大数据挖掘分析技术进行解耦，通过R数据挖掘服务把前端及分析人员的工作连接了起来，这样使得大数据挖掘分析人员专注实现R函数。

摘要： 本发明公开了一种基于数据挖掘的web业务数据分析方法及系统，方法包括对前端解码引擎的业务数据进行获取并整理，得到整理后的业务数据，并建立业务模型；根据整理后的业务数据，对其进行分类；根据分类后的业务数据，对其中预设的重点业务进行拨测处理；根据业务数据，形成分析结果并入库。系统包括数据整理单元、数据分类单元、拨测单元和数据入库单元。本发明通过对业务数据进行分析建模，并结合对厂家的数据进行定期的比对，实现对web业务的模型识别，形成企业对业务的管理运营，从而实现基于业务的经营分析、系统运维的方案。本发明可广泛应用于业务数据分析中。

摘要： 本发明提供了一种基于百度地图开放数据与Web数据挖掘的区域停车难易指数的分析方法，属于信息技术、智能交通技术、先进的交通管理与控制技术、交通基础信息采集、网页数据挖掘及相关软件技术领域。步骤一：土地利用信息挖掘；步骤二：区域停车需求建模；步骤三：区域停车供给分析；步骤四：区域停车难易指数的计算与制图；步骤五，区域停车难易程度地图绘制。城市建设者可通过本发明改善停车费率决策和停车设施规划，为解决目前城市日渐显著的“停车难”问题提供辅助决策依据。本发明的方法以及所得到的详细土地利用信息数据，可以为城市规划、停车场规划与运营、公众出行信息、城市交通建设相关决策以及与交通相关的科学研究提供有效支持。

摘要： 本发明公开了一种基于Deep Web深层动态数据的数据挖掘装置及方法，所述装置包括：商用服务器、数据存储服务器、数据索引服务器及文件服务器，基于所述装置的装置系统包括：采集模拟主题词库管理系统、采集任务调度管理系统、采集服务器及采集存储调度系统。本发明提供了一种数量大、数据质量高、实时性强、易于深度分析的动态数据获取手段，弥补了常规搜索引擎获取数据的数量质量均有限的不足；而且本发明操作简便实用，定制功能丰富，可扩展性健壮性好，用户可以根据特定或者专题性强的需求定制采集并重建管理数据库，很大程度的提供了数据的利用效率，扩展了数据来源和信息资源。

摘要： 本发明公开了一种解耦WEB客户端与大数据挖掘分析的数据挖掘平台及实现方法，本方案由WEB客户端，数据挖掘服务单元，以及数据挖掘开发平台配合构成，数据挖掘服务单元分别与WEB客户端和数据挖掘开发平台数据连接，其接收并管理WEB客户端的请求，以及感知数据挖掘开发平台开发打包的相关数据挖掘算法，在WEB客户端和数据挖掘开发平台之间搭建调用通道；WEB客户端通过数据挖掘服务单元调用数据挖掘开发平台开发的相关数据挖掘算法。本方案能够将WEB客户端开发技术与大数据挖掘分析技术进行解耦，通过R数据挖掘服务把前端及分析人员的工作连接了起来，这样使得大数据挖掘分析人员专注实现R函数。

摘要： 本发明公开了一种面向多种Web数据的海量异构数据挖掘系统，该系统包括：数据获取层、数据存储层以及数据挖掘层；其中，所述数据获取层负责从互联网获取海量异构数据并将其转化为结构良好的数据；所述数据存储层负责将所述数据获取层提交的结果数据以结构化数据库的形式进行存储；所述数据挖掘层负责完善用户模型，改善服务效率，改进站点结构设计。本发明方案基于XML，通过即时处理多种形式的信息，使来源于不同结构化的数据快速结合在一起，不仅很好地兼容了原有的Web应用，还更好地实现了Web中的信息共享与交换，有效地解决了Intemet发展速度快而接入速度慢的问题，实现了从海量的数据中发现潜在规律，获得有用知识的目的。

摘要： 本发明公开了一种基于数据挖掘的web业务数据分析方法及系统，方法包括对前端解码引擎的业务数据进行获取并整理，得到整理后的业务数据，并建立业务模型；根据整理后的业务数据，对其进行分类；根据分类后的业务数据，对其中预设的重点业务进行拨测处理；根据业务数据，形成分析结果并入库。系统包括数据整理单元、数据分类单元、拨测单元和数据入库单元。本发明通过对业务数据进行分析建模，并结合对厂家的数据进行定期的比对，实现对web业务的模型识别，形成企业对业务的管理运营，从而实现基于业务的经营分析、系统运维的方案。本发明可广泛应用于业务数据分析中。

摘要： 本发明提供了一种基于百度地图开放数据与Web数据挖掘的区域停车难易指数的分析方法，属于信息技术、智能交通技术、先进的交通管理与控制技术、交通基础信息采集、网页数据挖掘及相关软件技术领域。步骤一：土地利用信息挖掘；步骤二：区域停车需求建模；步骤三：区域停车供给分析；步骤四：区域停车难易指数的计算与制图；步骤五，区域停车难易程度地图绘制。城市建设者可通过本发明改善停车费率决策和停车设施规划，为解决目前城市日渐显著的“停车难”问题提供辅助决策依据。本发明的方法以及所得到的详细土地利用信息数据，可以为城市规划、停车场规划与运营、公众出行信息、城市交通建设相关决策以及与交通相关的科学研究提供有效支持。

摘要： 本发明公开了一种基于Deep Web深层动态数据的数据挖掘装置及方法，所述装置包括：商用服务器、数据存储服务器、数据索引服务器及文件服务器，基于所述装置的装置系统包括：采集模拟主题词库管理系统、采集任务调度管理系统、采集服务器及采集存储调度系统。本发明提供了一种数量大、数据质量高、实时性强、易于深度分析的动态数据获取手段，弥补了常规搜索引擎获取数据的数量质量均有限的不足；而且本发明操作简便实用，定制功能丰富，可扩展性健壮性好，用户可以根据特定或者专题性强的需求定制采集并重建管理数据库，很大程度的提供了数据的利用效率，扩展了数据来源和信息资源。

摘要： 本发明涉及数据挖掘领域，具体涉及数据挖掘系统及数据挖掘方法，通过对用户的访问行为数据的挖掘；确定用户的购买迟疑程度以及计算用户对已购目标产品的倾向程度；基于已购目标产品的倾向程度、购买迟疑程度以及支付时间长度，计算任意两两用户的行为差异性，得到不同类别的用户群体；同时引入用户群体中任意两用户的历史设定时间内对已购目标产品的查询次数以及滑动速度构成的用户行为向量以及对应的评价特征码，计算任意两两用户之间的邻域距离，基于各用户对应的所有邻域距离，并计算该用户的偏向程度，进而获取各用户群体中偏向程度最大与最小对应的状态向量，确定推送的产品。即本发明的方案能够为网购平台的优化提供依据。