期刊文献+
共找到13,400篇文章
< 1 2 250 >
每页显示 20 50 100
数据画像领域个人金融信息保护问题及其对策研究 预览
1
作者 李玉辉 张华 张宝中 《西南金融》 北大核心 2019年第2期83-89,共7页
大数据时代,数据画像越来越盛行,尤其在金融领域,大多数金融机构都利用个人的身份信息、账户信息、交易信息、社交信息、兴趣爱好等对其开展数据画像,以此有针对性地、分层次地向其推销产品或服务。但不规范的数据画像或数据画像运用不... 大数据时代,数据画像越来越盛行,尤其在金融领域,大多数金融机构都利用个人的身份信息、账户信息、交易信息、社交信息、兴趣爱好等对其开展数据画像,以此有针对性地、分层次地向其推销产品或服务。但不规范的数据画像或数据画像运用不当不仅容易导致信息主体的隐私权遭到侵害,还可能导致其财产损失。研究数据画像领域个人金融信息保护存在的问题,明确数据画像的合理边界,规范数据画像的运用,对于平衡个人信息的使用与保护之间的矛盾有着重要的意义。 展开更多
关键词 数据画像 大数据 个人金融信息 个人隐私 敏感数据 数据挖掘 数据处理 数据保护 个人信息保护 金融消费者权益 精准营销
在线阅读 免费下载
Real-time intelligent big data processing:technology, platform, and applications
2
作者 Tongya ZHENG Gang CHEN +3 位作者 Xinyu WANG Chun CHEN Xingen WANG Sihui LUO 《中国科学:信息科学(英文版)》 SCIE EI CSCD 2019年第8期98-109,共12页
Human beings keep exploring the physical space using information means. Only recently, with the rapid development of information technologies and the increasing accumulation of data, human beings can learn more about ... Human beings keep exploring the physical space using information means. Only recently, with the rapid development of information technologies and the increasing accumulation of data, human beings can learn more about the unknown world with data-driven methods. Given data timeliness, there is a growing awareness of the importance of real-time data. There are two categories of technologies accounting for data processing: batching big data and streaming processing, which have not been integrated well. Thus,we propose an innovative incremental processing technology named after Stream Cube to process both big data and stream data. Also, we implement a real-time intelligent data processing system, which is based on real-time acquisition, real-time processing, real-time analysis, and real-time decision-making. The real-time intelligent data processing technology system is equipped with a batching big data platform, data analysis tools, and machine learning models. Based on our applications and analysis, the real-time intelligent data processing system is a crucial solution to the problems of the national society and economy. 展开更多
关键词 BATCHING big DATA streaming PROCESSING TECHNOLOGY REAL-TIME DATA PROCESSING incremental computation INTELLIGENT DATA PROCESSING system
On the Matrices of Pairwise Frequencies of Categorical Attributes for Objects Classification 预览
3
作者 Vladimir N. Shats 《智能学习系统与应用(英文)》 2019年第4期65-75,共11页
This paper proposes two new algorithms for classifying objects with categorical attributes. These algorithms are derived from the assumption that the attributes of different object classes have different probability d... This paper proposes two new algorithms for classifying objects with categorical attributes. These algorithms are derived from the assumption that the attributes of different object classes have different probability distributions. One algorithm classifies objects based on the distribution of the attribute frequencies, and the other classifies objects based on the distribution of the pairwise attribute frequencies described using a matrix of pairwise frequencies. Both algorithms are based on the method of invariants, which offers the simplest dependencies for estimating the probabilities of objects in each class by an average frequency of their attributes. The estimated object class corresponds to the maximum probability. This method reflects the sensory process models of animals and is aimed at recognizing an object class by searching for a prototype in information accumulated in the brain. Because these matrices may be sparse, the solution cannot be determined for some objects. For these objects, an analog of the k-nearest neighbors method is provided in which for each attribute value, the class to which the majority of the k-nearest objects in the training sample belong is determined, and the most likely class value is calculated. The efficiencies of these two algorithms were confirmed on five databases. 展开更多
关键词 CATEGORICAL Attributes Classification ALGORITHMS INVARIANTS of Matrix DATA DATA Processing
在线阅读 免费下载
一种可复用的大数据集成模式 预览
4
作者 景超 田凌涛 《江苏科技信息》 2019年第27期56-58,共3页
数据集成,是大数据或数据仓库中很重要的一个操作环节,它直接关系到数据的使用是否顺利、便捷、准确。在企业级大数据或数据仓库中,数据集成是一个持续性的工作,经常会不断有新数据源加入并被要求集成到已有的大数据仓库表中。这个环节... 数据集成,是大数据或数据仓库中很重要的一个操作环节,它直接关系到数据的使用是否顺利、便捷、准确。在企业级大数据或数据仓库中,数据集成是一个持续性的工作,经常会不断有新数据源加入并被要求集成到已有的大数据仓库表中。这个环节是一个非常耗时耗力的过程,而且一旦集成方案不恰当,就会导致一些更加耗时耗力的处理工作,例如需要大批量处理已有数据,以及需要大量修改已有调用逻辑,即数据割接、应用割接。文章旨在研究一种较为系统的、通用的模式,尽量避免以上情况的发生,从而让数据集成工作变得简单、可复用、可持续,也为数据使用提供稳定性、准确性。 展开更多
关键词 数据集成 大数据 数据仓库 数据处理 数据融合
在线阅读 下载PDF
论数据挖掘技术在当今时代的应用 预览
5
作者 钮盼盼 鲍正德 唐娅雯 《计算机系统网络和电信》 2019年第2期211-215,共5页
数据时代,几乎所有的IT行业领头大佬,都有着自己巨大数据存储的数据库。信息化的快速发展伴随要分析的数据量越来越大、分析的数据越大、提取有用信息的操作更加复杂,数据分析人员的工作量随着大大增加。本文以数据挖掘技术的应用为根... 数据时代,几乎所有的IT行业领头大佬,都有着自己巨大数据存储的数据库。信息化的快速发展伴随要分析的数据量越来越大、分析的数据越大、提取有用信息的操作更加复杂,数据分析人员的工作量随着大大增加。本文以数据挖掘技术的应用为根本进行剖析。 展开更多
关键词 数据挖掘 数据分析 数据处理 数据应用
在线阅读 免费下载
数据治理过程中数据安全防护技术研究及应用 预览
6
作者 王旭东 叶水勇 +4 位作者 朱兵 陈清萍 蔡翔 刘琦 陈明 《国网技术学院学报》 2019年第1期46-50,共5页
为解决信息系统数据质量不高及各信息系统之间数据共享程度偏低等问题,项目针对数据治理过程中的数据安全课题开展专题研究,重点针对营销客户、电网GIS、生产经营等敏感数据防泄密技术和数据安全防护技术开展研究和应用,实现数据使用环... 为解决信息系统数据质量不高及各信息系统之间数据共享程度偏低等问题,项目针对数据治理过程中的数据安全课题开展专题研究,重点针对营销客户、电网GIS、生产经营等敏感数据防泄密技术和数据安全防护技术开展研究和应用,实现数据使用环境安全、数据权限可控、数据外发可控、数据交互安全的总体目标。 展开更多
关键词 环境安全 数据权限 数据外发 数据交互 数据处理
在线阅读 下载PDF
新一代直升机综合数据处理平台设计及应用 预览
7
作者 黄润龙 《电讯技术》 北大核心 2019年第10期1163-1168,共6页
针对新一代机载通信平台减重量、降功耗的需求,指出了当前数据处理平台采用单核或同构多核(Symmetrical Multi-processing,SMP)模式存在重量重、功耗大的问题,提出了数据处理平台采用异构多核(Asymmetrical Multi-processing,AMP)工作模... 针对新一代机载通信平台减重量、降功耗的需求,指出了当前数据处理平台采用单核或同构多核(Symmetrical Multi-processing,SMP)模式存在重量重、功耗大的问题,提出了数据处理平台采用异构多核(Asymmetrical Multi-processing,AMP)工作模式,从SMP和AMP两种模式的实现架构、工作原理以及实物上展开对比分析并将AMP成果应用到当前的新型机载平台。实物验证对比表明,相较于SMP模式平台,AMP模式平台带来重量减轻近50%、功耗降低近50%的效益。 展开更多
关键词 机载通信 现场可更换模块 数据处理 异构多核处理 同构多核处理
在线阅读 下载PDF
A Shallow Parsing Approach to Natural Language Queries of a Database 预览
8
作者 Richard Skeggs Stasha Lauria 《软件工程与应用(英文)》 2019年第9期365-382,共18页
The performance and reliability of converting natural language into structured query language can be problematic in handling nuances that are prevalent in natural language. Relational databases are not designed to und... The performance and reliability of converting natural language into structured query language can be problematic in handling nuances that are prevalent in natural language. Relational databases are not designed to understand language nuance, therefore the question why we must handle nuance has to be asked. This paper is looking at an alternative solution for the conversion of a Natural Language Query into a Structured Query Language (SQL) capable of being used to search a relational database. The process uses the natural language concept, Part of Speech to identify words that can be used to identify database tables and table columns. The use of Open NLP based grammar files, as well as additional configuration files, assist in the translation from natural language to query language. Having identified which tables and which columns contain the pertinent data the next step is to create the SQL statement. 展开更多
关键词 NLIDB NATURAL LANGUAGE Processing DATABASE QUERY Data MINING
在线阅读 免费下载
关于战术组网性能监测系统的设计与开发 预览
9
作者 赵宝健 矫文成 张俊萍 《无线互联科技》 2019年第18期64-65,共2页
近年来,我军某些信息化装备在测试中多次出现信息传输失败、丢包、网间转换困难等组网不稳定现象。由于缺乏组网性能监测设备,无法对组网不稳定原因准确定位,导致难以对装备的战术组网性能作出合理、客观的评价。针对该问题,文章开展战... 近年来,我军某些信息化装备在测试中多次出现信息传输失败、丢包、网间转换困难等组网不稳定现象。由于缺乏组网性能监测设备,无法对组网不稳定原因准确定位,导致难以对装备的战术组网性能作出合理、客观的评价。针对该问题,文章开展战术组网性能监测系统的设计与开发工作。在分析战术组网性能监测工作原理的基础上,对战术组网性能监测系统进行结构分析与设计开发,提出系统在测试中的应用方案,为开展战术组网性能监测提供有效的测试手段和技术。 展开更多
关键词 无线组网 数据侦听 数据传输 数据处理
在线阅读 下载PDF
基于微服务的遥感数据处理与共享平台设计 预览
10
作者 韦二龙 党执政 +1 位作者 李峰 王永安 《计算机与网络》 2019年第12期56-59,共4页
随着遥感技术的快速发展,遥感数据处理与共享应用于越来越多的领域,然而,业务功能的快速增长对遥感数据处理与共享平台的建设带来了新挑战,传统的基于单服务架构的遥感数据处理与共享服务已经无法满足人们对高可用、易扩展服务的需求。... 随着遥感技术的快速发展,遥感数据处理与共享应用于越来越多的领域,然而,业务功能的快速增长对遥感数据处理与共享平台的建设带来了新挑战,传统的基于单服务架构的遥感数据处理与共享服务已经无法满足人们对高可用、易扩展服务的需求。提出了基于微服务架构的遥感数据处理与共享平台设计方案,并基于微服务设计理念对平台架构、服务注册发现、服务交互、容错处理、统一配置管理及服务部署等提出了具体的技术解决方案,保证了平台的高可用性和易扩展性,满足当前遥感数据快速增长对数据处理与共享的需求。 展开更多
关键词 遥感数据 数据处理 数据共享 微服务 架构设计 Docker容器
在线阅读 下载PDF
铁路大数据平台架构研究 预览
11
作者 邹丹 马小宁 王喆 《铁路计算机应用》 2019年第8期1-4,共4页
中国铁路已积累、沉淀了大量数据。数据量大、结构复杂、来源多样的铁路大数据需要一种新的架构模式进行数据的存储与计算。为适应铁路大数据发展的需要,对铁路大数据平台进行了架构研究与设计,将大数据技术与不同数据源的特点相结合,... 中国铁路已积累、沉淀了大量数据。数据量大、结构复杂、来源多样的铁路大数据需要一种新的架构模式进行数据的存储与计算。为适应铁路大数据发展的需要,对铁路大数据平台进行了架构研究与设计,将大数据技术与不同数据源的特点相结合,使平台既能对现有业务进行快速响应,又能对海量历史数据进行价值深挖。为满足复杂大量数据的存储与计算,提高数据处理效率提供技术支撑。 展开更多
关键词 大数据 数据平台架构 数据处理
在线阅读 免费下载
基于大数据的图书馆的智慧化应用 预览
12
作者 胡文彦 鲍正德 唐娅雯 《计算机系统网络和电信》 2019年第2期110-116,共7页
在当今的移动网海量的数据在没经过数据分析之前是杂乱无章的,大数据技术的存在则是为了处理和存储这些数据。图书馆因其数据来源途径多、数量大,设智慧图书馆所刻不容缓需要处理的问题便是如何对这些虚拟数据及现实数据进行处理,将数... 在当今的移动网海量的数据在没经过数据分析之前是杂乱无章的,大数据技术的存在则是为了处理和存储这些数据。图书馆因其数据来源途径多、数量大,设智慧图书馆所刻不容缓需要处理的问题便是如何对这些虚拟数据及现实数据进行处理,将数据存放在何处,建立一个高效、安全且能够平稳运行的数据资源管理系统。本文基于大数据的数据分析与数据挖掘基础技术之上,简要分析了图书馆管理系统的智能化应用。 展开更多
关键词 云计算 大数据 数据处理 智慧图书馆 数据分析
在线阅读 免费下载
文献作者数据的采集与处理 预览
13
作者 陈道兰 《江苏科技信息》 2019年第9期17-19,共3页
验证文献作者分布规律过程常常需要采集大量的作者数据。文章简要地介绍了利用知网、维普、万方数据库和期刊主页批量采集文献作者数据的多种方法,同时也介绍了文献作者信息在第一作者的分离、作者频次的统计方面的处理技巧。
关键词 作者数据 采集 处理 数据分列 数据透视
在线阅读 下载PDF
基于大数据的产品色彩设计 预览
14
作者 刘蓓贝 张融 +3 位作者 陈旭 周鑫韬 张铭杰 李书龙 《包装工程》 CAS 北大核心 2019年第14期228-235,共8页
目的采用大数据技术,研究大数据时代下产品色彩的设计方法,探究大数据与产品色彩设计结合的价值,为设计提供新的思路和方向,从而创新性地提升产品色彩设计的效率。方法从大数据的角度出发,通过数据采集技术从互联网上得到大量的原始数据... 目的采用大数据技术,研究大数据时代下产品色彩的设计方法,探究大数据与产品色彩设计结合的价值,为设计提供新的思路和方向,从而创新性地提升产品色彩设计的效率。方法从大数据的角度出发,通过数据采集技术从互联网上得到大量的原始数据,批量地对数据进行降噪处理,得到有效数据,在将有效数据可视化显示后,深入地对图表数据进行分析,从中挖掘出产品色彩设计的相关规律,从而形成一套行之有效的产品色彩设计方法,并结合大数据技术的应用和发展趋势,探讨两者结合的重要意义。结论大数据在数据挖掘和趋势预测上具有极大的优势,将其与产品色彩设计相结合,为设计师提供一种在产品色彩设计中解决问题的新思路,可以优化产品色彩的设计流程,协助设计师更好、更快地设计出满足目标消费群体需求的产品。 展开更多
关键词 大数据 数据处理 颜色提取 数据分析 产品色彩
在线阅读 免费下载
基于数据挖掘技术的热能供热数据处理方法 预览
15
作者 郑阳平 王学军 《承德石油高等专科学校学报》 CAS 2019年第4期47-49,共4页
为优化和调整城市的供热措施及方案,针对供热方面数据信息的特点和热能供热系统建立超大量(海量)的数据仓库,应用数据挖掘技术中的分类、分析、预测、关联、聚类等分析方法,计算分析得到相关数据之间的潜在规律及发展趋势,通过挖掘和提... 为优化和调整城市的供热措施及方案,针对供热方面数据信息的特点和热能供热系统建立超大量(海量)的数据仓库,应用数据挖掘技术中的分类、分析、预测、关联、聚类等分析方法,计算分析得到相关数据之间的潜在规律及发展趋势,通过挖掘和提取有用的数据信息,得到数据间的“显式知识”图谱,来诊断和解决供热过程中的具体问题,为城市的供热方案调整和节能环保提供决策支持。 展开更多
关键词 供热系统 数据仓库 数据挖掘 数据处理
在线阅读 下载PDF
基于Hadoop平台的轨道交通能效管理系统的建设方案 预览 被引量:1
16
作者 陈莉莉 张赛桥 狄颖琪 《自动化仪表》 CAS 2019年第1期36-38,共3页
随着城市轨道交通线网化进程和海量数据的累积,挖掘能效数据的潜在价值以提升地铁能效管理水平、实现节能降耗,对地铁的经济运行具有重要意义。对基于Hadoop平台实现轨道交通能效管理系统的建设方案进行了研究,并分别以历史数据和实时... 随着城市轨道交通线网化进程和海量数据的累积,挖掘能效数据的潜在价值以提升地铁能效管理水平、实现节能降耗,对地铁的经济运行具有重要意义。对基于Hadoop平台实现轨道交通能效管理系统的建设方案进行了研究,并分别以历史数据和实时流数据的数据流和功能框图,具体说明了系统的实现方式。给出了基于Hadoop平台的能效管理系统的车站、线路、线网的三层式建设方式,以及组成模块的框架图,并按数据的在线和离线两种方式给出模块的实现方法。同时,在轨道交通能效管理平台中实现了大数据技术的首次应用。应用结果表明,基于Hadoop平台的大数据方案提高了地铁运营的能效管理水平。随着数据量积累和数据分析的深入,该管理系统必将具有更加广阔的应用前景。 展开更多
关键词 城市轨道交通 能效管理 节能潜力 数据仓库 数据挖掘 能耗分析 大数据 流处理
在线阅读 下载PDF
机电设备远程智慧运维探讨 预览
17
作者 张学智 赵袖先 《建筑电气》 2019年第10期53-56,共4页
针对建筑机电设备运维的传统方式存在费用较高、实际运维效果较差等问题,充分利用现代传感技术、互联网技术及云计算等信息技术,创新组织运维管理体系,构建机电设备的远程运维管理平台,实现对建筑机电设备的智慧运维,从而降低业主的运... 针对建筑机电设备运维的传统方式存在费用较高、实际运维效果较差等问题,充分利用现代传感技术、互联网技术及云计算等信息技术,创新组织运维管理体系,构建机电设备的远程运维管理平台,实现对建筑机电设备的智慧运维,从而降低业主的运维成本,延长机电设备的使用寿命。 展开更多
关键词 机电设备 智慧运维 运维工具 数据采集 数据传输 数据处理 BIM模型 远程管理
在线阅读 下载PDF
基于大数据下的Spark快速大数据分析 预览
18
作者 林海 王强 李英震 《现代工业经济和信息化》 2019年第10期75-76,共2页
在数据大爆炸的时代,随着数据量的激增,如何更快速地处理、使用这些规模大、复杂度高的数据成为迫在眉睫的问题。阐述了Spark的五大组件,研究了Spark数据处理应用和运行架构。Spark通过优化传统的MapReduce模型来满足之前HDFS以及MapRed... 在数据大爆炸的时代,随着数据量的激增,如何更快速地处理、使用这些规模大、复杂度高的数据成为迫在眉睫的问题。阐述了Spark的五大组件,研究了Spark数据处理应用和运行架构。Spark通过优化传统的MapReduce模型来满足之前HDFS以及MapReduce无法解决的问题,大大提高了效率,为处理流式数据以及其他需求提供了捷径。 展开更多
关键词 大数据 数据分析 计算 数据处理
在线阅读 下载PDF
基于单片机控制的高速数据采集与处理系统研究 预览
19
作者 王纪伟 《电子科技》 2019年第11期74-77,共4页
针对现有单片机的数据处理速率较低不利于高速数据采集与处理的问题,文中研究并设计基于单片机控制的高速数据采集与处理系统。在数据采集方面,使用A/D高速采样芯片实现高速数据采集。为满足高速数据处理与存储的需要,文中使用PC终端的... 针对现有单片机的数据处理速率较低不利于高速数据采集与处理的问题,文中研究并设计基于单片机控制的高速数据采集与处理系统。在数据采集方面,使用A/D高速采样芯片实现高速数据采集。为满足高速数据处理与存储的需要,文中使用PC终端的IDE接口硬盘作为系统的存储装置。另外,为协调数据采集与数据处理过程,使用单片机核心控制模块控制高速双口RAM实现高速数据缓存排队,从而实现数据从A/D采样芯片到IDE硬盘的高速无损传输。该高速数据采集与处理系统在数据采集、处理方面更加集成化,具有较高的工程应用价值。 展开更多
关键词 单片机 数据采集 数据处理 数据缓存
在线阅读 免费下载
面向多数据源的网络爬虫实现技术及应 预览
20
作者 曾健荣 张仰森 +2 位作者 郑佳 黄改娟 陈若愚 《计算机科学》 CSCD 北大核心 2019年第5期304-309,共6页
基于大数据技术的社会计算方法是目前学术界研究的热点,如何从网络上快速获取相应的数据资源是相关研究的关键。网络爬虫技术是目前进行网络数据采集的主要手段,针对现有爬虫技术不便于采集多源数据的问题,提出了一种面向多数据源的网... 基于大数据技术的社会计算方法是目前学术界研究的热点,如何从网络上快速获取相应的数据资源是相关研究的关键。网络爬虫技术是目前进行网络数据采集的主要手段,针对现有爬虫技术不便于采集多源数据的问题,提出了一种面向多数据源的网络爬虫数据采集技术,在研究新浪微博、人民日报、百度百科、百度贴吧、微信公众号、东方财富股吧等6类媒体平台的数据采集爬虫的基础上,采用Servlet后台调度技术,将面向多数据源的网络爬虫进行融合,解决了面向不同媒体平台的数据采集问题。在实现过程中,首先借助Web应用程序测试工具包selenium实现模拟登录等人工操作,然后采用Xpath元素查询技术来解析网页源码,并提取出数据信息存入数据库,最后将爬取到的数据从数据库中读取出来并展示在前端页面中。实验表明,爬虫在保证数据完整性的前提下实现了采集效率的最大化。 展开更多
关键词 数据采集 网络爬虫 多数据源 数据展示 信息处理
在线阅读 免费下载
上一页 1 2 250 下一页 到第
使用帮助 返回顶部 意见反馈