基于云计算的大数据分析关键技术和算法的研究

结题报告
项目介绍
AI项目解读

基本信息

  • 批准号:
    61772157
  • 项目类别:
    面上项目
  • 资助金额:
    66.0万
  • 负责人:
  • 依托单位:
  • 学科分类:
    F0202.系统软件、数据库与工业软件
  • 结题年份:
    2021
  • 批准年份:
    2017
  • 项目状态:
    已结题
  • 起止时间:
    2018-01-01 至2021-12-31

项目摘要

The volume of global datasets is increasing explosively in recent years. Especially it has increased from tens of terabyte to petabytes, even to exabytes in some scientific applications and is still growing. The existing management systems for big data analytics cannot provide effective supports for data storage and analytics processing for big data. How to effectively store, manage big data and efficiently support big data analytics is a new challenge faced by researchers. And thus, we study the key theories and techniques, especially the algorithms for big data analytics in cloud computing, including the methods for big data storage and index, some approximate algorithms, parallel algorithms, instance optimal algorithms and parameterized algorithms for big data analytics. We also develop a system for big data analytics in cloud computing to verify the correctness and effectiveness of our proposed methods and algorithms.
近年来,全球的数据量呈爆炸性增长趋势,一些科学应用中的数据量已经从几十个TeraBy tes发展到PetaBytes, 甚至达到Exabytes级别并且在不断扩大。现有的大数据分析处理系统无法对大数据的存储与分析处理提供有效支持。如何有效地存储、管理这些大规模的数据集合,高效地支持各种大数据分析处理是目前面临的一个新的挑战性问题。为此,本课题从数据管理的角度,研究基于云计算的大数据分析处理的关键理论和技术,特别是相关算法的设计,主要包括大数据的存储与索引方法、大数据分析的近似算法、并行算法、实例优化算法和参数化算法,并研制基于云计算的大数据分析处理系统原型,验证课题所提出方法的正确性和有效性。

结项摘要

近年来,全球的数据量呈爆炸性增长趋势,一些科学应用中的数据量已经从几十个TeraBytes发展到PetaBytes,甚至达到Exabytes级别并且在不断扩大。现有的大数据分析处理系统无法对大数据的存储与分析处理提供有效支持。如何有效地存储、管理这些大规模的数据集合,高效地支持各种大数据分析处理是目前面临的一个新的挑战性问题。为此,本课题从数据管理的角度,研究基于云计算的大数据分析处理的关键理论和技术,取得了一系列的研究成果。同时,研制基于云计算的大数据分析处理系统原型,验证课题组所提出方法的正确性和有效性。迄今为止,课题组已在国内外知名期刊和会议上发表重要学术论文14篇,包括国际期刊9篇,国际会议2篇,国内期刊3篇,其中SCI检索9篇,EI检索14篇。国际和国内学术会议专题报告或讲座3人次。发明专利2项。

项目成果

期刊论文数量(11)
专著数量(0)
科研奖励数量(0)
会议论文数量(2)
专利数量(2)
Achieving Personalized k-Anonymity-Based Content Privacy for Autonomous Vehicles in CPS
在 CPS 中为自动驾驶汽车实现基于 k-匿名的个性化内容隐私
  • DOI:
    10.1109/tii.2019.2950057
  • 发表时间:
    2020-06-01
  • 期刊:
    IEEE TRANSACTIONS ON INDUSTRIAL INFORMATICS
  • 影响因子:
    12.3
  • 作者:
    Wang, Jinbao;Cai, Zhipeng;Yu, Jiguo
  • 通讯作者:
    Yu, Jiguo
Achieving the Optimal k-Anonymity for Content Privacy in Interactive Cyberphysical Systems
在交互式网络物理系统中实现内容隐私的最佳 k-匿名性
  • DOI:
    10.1155/2018/7963163
  • 发表时间:
    2018-09
  • 期刊:
    Security and Communication Networks
  • 影响因子:
    --
  • 作者:
    Wang Jinbao;Tian Ling;Huang Yan;Yang Donghua;Gao Hong
  • 通讯作者:
    Gao Hong
面向互联网资源的医学命名实体识别研究
  • DOI:
    --
  • 发表时间:
    2018
  • 期刊:
    计算机科学与探索
  • 影响因子:
    --
  • 作者:
    田家源;杨东华;王宏志
  • 通讯作者:
    王宏志
面向知识图谱的图嵌入学习研究进展
  • DOI:
    10.13328/j.cnki.jos.006426
  • 发表时间:
    --
  • 期刊:
    软件学报
  • 影响因子:
    --
  • 作者:
    杨东华;何涛;王宏志;王金宝
  • 通讯作者:
    王金宝
Efficient top/bottom-k fraction estimation in spatial databases using bounded main memory
使用有界主内存在空间数据库中进行高效的 top/bottom-k 分数估计
  • DOI:
    --
  • 发表时间:
    --
  • 期刊:
    Tsinghua Science and Technology
  • 影响因子:
    6.6
  • 作者:
    Jinbao Wang;Zhuojun Duan;Xixian Han;Donghua Yang
  • 通讯作者:
    Donghua Yang

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi || "--"}}
  • 发表时间:
    {{ item.publish_year || "--" }}
  • 期刊:
    {{ item.journal_name }}
  • 影响因子:
    {{ item.factor || "--"}}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.authors }}

数据更新时间:{{ patent.updateTime }}

其他文献

RB树:一种支持空间近似关键字查询的外存索引
  • DOI:
    --
  • 发表时间:
    --
  • 期刊:
    计算机研究与发展
  • 影响因子:
    --
  • 作者:
    王金宝;高宏;李建中;杨东华
  • 通讯作者:
    杨东华
TKEP:海量数据上一种有效的Top-K查询处理算法
  • DOI:
    --
  • 发表时间:
    --
  • 期刊:
    计算机学报
  • 影响因子:
    --
  • 作者:
    韩希先;杨东华;李建中
  • 通讯作者:
    李建中
海量数据上的近似连接聚集操作
  • DOI:
    --
  • 发表时间:
    --
  • 期刊:
    计算机学报
  • 影响因子:
    --
  • 作者:
    韩希先;杨东华;李建中
  • 通讯作者:
    李建中
RM树:一种支持字符串相似性操作的索引
  • DOI:
    --
  • 发表时间:
    2011
  • 期刊:
    计算机学报
  • 影响因子:
    --
  • 作者:
    王金宝;高宏;李建中;杨东华
  • 通讯作者:
    杨东华
新平县茶园土壤养分特征及肥力质量评价
  • DOI:
    --
  • 发表时间:
    2018
  • 期刊:
    云南农业大学学报(自然科学)
  • 影响因子:
    --
  • 作者:
    温继良;周元清;杨东华;普金安;李淑英;卢国理;朱春蓉;张翠萍
  • 通讯作者:
    张翠萍

其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi || "--" }}
  • 发表时间:
    {{ item.publish_year || "--"}}
  • 期刊:
    {{ item.journal_name }}
  • 影响因子:
    {{ item.factor || "--" }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}
empty
内容获取失败,请点击重试
重试联系客服
title开始分析
查看分析示例
此项目为已结题,我已根据课题信息分析并撰写以下内容,帮您拓宽课题思路:

AI项目思路

AI技术路线图

杨东华的其他基金

云计算中TB/PB级海量数据近似查询处理技术的研究
  • 批准号:
    61272046
  • 批准年份:
    2012
  • 资助金额:
    80.0 万元
  • 项目类别:
    面上项目
基于云计算环境的TB/PB级海量数据查询处理技术的研究
  • 批准号:
    60903016
  • 批准年份:
    2009
  • 资助金额:
    18.0 万元
  • 项目类别:
    青年科学基金项目

相似国自然基金

{{ item.name }}
  • 批准号:
    {{ item.ratify_no }}
  • 批准年份:
    {{ item.approval_year }}
  • 资助金额:
    {{ item.support_num }}
  • 项目类别:
    {{ item.project_type }}

相似海外基金

{{ item.name }}
{{ item.translate_name }}
  • 批准号:
    {{ item.ratify_no }}
  • 财政年份:
    {{ item.approval_year }}
  • 资助金额:
    {{ item.support_num }}
  • 项目类别:
    {{ item.project_type }}
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了

AI项目解读示例

课题项目:调控A型流感病毒诱导IFN-β表达的机制研究

AI项目摘要:

本研究聚焦于TRIM2蛋白在A型流感病毒诱导的IFN-β表达中的调控机制。A型流感病毒是全球性健康问题,其感染可导致严重的呼吸道疾病。IFN-β作为关键的抗病毒因子,其表达水平对抗病毒防御至关重要。然而,TRIM2如何调控IFN-β的表达尚未明确。本研究假设TRIM2通过与病毒RNA或宿主因子相互作用,影响IFN-β的产生。我们将采用分子生物学、细胞生物学和免疫学方法,探索TRIM2与A型流感病毒诱导IFN-β表达的关系。预期结果将揭示TRIM2在抗病毒免疫反应中的作用,为开发新的抗病毒策略提供理论基础。该研究对理解宿主抗病毒机制具有重要科学意义,并可能对临床治疗流感病毒感染提供新的视角。

AI项目思路:

科学问题:TRIM2如何调控A型流感病毒诱导的IFN-β表达?
前期研究:已有研究表明TRIM2参与抗病毒反应,但其具体机制尚不明确。
研究创新点:本研究将深入探讨TRIM2在IFN-β表达中的直接作用机制。
技术路线:包括病毒学、分子生物学、细胞培养和免疫检测技术。
关键技术:TRIM2与病毒RNA的相互作用分析,IFN-β启动子活性检测。
实验模型:使用A型流感病毒感染的细胞模型进行研究。

AI技术路线图

        graph TD
          A[研究起始] --> B[文献回顾与假设提出]
          B --> C[实验设计与方法学准备]
          C --> D[A型流感病毒感染模型建立]
          D --> E[TRIM2与病毒RNA相互作用分析]
          E --> F[TRIM2对IFN-β启动子活性的影响]
          F --> G[IFN-β表达水平测定]
          G --> H[TRIM2功能丧失与获得研究]
          H --> I[数据收集与分析]
          I --> J[结果解释与科学验证]
          J --> K[研究结论与未来方向]
          K --> L[研究结束]
      
关闭
close
客服二维码