翟成祥:文本大数据分析与挖掘——机遇,挑战,及应用前景

发布时间: 2016-12-29 12:15
知识文档-点击下载

文本大数据分析与挖掘:机遇,挑战,及应用前景.pdf

3.06 MB, 18人喜欢 , 689人浏览

所需积分: 5 积分 [立即下载]

完整版 PDF

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第000页.jpg
文本大数据分析与挖掘:机遇,挑战,及应用前景
Analysis and Mining of Big Text Data: Opportunities, Challenges, and Applications
ChengXiang Zhai (翟成祥)

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第001页.jpg
Text data cover all kinds of topics

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第002页.jpg
人= 主观智能“传感器” Humans as Subjective & Intelligent “Sensors”

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第003页.jpg
文本数据的特殊应用价值 Unique Value of Text Data

•对所有大数据应用都有应用价值: Useful to all big data applications
•特别有助于挖掘,利用有关人的行为,心态,观点的知识: Especially useful for mining knowledge about people’s behavior, attitude, and opinions
•直接表达知识;高质量数据( Directly express knowledge about our world )

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第004页.jpg
Opportunities of Text Mining Applications

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第005页.jpg
Challenges in Understanding Text Data (NLP)

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第006页.jpg
NLP is hard!

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第007页.jpg
Examples of Challenges

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第008页.jpg
The State of the Art: Mostly Relying on Machine Learning

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第009页.jpg
Robust and general NLP tends to be shallow while deep understanding doesn’t scale up.

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第010页.jpg
Grand Challenge

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第011页.jpg
文本数据镜拓宽人的感知 TextScope to enhance human perception

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第012页.jpg
TextScope Interface & Major Text Mining Techniques

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第013页.jpg
TextScope in Action: interactive decision support

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第014页.jpg
Application Example 1: Aviation Safety

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第015页.jpg
Abundance of text data in the aviation domain

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第016页.jpg
Monthly intake has been increasing (4k reports/month)

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第017页.jpg
Lots of useful knowledge buried in text

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第018页.jpg
Event Cube

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第019页.jpg
Sample Topic Coverage Comparison

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第020页.jpg
Comparative Analysis of Shaping Factors

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第021页.jpg
Application Example 2: Medical & Health

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第022页.jpg
Overview of Text Mining for Medical/Health Applications

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第023页.jpg
Medical Case Retrieval

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第024页.jpg
Extraction of Symptom Graphs from EHR

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第025页.jpg
Discovery of Adverse Drug Reactions from Forums

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第026页.jpg
Sample ADRs Discovered

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第027页.jpg
Mining Traditional Chinese Medicine Patient Records

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第028页.jpg
Beijing TCM Data Center

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第029页.jpg
Subcategorization of Patient Records

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第030页.jpg
TCM Knowledge Discovery

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第031页.jpg
Top 10 herb-symptoms relationships

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第032页.jpg
Typical Symptoms of three Diseases

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第033页.jpg
Typical Herbs for three Diseases

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第034页.jpg
Application Example 3: Business intelligence

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第035页.jpg
Motivation

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第036页.jpg
Solving LARA in two stages: Aspect Segmentation + Rating Regression

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第037页.jpg
Sample Result 1: Rating Decomposition

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第038页.jpg
Sample Result 2: Comparison of reviewers

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第039页.jpg
Sample Result 3:Aspect-Specific Sentiment Lexicon

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第040页.jpg
Application 1: Discover consumer preferences

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第041页.jpg
Application 2: User Rating Behavior Analysis

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第042页.jpg
Application 3: Personalized Recommendation of Entities

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第043页.jpg
Application Example 4: Prediction of Stock Market

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第044页.jpg
Text Mining for Understanding Time Series

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第045页.jpg
Stock-Correlated Topics in New York Times: June 2000 ~ Dec. 2011

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第046页.jpg
“Causal Topics” in 2000 Presidential Election

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第047页.jpg
Information Retrieval with Time Series Query

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第048页.jpg
Top ranked documents by American Airlines stock price

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第049页.jpg
Top ranked ‘relevant’ documents by Apple stock price

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第050页.jpg
总结 (Summary)

人= 主观智能“传感器”:文本数据的广泛特殊应用价值
  • 对所有大数据应用都有应用价值
  • 特别有助于挖掘,利用有关人的行为,心态,观点的知识
  • 直接表达知识(高质量数据):小文本数据应用

文本数据理解困难:必须优化人机合作
  • 用计算机所长,统计方法,机器学习
  • 将不完善的技术转化为有用的产品

文本数据镜:
  • 集信息检索和文本分析挖掘与一体
  • 支持交互式分析,决策支持
  • 应用实例:飞行安全,医疗卫生,智能商务,金融市场分析


文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第051页.jpg
前景与技术挑战:支持多种应用的通用文本数据镜

文本大数据分析与挖掘:机遇,挑战,及应用前景PDF第052页.jpg



  • 2017年8月,值得收藏的25份报告
  • 2017年7月,值得收藏的25份报告
邮件订阅
最新热门
 
相关知识
 
智能推荐
 
广告

帮助中心|关于我们|注册协议|投诉指引|获取积分|投稿须知|作者权益|下载须知|联系我们|手机版|USEIT Inc.

GMT+8, 2017-9-22 01:31 , Processed in 0.373450 second(s), 31 queries , Gzip On, Memcache On.

鄂公网安备 42011202000160号  鄂ICP备13013806号-1

网络经济主体信息湖北省互联网举报平台 中国互联网违法和不良信息举报中心

快速回复 返回顶部 返回列表