数据科学

来自集智百科 - 复杂系统|人工智能|复杂科学|复杂网络|自组织
苏格兰（讨论 | 贡献）2020年5月13日 (三) 15:17的版本
跳到导航 跳到搜索

此词条暂由彩云小译翻译，未经人工整理和审校，带来阅读不便，请见谅。

  • 词条预计填充内容

1.foundations 背景(了解的一些基础知识)；

2.术语内涵衍变（该术语如何产生及目前为止用法的一些不同）；

3.数据科学的研究内容

3.1数据科学基础理论

3.2 数据预处理

3.3数据计算

3.4数据管理

4.在数据科学方面的职业和工作；

5.数据科学的影响；

6.数据科学中所涉及的一些技术和应用软件；

7.数据科学、人工智能、机器学习之间的差别

找到两篇博文供参考https://blog.csdn.net/fengdu78/article/details/105154546 https://blog.csdn.net/dev_csdn/article/details/79127658

8.与统计学的关系


其中，第2部分是需要搜集补充的内容，第7部分有一些参考资料（后续还会再找一些），第8部分可进行补充。

有英文翻译的部分引言、1，2，4，5，6，8，没有英文内容3、7

  • 任务分配

任务一：引言，1背景、2术语内涵、3研究内容【负责人乐多多 】 其中背景部分文字需要进行翻译；引言、术语内涵已有参考资料和初期的人工翻译文本，研究内容需要找到资料进行填充；

任务二：4相关职业【Dorr已修订】、5数据科学的影响【负责人： 】 其中并没有初期的人工翻译文本，可进一步搜集资料，使其更加完善；

任务三：6相关应用软件、7与机器学习人工智能的差别、8与统计学的关系【负责人：趣木木 】 其中7、8需要搜集资料进行填充，8已有参考资料和初期的人工翻译文本；


  • 附言
  1. 任务完成上交为5月11号下午六点前
  2. 有些部分的内容过少，需要大家自行斟酌进行一下填充
  3. 任务领取方式 在对应的任务一二三后附上自己的名字或者昵称
  4. 大家有相关的参考资料也可以共享出来，并发给趣木木以便后期编者推荐时挑选进行运用
  5. 觉得还需要再添加什么模块，或者遇到什么问题可及时微信私聊趣木木


旧版有这个词条，感觉可以在方法论层面再充实一下


--趣木木（讨论）下为旧版相对应的引言内容的参考 可进行一下整及或填充


Data science is an inter-disciplinary field that uses scientific methods, processes, algorithms and systems to extract knowledge and insights from many structural and unstructured data.[1][2] Data science is related to data mining and big data. Data science is a "concept to unify statistics, data analysis, machine learning and their related methods" in order to "understand and analyze actual phenomena" with data.[3] It uses techniques and theories drawn from many fields within the context of mathematics, statistics, computer science, and information science. Turing award winner Jim Gray imagined data science as a "fourth paradigm" of science (empirical, theoretical, computational and now data-driven) and asserted that "everything about science is changing because of the impact of information technology" and the data deluge.[4][5]

数据科学与数据挖掘和大数据有关，是一个通过科学的方法、过程、算法和系统从众多结构化和非结构化的数据中提取知识和见解的跨学科领域。 [6] [7] 数据科学的概念结合了统计学、数据分析、机器学习等相关方法，以便于借助数据理解和分析实际现象。 [8] 它使用了从数学、统计学、信息科学、计算机科学等许多学科领域获得的技术与理论。图灵奖得主吉姆·格雷（Jim Gray）将数据科学设想为一种科学的“第四范式”（经验主义、理论研究、计算机辅助，现在是数据驱动），并且断言由于信息技术和数据洪流的影响，所有关于科学的事物都在不断地发生改变。 [4] [5]


在2012年《哈佛商业评论》称其为“21世纪最富有魅力的工作”后 [9] ，“数据科学”成了一个流行术语。它现在经常与早期概念互换使用，例如商业分析 [10] 、商业智能、预测模型和统计学。“数据科学富有魅力”的观点甚至被汉斯·罗斯林 Hans Rosling博士在2011年BBC纪录片中转述为“统计学是当今世界最具吸引力的学科”。内特·西尔弗 Nate Silver [11] 则将数据科学描述为一种对于统计学家更具吸引力的词语。


在许多场合，为了博人眼球，一些早期的解决方案现在被简单地打上了“数据科学”的旗号，而这可能冲淡这个术语的效用。 [12] 虽然现在许多大学的项目都提供数据科学学位，然而它们对数据科学的定义或者合适的课程内容都没有达成一致。 [10] 数据科学学位分量大跌，究其原因是许多数据科学和大数据项目没能给出有用的结果，而这通常是糟糕的管理和资源利用造成的。 [13] [14] [15] [16]


Foundations背景

Data science is an interdisciplinary field focused on extracting knowledge from data sets, which are typically large (see big data).[17] The field encompasses analysis, preparing data for analysis, and presenting findings to inform high-level decisions in an organization. As such, it incorporates skills from computer science, mathematics, statistics, information visualization, graphic design, and business.[18][19] Statistician Nathan Yau, drawing on Ben Fry, also links data science to human-computer interaction: users should be able to intuitively control and explore data.[20][21] In 2015, the American Statistical Association identified database management, statistics and machine learning, and distributed and parallel systems as the three emerging foundational professional communities.[22]

数据科学是一个跨学科的领域，致力于从数据集中提取知识，这些数据集通常都很大(请参阅大数据)。[23] 该领域包括分析，准备分析数据，及呈现结果，以此为组织的高层决策提供依据。因此，它融合了计算机科学、数学、统计学、信息可视化、图形设计和商业方面的技能。[24][25]统计学家丘南森（Nathan Yau）借鉴本•弗莱（Ben Fry）的观点，将数据科学和人机交互联系起来: 用户应该能够直观地控制和探索数据。[26][27] 2015年，美国统计协会 the American Statistical Association 确定数据库管理、统计和机器学习，以及分布式和并行系统为三个新兴的基础专业社区。[28]

Etymology 术语词义衍变

词源学




Early usage

早期使用



In 1962, John Tukey described a field he called “data analysis,” which resembles modern data science.[29] Later, attendees at a 1992 statistics symposium at the University of Montpellier II acknowledged the emergence of a new discipline focused on data of various origins and forms, combining established concepts and principles of statistics and data analysis with computing.[30][31]

In 1962, John Tukey described a field he called “data analysis,” which resembles modern data science. Later, attendees at a 1992 statistics symposium at the University of Montpellier II acknowledged the emergence of a new discipline focused on data of various origins and forms, combining established concepts and principles of statistics and data analysis with computing.


The term “data science” has been traced back to 1974, when Peter Naur proposed it as an alternative name for computer science.[6] In 1996, the International Federation of Classification Societies became the first conference to specifically feature data science as a topic.[6] However, the definition was still in flux. In 1997, C.F. Jeff Wu suggested that statistics should be renamed data science. He reasoned that a new name would help statistics shed inaccurate stereotypes, such as being synonymous with accounting, or limited to describing data.[32] In 1998, Chikio Hayashi argued for data science as a new, interdisciplinary concept, with three aspects: data design, collection, and analysis.[33]

The term “data science” has been traced back to 1974, when Peter Naur proposed it as an alternative name for computer science. In 1996, the International Federation of Classification Societies became the first conference to specifically feature data science as a topic. In 1998, Chikio Hayashi argued for data science as a new, interdisciplinary concept, with three aspects: data design, collection, and analysis.



During the 1990s, popular terms for the process of finding patterns in datasets (which were increasingly large) included “knowledge discovery” and “data mining.”[34][6]

During the 1990s, popular terms for the process of finding patterns in datasets (which were increasingly large) included “knowledge discovery” and “data mining.”

“数据科学”这一术语在过去的三十年里已经出现在各种语境中，但直到最近才成为一个确定的术语。在早期，1960年它被彼得·诺尔（Peter Naur）用作计算机科学的代名词。诺尔后来引入了“数据学”(datalogy)这一术语。 [35]


1962年，John Tukey 描述了一个他称之为“数据分析”的领域，类似于现代的数据科学。[29] 在之后的阶段，参加1992年第二届蒙彼利埃大学统计研讨会的与会者承认了一个新的学科的出现，这个学科专注于各种缘起和形式的数据，将统计和数据分析的既定概念和原则与计算结合起来。[36][37]


“数据科学”这一术语可以追溯到1974年，在1974年，彼得·诺尔 Peter Naur出版了《计算机方法简明调查》，在这本书对同时代被广泛应用的数据处理方法的调查中，他很自然地使用了“数据科学”这一术语，[6] 1996年，国际船级社联合会 the International Federation of Classification Societies成为第一个以数据科学为专题的会议。[38]


在1996年，国际分级社团联盟 (IFCS)的成员在日本神户举行了两年一次的会议，在此，术语“数据科学”在由林知己夫（Chikio Hayashi） [8] 举办的圆桌讨论上经由介绍之后首次被纳入会议标题（“数据科学、分级、相关方法”）。 [39]


在1997年11月，吴建福（C.F. Jeff Wu）以密歇根大学所授予的H.C Carver教授职位任命发表了题为“统计学=数据科学？” [40] 的就职演讲 [41] ，在演讲中他将统计学工作描述为数据收集、建模和分析、决策的三个流程。在结论中他首创了现代的、非计算机科学内的“数据科学”术语用法，并提倡统计学应更名为数据科学，统计学家应被称作为数据科学家。 [40]之后，他又在1998年纪念印度科学家和统计学家、印度统计学院创立者马哈拉诺比斯（P.C. Mahalanobis）的讲座上将同名的演讲作为其系列演讲 [42] 的第一篇进而发表。


1998年，林志雄主张数据科学是一个新的、跨学科的概念，包括数据设计、数据收集和数据分析三个方面。[43]


在20世纪90年代，在数据集中寻找模式的流行术语(数据集越来越大)包括“知识发现”和“数据挖掘”[34][6] 


 --趣木木（讨论）下为旧版关于数据科学的词源演变由来的部分内容  可参考整合并进行填充

Modern usage

现代用法

The modern conception of data science as an independent discipline is sometimes attributed to William S. Cleveland.[44] In a 2001 paper, he advocated an expansion of statistics beyond theory into technical areas; because this would significantly change the field, it warranted a new name.[34] "Data science" became more widely used in the next few years: in 2002, the Committee on Data for Science and Technology launched Data Science Journal. In 2003, Columbia University launched The Journal of Data Science.[34] In 2014, the American Statistical Association's Section on Statistical Learning and Data Mining changed its name to the Section on Statistical Learning and Data Science, reflecting the ascendant popularity of data science.[45]

The modern conception of data science as an independent discipline is sometimes attributed to William S. Cleveland. In a 2001 paper, he advocated an expansion of statistics beyond theory into technical areas; because this would significantly change the field, it warranted a new name.


The professional title of “data scientist” has been attributed to DJ Patil and Jeff Hammerbacher in 2008.[46] Though it was used by the National Science Board in their 2005 report, "Long-Lived Digital Data Collections: Enabling Research and Education in the 21st Century," it referred broadly to any key role in managing a digital data collection.[47]

The professional title of “data scientist” has been attributed to DJ Patil and Jeff Hammerbacher in 2008. Though it was used by the National Science Board in their 2005 report, "Long-Lived Digital Data Collections: Enabling Research and Education in the 21st Century," it referred broadly to any key role in managing a digital data collection.


There is still no consensus on the definition of data science and it is considered by some to be a buzzword.[48]

There is still no consensus on the definition of data science and it is considered by some to be a buzzword.



数据科学作为一门独立学科的现代概念，一定程度上归功于威廉 · s · 克利夫兰 William S. Cleveland。[49] 在2001年，威廉·克利夫兰（William S.Cleveland）在他的文章《数据科学：一个用来扩大统计学领域技术范畴的行动计划》将数据科学作为一门独立学科引入，扩大了统计学的领域并使之包含“数据计算的前沿”，这篇文章发表在2001年4月版的《国际统计评论》（International Statistical Review / Revue Internationale de Statistique）的第69卷，第1篇上。 [50] 在他的报告中，他主张将统计学从理论扩展到技术领域; 因为这将大大改变这个领域，它需要一个新的名称。克利夫兰建立了他认为数据科学所关心的6个技术领域：多学科调查，数据模型和方法，数据计算，教学方法、工具评估及其理论。


在2002年4月，国际科学委员会(ICSU)：数据科学与技术分会(CODATA) [51] 创办了数据科学期刊（Data Science Journal） [52] ，这是一份聚焦于诸如数据系统描述及其网络出版物、应用和法律问题的出版物 [53] 。之后不久，哥伦比亚大学在2003年1月开始出版数据科学期刊（The Journal of Data Science） [54] ，为所有数据工作者提供了发表意见和交流想法的平台。这份期刊衷心致力于统计学方法应用和定量研究。在2005年，美国国家科学委员会出版了“长期数字数据收集：赋能21世纪的研究和教育”这一内容，注明数据科学家为“信息和计算机科学家、数据库和软件程序员、学科专家、管理者和注解专家、图书管理员、档案保管员，以及其它对数字化数据收集的成功管理起到关键性作用的人。”他们的首要活动是“进行创造性探究与分析。” [55]


在2007年左右， [56] 图灵奖得主吉姆·格雷（Jim Gray）预见到使用大数据的分析计算作为主要科学方法的“数据驱动的科学”将成为科学的第四范式 [4] [5] ，我们将迎来一个科学文献、科学数据全部链接且彼此运用的世界。 [57]


2008年，DJ 帕蒂尔 DJ Patil和杰夫哈默巴赫尔 Jeff Hammerbacher被授予“数据科学家”的职称。[58]尽管美国国家科学委员会(National Science Board)在其2005年的报告《长期数字数据收集: 21世纪的研究和教育成果》(Long-Lived Digital Data Collections: Enabling Research and Education in the 21st Century)中使用了这个词，但它泛指管理数字数据收集的任何关键角色。[59]


在2012年《哈佛商业评论》的报道“数据科学家：21世纪最富有魅力的工作”中 [9] ，帕蒂尔（DJ Patil）声称其已于2008年和杰弗·哈梅巴赫（Jeff Hammerbacher）共同创造了这一术语，用以标注他们在领英和脸书上的职业信息。他断言数据科学家将是一种全新的职业类型，并且数据科学家的短缺正成为某些领域的严重掣肘，但同时也将其描述为一个更加商业化导向的角色。


2013年，IEEE数据科学和高等分析专门工作组 [60] 成立，同年第一届“欧洲数据分析大会(ECDA)”在卢森堡召开，会上成立了欧洲数据科学协会（EuADS）。第一届国际会议——IEEE国际数据科学和高等分析会议也于2014年召开。 [61] 同年，编程训练营始祖General Assembly开启了学生付费培训，数据孵化器公司成立了一个富有竞争力的自由数据科学团体。 [62] 也是在2014年，美国统计协会的统计学习和数据挖掘部门将其期刊更名为“统计分析与数据挖掘：ASA数据科学期刊”，并在2016年将其部门更名为“统计学习与数据科学”。 [63]


2015年，Springer创办国际数据科学与分析杂志 [64] ，用来出版有关数据科学和大数据分析方面的原创性工作。2015年9月，GfKI在英国克彻斯特的埃塞克斯大学举办的第三届ECDA大会上增设“数据科学社团”。


目前，对于数据科学的定义似乎还=依旧没有达成共识，有些人认为这是一个流行词。[65]

研究内容

 --趣木木（讨论）并不限于所列出来的条目 可以根据研究内容进行自主填充

数据科学基础理论

数据科学中的新理念、理论、方法、技术及工具以及数据科学的研究目的、理论基础、研究内容、基本流程、主要原则、典型应用、人才培养、项目管理等。在此需要特别提醒的是--"基础理论"与"理论基础"是两个不同的概念。数据科学的"基础理论"在数据科学的研究边界之内，而其"理论基础"在数据科学的研究边界之外，是数据科学的理论依据和来源。

数据预处理

为了提升数据质量、降低数据计算的复杂度、减少数据计算量以及提升数据处理的准确性，数据科学中需要对原始数据进行预处理--进行数据审计、数据清洗、数据变换、数据集成、数据脱敏、数据规约和数据标注等。

数据计算

在数据科学中，计算模式发生了根本性的变化--从集中式计算、分布式计算、网格计算等传统计算过渡至云计算。有一定的代表性的是Google云计算3大技术、Hadoop MapReduce和YARN技术的出现。数据计算模式的变化意味着数据科学中所关注的数据计算的主要目标、瓶颈和矛盾发生了根本性变化。

数据管理

在完成"数据预处理"(或"数据计算")之后，我们需要对数据进行管理，以便进行(再次进行)"数据处理"以及数据的再利用和长久保管。在数据科学中，数据管理方法与技术发生了根本性的改变--不仅包括传统关系型数据库，而且还出现了一些新兴数据管理技术，例如NoSQL、NewSQL技术和关系云等。

Careers in data science 数据科学的相关职业

Data science is a growing field. A career as a data scientist is ranked at the third best job in America for 2020 by Glassdoor, and was ranked the number one best job from 2016-2019.[66] Data scientists have a median salary of $118,370 per year or $56.91 per hour.[67] Job growth in this field is also above average, with a projected increase of 16% from 2018 to 2028.[67] The largest employer of data scientists in the US is the federal government, employing 28% of the data science workforce.[67] Other large employers of data scientists are computer system design services, research and development laboratories, and colleges and universities.[67] Typically, data scientists work full time, and some work more than 40 hours a week.[67]

Data science is a growing field. A career as a data scientist is ranked at the third best job in America for 2020 by Glassdoor, and was ranked the number one best job from 2016-2019. Data scientists have a median salary of $118,370 per year or $56.91 per hour. Job growth in this field is also above average, with a projected increase of 16% from 2018 to 2028. The largest employer of data scientists in the US is the federal government, employing 28% of the data science workforce. Other large employers of data scientists are computer system design services, research and development laboratories, and colleges and universities. Typically, data scientists work full time, and some work more than 40 hours a week.

数据科学是一个不断发展的领域。数据科学家在Glassdoor(美国的一家做企业点评与职位搜索的职场社区)评价的2020年美国最佳职业中居第三名，在2016-2019年最佳职业中居首位。数据科学家的平均薪资是每年118,370美元或每小时56.91美元。该领域的就业增长率也高于平均水平，预计从2018年到2028年将增长16%。美国的数据科学家的最大雇佣方是美国联邦政府，占比28%；其他主要雇主包括计算机系统设计服务、研究和开发实验室以及高校。通常情况下，数据科学家全职工作，有些人每周工作超过40小时。




Educational path

教育途径

In order to become a data scientist, there is a significant amount of education and experience required. The first step in becoming a data scientist is to earn a bachelor's degree, typically in a field related to computing or mathematics.[68][67] Coding bootcamps are also available and can be used as an alternate pre-qualification to supplement a bachelor's degree in another field.[68] Most data scientists also complete a master’s degree or a PhD in data science.[68] Once these qualifications are met, the next step to becoming a data scientist is to apply for an entry level job in the field.[68] Some data scientists may later choose to specialize in a sub-field of data science.[68]

In order to become a data scientist, there is a significant amount of education and experience required. The first step in becoming a data scientist is to earn a bachelor's degree, typically in a field related to computing or mathematics. Coding bootcamps are also available and can be used as an alternate pre-qualification to supplement a bachelor's degree in another field. Most data scientists also complete a master’s degree or a PhD in data science. Once these qualifications are met, the next step to becoming a data scientist is to apply for an entry level job in the field. Some data scientists may later choose to specialize in a sub-field of data science.

要成为一名数据科学家，需要接受充分教育、积累大量经验。成为数据科学家的第一步通常是在与计算或数学相关的领域获得学士学位；其他领域的学士也可以通过参加编程训练营补充资格。大多数数据科学家也在该领域取得了硕士或博士学位。一旦符合这些条件，成为数据科学家的下一步就是申请该领域的入门级工作。一些数据科学家以后可能会选择专攻数据科学的一个分支领域。

Specializations and associated careers

专业细分和相关职业



  • 机器学习科学家: 机器学习科学家研究数据分析新方法，创立算法.[69]


  • 数据分析师: 数据分析师利用大型数据集来收集信息，以满足公司需求[69]


  • 数据顾问: 数据顾问与企业合作，以确定对数据分析产生的信息的最佳利用[68]


  • 数据架构师: 数据架构师提供针对性能和设计应用优化的数据解决方案[69]


  • 应用程序架构师: 应用程序架构师跟踪应用程序在整个业务中的使用情况，以及其与用户和其他应用程序的交互情况.[69]

Impacts of data science数据科学的影响

 --趣木木（讨论）需要再进行补充 内容过少

Big data is very quickly becoming a vital tool for businesses and companies of all sizes.[70] The availability and interpretation of big data has altered the business models of old industries and enabled the creation of new ones.[70] Data-driven businesses are worth $1.2 trillion collectively in 2020, an increase from $333 billion in the year 2015.[71] Data scientists are responsible for breaking down big data into usable information and creating software and algorithms that help companies and organizations determine optimal operations.[71] As big data continues to have a major impact on the world, data science does as well due to the close relationship between the two.[71]

Big data is very quickly becoming a vital tool for businesses and companies of all sizes. The availability and interpretation of big data has altered the business models of old industries and enabled the creation of new ones. Data scientists are responsible for breaking down big data into usable information and creating software and algorithms that help companies and organizations determine optimal operations. As big data continues to have a major impact on the world, data science does as well due to the close relationship between the two.

大数据正迅速成为各种规模的企业和公司的重要工具。大数据的可用性和解释改变了旧行业的商业模式，并促成了新行业的创建。数据科学家负责将大数据分解成可用的信息，并创建软件和算法，帮助企业和组织确定最佳操作。随着大数据继续对世界产生重大影响，数据科学也由于两者之间的密切关系而产生重大影响。


大数据还引起了科技界对科学研究方法论的重新审视，正在引发科学研究思维与方法的一场革命。最早的科学研究只有实验科学，随后出现了以研究各种定律和定理为特征的理论科学。由于理论分析方法在许多问题上过于复杂，难以解决实际问题，人们开始寻求模拟的方法，导致计算科学的兴起。海量数据的出现催生了一种新的科研模式，即面对海量数据，科研人员只需从数据中直接查找或挖掘所需要的信息、知识和智慧，甚至无需直接接触需研究的对象。2007年，已故的图灵奖得主吉姆·格雷（Jim Gray）在他最后一次演讲中描绘了数据密集型科学研究的“第四范式”（TheFourth Paradigm）[5]，把数据密集型科学从计算科学中单独区分开来。格雷认为，要解决我们面临的某些最棘手的全球性挑战，“第四范式”可能是唯一具有系统性的方法。其实，“第四范式”不仅是 科研方式的转变，也是人们思维方式的大变化。


　不仅如此，数据分析几乎涉及到了现代数学的所有分支。甚至于像表示论这样的极其抽象的分支，在数据科学领域也有其发挥作用的余地。所以数据科学对数学的要求和推动是全面的，而不是仅仅局限在几个领域。数据应该成为数、图形和方程之外数学研究的基本对象之一。

　　对计算机学科的影响

　　数据科学对计算机科学的发展也会带来很大的影响。图灵奖得主John Hopcroft曾经指出，在过去的几十年里，计算机科学的研究对象主要是计算机本身，包括硬件和软件。以后计算机科学的发展将主要围绕应用展开。而从计算机科学自身来看，这些应用领域提供的主要研究对象就是数据。虽然计算机科学一贯重视数据的研究，但数据在其中的地位将会得到更进一步的加强。

　　对统计学的影响

　　再看统计学。统计学一直就是一门研究数据的学科。所以它也是数据科学最核心的部分之一。但在数据科学的框架之下，统计学的发展也会受到很大的冲击。

　　这种冲击至少表现在两个方面。一是关于数据的模型将会跳出传统的统计模型的框架。更一般的数学概念，如拓扑、几何和随机场的概念将会在数据分析中扮演重要的角色。二是算法和分布式计算将成为研究的中心课题之一。

Technologies and techniques 所涉及的技术和应用软件

 --趣木木（讨论）所涉及的两个词 我查的时候都是技术的意思 在查看内容后也不知道怎么区别这两个词  cnki的查询结果：Technique：技术(59685)方法(19269)工艺(4963)；Technologies：技术(39330) 工艺(3185) 的技术(2197)；

There are a variety of different technologies and techniques that are used for data science which depending on the application. 有各种不同的技术用于数据科学，这取决于在什么应用软件实现该技术。

Techniques技术

  • Clustering is a technique used to group data together.
  • 聚类是一种用于将数据分组在一起的技术。

聚类，将相似的事物聚集在一起，将不相似的事物划分到不同的类别的过程。是将复杂数据简化为少数类别的一种手段。聚类分析的目标就是在相似的基础上收集数据来分类。聚类源于很多领域，包括数学，计算机科学，统计学，生物学和经济学。在不同的应用领域，很多聚类技术都得到了发展，这些技术方法被用作描述数据，衡量不同数据源间的相似性，以及把数据源分类到不同的簇中。

聚类的基本思想：

  1. 有大量的样本。
  2. 假定研究的样本之间存在程度不同的相似性，可以分为几类；相同类别的样本相似度高，不同类别的样本相似度差。
  3. 用一些数据指标来描述样本的若干属性，构成向量。
  4. 用某种方法度量样本之间或者类别 之间的相似性（或称距离），依据距离来进行分类。
  5. 根据分类来研究各类样本的共性，找出规律。
  • Dimensionality reduction is used to reduce the complexity of data computation so that it can be performed more quickly.
  • 降维用于降低数据计算的复杂性，使其能够更快地执行。

数据降维可以降低模型的计算量并减少模型运行时间、降低噪音变量信息对于模型结果的影响、便于通过可视化方式展示归约后的维度信息并减少数据存储空间。因此，大多数情况下，当我们面临高维数据时，都需要对数据做降维处理。

数据降维有两种方式：特征选择，维度转换。

  1. 特征选择

特征选择指根据一定的规则和经验，直接在原有的维度中挑选一部分参与到计算和建模过程，用选择的特征代替所有特征，不改变原有特征，也不产生新的特征值。 特征选择的降维方式好处是可以保留原有维度特征的基础上进行降维，既能满足后续数据处理和建模需求，又能保留维度原本的业务含义，以便于业务理解和应用。对于业务分析性的应用而言，模型的可理解性和可用性很多时候要有限于模型本身的准确率、效率等技术指标。例如，决策树得到的特征规则，可以作为选择用户样本的基础条件，而这些特征规则便是基于输入的维度产生。

  1. 维度转换

维度转换是按照一定数学变换方法，把给定的一组相关变量（维度）通过数学模型将高纬度空间的数据点映射到低纬度空间中，然后利用映射后变量的特征来表示原有变量的总体特征。这种方式是一种产生新维度的过程，转换后的维度并非原来特征，而是之前特征的转化后的表达式，新的特征丢失了原有数据的业务含义。 通过数据维度变换的降维方法是非常重要的降维方法，这种降维方法分为线性降维和非线性降维两种，其中常用的代表算法包括独立成分分析（ICA），主成分分析（PCA），因子分析（Factor Analysis，FA），线性判别分析（LDA），局部线性嵌入（LLE），核主成分分析（Kernel PCA）等。

  • Machine learning is a technique used to perform tasks by inferencing patterns from data.
  • 机器学习是一种通过从数据中推断模式来执行任务的技术。专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。它是人工智能的核心，是使计算机具有智能的根本途径。机器学习也是用数据或以往的经验,以此优化计算机程序的性能标准。
 --趣木木（讨论）先将其意思译出来后再进行一些补充

Technologies

技术

  • Python is a programming language with simple syntax that is commonly used for data science.[72] There are a number of python libraries that are used in data science including numpy, pandas, and scipy.
  • Python是一种语法简单的编程语言，通常用于数据科学。在数据科学中使用了大量的python库，包括numpy、panda和scipy。
  • R is a programming language that was designed for statisticians and data mining[73] and is optimized for computation.
  • R是一种为统计学家而设计程序语言，其可以用于数据挖掘和计算优化。

R作为一种统计分析软件，是集统计分析与图形显示于一体的。它可以运行于UNIX,Windows和Macintosh的操作系统上，而且嵌入了一个非常方便实用的帮助系统，相比于其他统计分析软件，R还有以下特点：

  1. R是自由软件。这意味着它是完全免费,开放源代码的。可以在它的网站及其镜像中下载任何有关的安装程序、源代码、程序包及其源代码、文档资料。标准的安装文件身自身就带有许多模块和内嵌统计函数,安装好后可以直接实现许多常用的统计功能。
  2. R是一种可编程的语言。作为一个开放的统计编程环境,语法通俗易懂,很容易学会和掌握语言的语法。而且学会之后,我们可以编制自己的函数来扩展现有的语言。这也就是为什么它的更新速度比一般统计软件,如,SPSS,SAS等快得多。大多数最新的统计方法和技术都可以在R中直接得到。
  3. 所有R的函数和数据集是保存在程序包里面的。只有当一个包被载入时,它的内容才可以被访问。一些常用、基本的程序包已经被收入了标准安装文件中,随着新的统计分析方法的出现,标准安装文件中所包含的程序包也随着版本的更新而不断变化。在另外版安装文件中,已经包含的程序包有：base一R的基础模块、mle一极大似然估计模块、ts一时间序列分析模块、mva一多元统计分析模块、survival一生存分析模块等等。
  4. R具有很强的互动性。除了图形输出是在另外的窗口处，它的输入输出窗口都是在同一个窗口进行的，输入语法中如果出现错误会马上在窗口口中得到提示,对以前输入过的命令有记忆功能,可以随时再现、编辑修改以满足用户的需要。输出的图形可以直接保存为JPG,BMP,PNG等图片格式,还可以直接保存为PDF文件。另外,和其他编程语言和数据库之间有很好的接口。
  5. 如果加入R的帮助邮件列表一,每天都可能会收到几十份关于R的邮件资讯。可以和全球一流的统计计算方面的专家讨论各种问题,可以说是全世界最大、最前沿的统计学家思维的聚集地。
  • TensorFlow is a framework for creating machine learning models developed by Google.
  • TensorFlow是一个用于创建由谷歌开发的机器学习模型的框架，是一个端到端开源机器学习平台。

Tensorflow拥有一个全面而灵活的生态系统，其中包含各种工具、库和社区资源，可助力研究人员推动先进机器学习技术的发展，并使开发者能够轻松地构建和部署由机器学习提供支持的应用。TensorFlow也是一个基于数据流编程 Dataflow Programming 的符号数学系统，被广泛应用于各类机器学习 Machine Learning算法的编程实现，其前身是谷歌的神经网络算法库DistBelief 。 Tensorflow拥有多层级结构，可部署于各类服务器、PC终端和网页并支持GPU和TPU高性能数值计算，被广泛应用于谷歌内部的产品开发和各领域的科学研究 。 TensorFlow由谷歌人工智能团队谷歌大脑 Google Brain 开发和维护，拥有包括TensorFlow Hub、TensorFlow Lite、TensorFlow Research Cloud在内的多个项目以及各类应用程序接口 Application Programming Interface 。自2015年11月9日起，TensorFlow依据阿帕奇授权协议 Apache 2.0 open source license 开放源代码 。

  • Pytorch is another framework for machine learning developed by Facebook.
  • Pytorch是Facebook开发的另一个机器学习框架。

PyTorch是一个开源的Python机器学习库，基于Torch，用于自然语言处理等应用程序。 2017年1月，由Facebook人工智能研究院（FAIR）基于Torch推出了PyTorch。它是一个基于Python的可续计算包，提供两个高级功能：

  1. 具有强大的GPU加速的张量计算（如NumPy）。
  2. 包含自动求导系统的的深度神经网络。
  • Jupyter Notebook is an interactive web interface for Python that allows faster experimentation.
  • Jupyter Notebook是一个用于Python的交互式web界面，允许进行更快的实验。

Jupyter Notebook（此前被称为 IPython notebook）是一个交互式笔记本，支持运行 40 多种编程语言。其本质是一个 Web 应用程序，便于创建和共享文学化程序文档，支持实时代码，数学方程，可视化。 用途包括：数据清理和转换，数值模拟，统计建模，机器学习等等 。

  • Tableau makes a variety of software that is used for data visualization[74].
  • Tableau制作各种用于数据可视化的软件。

Tableau Software是桌面系统上的一种简单的商业智能工具软件。致力于帮助人们查看并理解数据。Tableau 帮助任何人快速分析、可视化并分享信息。超过 42,000 家客户通过使用 Tableau 在办公室或随时随地快速获得结果。数以万计的用户使用 Tableau Public 在博客与网站中分享数据。

  • Apache Hadoop is a software framework that is used to process data over large distributed systems.
  • Apache Hadoop是一套用于在由通用硬件构建的大型集群上运行应用程序的框架。它实现了Map/Reduce编程范型，计算任务会被分割成小块（多次）运行在不同的节点上。除此之外，它还提供了一款分布式文件系统（HDFS），数据被存储在计算节点上以提供极高的跨数据中心聚合带宽。

与机器学习、人工智能之间的异同

需要清楚的是，数据科学、机器学习、人工智能这三者之间的限定并不是那么绝对：并不是所有符合每个定义的东西都只属于这个领域。使用的是描述性的方法而不是说明性的方法来说明这三者的区别：

  • 数据科学产生见解
  • 机器学习产生预测
  • 人工智能产生行为

数据科学负责见解

数据科学与其他两个领域不同，因为它的目标跟人类的目标尤其接近：获得洞察力和理解力。Jeff Leek 杰夫韭菜 对数据科学所能达到的见解类型有一个很好的定义，包括描述性，探索性和因果关系。 

 --趣木木（讨论）Jeff Leek 杰夫韭菜的cnki翻译意义感觉不太对

同样，并不是所有产生见解的东西都有资格成为数据科学(数据科学的经典定义是它包含了统计、软件工程和领域专家的结合)。但是我们可以用这个定义把数据科学同机器学习和人工智能区别出来。它们之间的主要区别在于，在数据科学中，总是有一个人在循环当中：某人理解这个观点，看到数字，或者从结论中获益。说“下棋算法使用数据科学来选择下一步行动”，或者“谷歌地图使用数据科学来推荐驾驶方向”都是毫无意义的。

因此，数据科学的定义强调：

  1. 统计推断
  2. 数据可视化
  3. 实验设计
  4. 领域知识
  5. 沟通

数据科学家可能使用一些简单的工具：可以报告百分比，并根据SQL查询绘制线形图。还可以使用非常复杂的方法:可能与分布数据商店合作，分析数以万亿计的记录，开发前沿的统计技术，建立交互式可视化。不管使用什么，目的是为了更好地理解数据。

机器学习负责预测

机器学习是一个预测领域：“给定实例X具有特定的特征然后进行预测”。这些预测可能是关于未来的(“预测这个病人是否会进入脓毒症”)，但也可能是对于计算机来说并不是很轻易就识别出来的一些特质(“预测这个图像是否有鸟在里面”)。几乎所有的Kaggle竞赛都认为是机器学习的问题:提供一些训练数据，然后看看竞争对手能否对新的例子做出准确的预测。

数据科学和机器学习之间有很多重叠。例如，可以使用逻辑回归得出见解的关系(“富裕的用户更有可能会买我们的产品,所以我们应该改变我们的营销策略”),从而进行预测(“该用户有53%机会购买我们的产品,所以应该把产品推荐给他们”)。

像随机森林这种模型可解释性稍差，更适合“机器学习”的描述，而深度学习等方法则难以解释。如果你的目标是获取真知灼见，而不是做出预测，这可能会妨碍你。因此，我们可以假设有一个数据科学和机器学习的“光谱”，更倾向于数据科学的可解释模型和机器学习方面更多的“黑匣子”模型。


大多数的实践者会在两个任务之间来回切换非常轻松。在我的工作中使用了机器学习和数据科学：我可以在Stack Overflow上安装一个模型，以确定哪些用户可能正在寻找工作(机器学习)，然后构建总结和可视化来检验模型的工作原理(数据科学)。 这是发现模型中的缺陷，并与算法偏见作斗争的重要途径。这是数据科学家经常负责开发产品的机器学习组件的原因之一。

人工智能负责行为

人工智能是这三个名称当中迄今为止最古老以及最广为人知的，因此它的定义也是最具有挑战性的。感谢那些寻求金钱或关注的研究人员、记者和初创公司，使得人工智能这一术语被大量的传播和营销。

在“人工智能”的所有定义中，有一个共同点就是自主代理人执行或推荐操作(例如Poole, Mackworth和Goebel 1998, Russell和Norvig 2003)。一些我认为应该描述为AI的系统包括：

游戏算法(Deep Blue，AlphaGo) 机器人技术与控制理论(运动规划，行走两足机器人) 优化(谷歌地图选择路线) 自然语言处理(bots) 强化学习 同样，我们可以看到很多与其他领域的重叠。深度学习既属于机器学习范畴，又属于AI领域，这是非常有趣的。典型的用例是对数据进行训练，然后生成预测，在像AlphaGo这样的博弈算法中已经取得了巨大的成功。

但也有区别。如果我分析一些销售数据并发现特定行业的客户比其他行业的客户更新更多，那么输出是一些数字和图形，而不是特定的操作。(高管们可能会用这些结论来调整销售策略，但这种做法并不是自动的)。

人工智能和机器学习之间的区别更加微妙，历史上的机器学习经常被认为是人工智能的一个分支(特别是计算机视觉，这是一个典型的人工智能问题)。但我认为，机器学习领域很大程度上已经从人工智能独立出来了，部分原因是上面描述的反弹案例:大多数从事预测问题的人不喜欢把自己描述为人工智能研究人员。

案例研究：三项技术如何一起使用？

假设正在建造一辆无人驾驶车，现在卡在了停车标志这个具体问题上面。我们需要用到这三个领域之间的相关技术。

机器学习:汽车必须通过摄像头识别停车标志。我们构建了数以百万计的街边物体照片数据集，并训练算法来预测哪些街边是有停车标志。

人工智能:一旦汽车能够识别停车标志，它就需要决定何时采取刹车动作。我们需要它能够根据不同的路况进行判断(例如，在湿滑的路面上要能知道不能刹车刹的太快)，太早或太晚都是有危险的，这属于控制理论的范畴。

数据科学:街头测试的结果证明这辆车的性能还不够好，在某些场景下面，它可能沿着停车标志额右边行驶，但是这种情况漏报了。在分析了街道测试数据之后，我们得到了结论，漏报场景的概念根据一天当中不同的时间段有关:在日出之前或日落之后，更有可能错过一个停车标志。我们发现了大部分的数据集里面的数据只包含了白天的物体，因此又构造了一个更好的数据集，它包括了夜间图像，然后重新回到机器学习步骤。


来源：https://blog.csdn.net/dev_csdn/article/details/79127658 翻译原文http://varianceexplained.org/r/ds-ml-ai/ 原文作者：David Robinson

Relationship to statistics与统计学的关系

飞速增长的职位空缺表明“数据科学”的概念在商业界和学术界可谓一夜蹿红。 [75] 然而许多持批判态度的学者和新闻记者并没有看出数据科学与统计学的区别。吉尔·普莱斯（Gil Press）在福布斯杂志上撰文主张数据科学只是一个缺乏清晰定义的流行术语，并且在诸如研究生的课程内容中成了“商业分析”的简单替代。 [10]

Many statisticians, including Nate Silver, have argued that data science is not a new field, but rather another name for statistics.[76] Others argue that data science is distinct from statistics because it focuses on problems and techniques unique to digital data.[77] Vasant Dhar writes that statistics emphasizes quantitative data and description. In contrast, data science deals with quantitative and qualitative data (e.g. images) and emphasizes prediction and action.[78] Andrew Gelman of Columbia University and data scientist Vincent Granville have described statistics as a nonessential part of data science.[79][80]

Many statisticians, including Nate Silver, have argued that data science is not a new field, but rather another name for statistics. Others argue that data science is distinct from statistics because it focuses on problems and techniques unique to digital data. Vasant Dhar writes that statistics emphasizes quantitative data and description. In contrast, data science deals with quantitative and qualitative data (e.g. images) and emphasizes prediction and action. Andrew Gelman of Columbia University and data scientist Vincent Granville have described statistics as a nonessential part of data science.


包括纳特•西尔弗 Nate Silver 在内的许多统计学家都认为，数据科学不是一个新领域，而是统计的另一个名称。其他人则认为，数据科学与统计学不同，因为它关注的是数字数据特有的问题和技术。瓦桑特·达尔 Vasant Dhar写道，统计学强调定量数据和描述。相比之下，数据科学处理定量和定性数据(如图像)，强调预测和行动。哥伦比亚大学的安德鲁·格尔曼 Andrew Gelman 和数据科学家文森特·格兰维尔 Vincent Granville将统计描述为数据科学中一个不重要的部分。


Stanford professor David Donoho writes that data science is not distinguished from statistics by the size of datasets or use of computing, and that many graduate programs misleadingly advertise their analytics and statistics training as the essence of a data science program. He describes data science as an applied field growing out of traditional statistics.[29]

Stanford professor David Donoho writes that data science is not distinguished from statistics by the size of datasets or use of computing, and that many graduate programs misleadingly advertise their analytics and statistics training as the essence of a data science program. He describes data science as an applied field growing out of traditional statistics.

斯坦福大学教授 大卫·林奇 David Donoho 写道，数据科学与统计学之间并不存在数据集的大小或计算机的使用，许多研究生课程错误地宣传他们的分析学和统计学训练是数据科学课程的本质。他把数据科学描述为从传统统计学中发展出来的一个应用领域。


在美国统计协会的联合统计学会议上发表主旨演说后的问答部分，著名应用统计学家内特·西尔弗（Nate Silver）说道：“我认为数据科学家对于统计学家是一个富有魅力的词语…统计学是科学的一条分支。数据科学家在某种意义上略显多余，而且人们不应该痛斥统计学家这个词。” [11] 同样，在商业领域，各方研究者和分析师表示，仅仅有数据科学家远远不足以赋予公司真正的竞争优势， [81] 而且，仅仅把数据科学家看作四项更伟大的工作种类之一，各公司需要为大数据进行有效的融资，亦即：数据分析师、数据科学家、大数据开发者和大数据工程师。 [82]

另一方面，也有无数对批评的回应。在2014年一篇《华尔街日报》的文章中，欧文·沃拉达斯凯-伯杰（Irving Wladawsky-Berger）比较了数据科学的狂热与计算机科学的黎明。他坚称，就像其他交叉学科领域一样，数据科学利用来自学术界和工业界的方法论和实践，但之后会将它们变成一个新学科。他特别强调了现在一个广受认可的学术科目计算机科学曾面临的尖锐批评。 [34] 类似地，就像许多其他数据科学学界支持者一样， [34] 纽约大学斯特恩商学院的瓦桑德·达尔（Vasant Dhar）在2013年12月更加明确地表示数据科学与现存的仅仅聚焦于解释数据集的横跨所有学科的数据分析实践不同。数据科学为预测模型寻求了可行和一致的模式。 [6] 这项实际的工程目标采用了超越了传统数据分析的数据科学。如今这些学科和应用领域的数据缺乏可靠理论以供形成有力的预测模型，就像健康科学和社会科学那样。 [6]

斯坦福大学教授大卫·多诺霍（David Donoho）于2015年9月在一次与达尔类似的尝试中，通过抵制批评界对数据科学的三种过分简单化和误导性的定义，提出了更长远的主张。 [67] 第一，对多诺霍而言，数据科学不等同于大数据，因为数据集的规模不是区分数据科学和统计学的标准。 [67] 第二，数据科学不是由将大数据集分类整理的计算技能定义的，因为这些技能已经被广泛地用作所有学科的分析。 [67] 第三，数据科学现在是一个学术项目尚不足以给数据科学家日后的工作提供充足准备，而已然得到大量应用的领域，因为许多研究生项目带有误导性地宣传他们的分析和统计学训练是一个数据科学项目的实质。 [67] [83] 作为一名统计学家，多诺霍继承了学界诸多前辈的衣钵，拥护着数据科学研究范围的扩充， [67] 就像约翰·钱伯斯（John Chambers）极力主张统计学家采用一种包容的从数据中学习的概念、 [84] 威廉·克利夫兰（William Cleveland）强调把从数据中提取具有应用价值的预测工具摆在比发掘解释性理论更高的优先级上一样。 [50] 这些统计学家们共同展望着一个日益包容、从传统的统计学中生长出来并青出于蓝而胜于蓝的应用领域。

为了数据科学的未来，多诺霍为开放性科学规划了一个不断成长的环境，使所有研究者都可以访问用于学术出版物的数据集。 [67] 美国国家卫生研究院已经宣布了提高研究数据再现性和透明度的计划。 [85] 其它的大型期刊亦紧随其后。 [86] [87] 这样，数据科学的未来不仅在规模和方法论上超越了统计学理论的界线，它还会彻底革新现在的学术和研究范式。 [67] 诚如多诺霍所言蔽之：“数据科学的范围和影响在今后数十年会继续扩充，科研数据和有关科学本身的数据将无处不在、俯拾即是。” [67]

References

参考资料

  1. ↑ Dhar, V. (2013). "Data science and prediction". Communications of the ACM. 56 (12): 64–73. doi:10.1145/2500499. Archived from the original on 9 November 2014. Retrieved 2 September 2015.
  2. ↑ Jeff Leek (2013-12-12). "The key word in "Data Science" is not Data, it is Science". Simply Statistics. Archived from the original on 2 January 2014. Retrieved 1 January 2014.
  3. ↑ Hayashi, Chikio (1998-01-01). "What is Data Science? Fundamental Concepts and a Heuristic Example". In Hayashi, Chikio (in en). Data Science, Classification, and Related Methods. Studies in Classification, Data Analysis, and Knowledge Organization. Springer Japan. pp. 40–51. doi:10.1007/978-4-431-65950-1_3. ISBN 9784431702085. https://www.springer.com/book/9784431702085. 
  4. ↑ 4.0 4.1 4.2 Stewart Tansley; Kristin Michele Tolle (2009). The Fourth Paradigm: Data-intensive Scientific Discovery. Microsoft Research. ISBN 978-0-9825442-0-4. https://books.google.com/?id=oGs_AQAAIAAJ.  引用错误：无效<ref>标签；name属性“TansleyTolle2009”使用不同内容定义了多次
  5. ↑ 5.0 5.1 5.2 Bell, G.; Hey, T.; Szalay, A. (2009). "COMPUTER SCIENCE: Beyond the Data Deluge". Science. 323 (5919): 1297–1298. doi:10.1126/science.1170411. ISSN 0036-8075. PMID 19265007. 引用错误：无效<ref>标签；name属性“BellHey2009”使用不同内容定义了多次
  6. ↑ 6.0 6.1 6.2 6.3 6.4 6.5 6.6 6.7 Dhar, V. (2013). "Data science and prediction". Communications of the ACM. 56 (12): 64. {{cite journal}}: Text "doi : 10.1145/2500499" ignored (help) 引用错误：无效<ref>标签；name属性“:0”使用不同内容定义了多次 引用错误：无效<ref>标签；name属性“:0”使用不同内容定义了多次
  7. ↑ Jeff Leek 2013-12-12. The key word in "Data Science" is not Data, it is Science. Simply Statistics.
  8. ↑ 8.0 8.1 Hayashi, Chikio (1998-01-01). "What is Data Science? Fundamental Concepts and a Heuristic Example". In Hayashi, Chikio (in en). Data Science, Classification, and Related Methods. Studies in Classification, Data Analysis, and Knowledge Organization. Springer Japan. pp. 40–51. https://link.springer.com/chapter/10.1007/978-4-431-65950-1_3. 
  9. ↑ 9.0 9.1 Davenport, Thomas H.; Patil, DJ (Oct 2012). "Data Scientist: The Sexiest Job of the 21st Century". Harvard Business Review. {{cite journal}}: Cite journal requires |journal= (help)
  10. ↑ 10.0 10.1 10.2 Data Science: What's The Half-Life Of A Buzzword?. Forbes.2013-08-19.
  11. ↑ 11.0 11.1 "Nate Silver: What I need from statisticians". 23 Aug 2013
  12. ↑ Warden, Pete(2011-05-09). "Why the term "data science" is flawed but useful" O'Reilly Radar. Retrieved 2018-05-20.
  13. ↑ "Are You Setting Your Data Scientists Up to Fail?". Harvard Business Review.2018-01-25. Retrieved 2018-05-26.
  14. ↑ "70% of Big Data projects in UK fail to realise full potential" www.consultancy.uk. Retrieved 2018-05-26.
  15. ↑ "The Data Economy: Why do so many analytics projects fail? - Analytics Magazine". Analytics Magazine. 2014-07-07. Retrieved 2018-05-26.
  16. ↑ "Data Science: 4 Reasons Why Most Are Failing to Deliver". www.kdnuggets.com. Retrieved 2018-05-26.
  17. ↑ "About Data Science | Data Science Association". www.datascienceassn.org. Retrieved 2020-04-03.
  18. ↑ "1. Introduction: What Is Data Science? - Doing Data Science [Book]". www.oreilly.com (in English). Retrieved 2020-04-03.
  19. ↑ "the three sexy skills of data geeks". m.e.driscoll: data utopian (in English). Retrieved 2020-04-03.
  20. ↑ Yau, Nathan (2009-06-04). "Rise of the Data Scientist". FlowingData (in English). Retrieved 2020-04-03.
  21. ↑ "Basic Example". benfry.com. Retrieved 2020-04-03.{{cite web}}: CS1 maint: url-status (link)
  22. ↑ "ASA Statement on the Role of Statistics in Data Science". AMSTATNEWS. American Statistical Association. 2015-10-01. Archived from the original on 20 June 2019. Retrieved 2019-05-29.
  23. ↑ "About Data Science | Data Science Association". www.datascienceassn.org. Retrieved 2020-04-03.
  24. ↑ "1. Introduction: What Is Data Science? - Doing Data Science [Book]". www.oreilly.com (in English). Retrieved 2020-04-03.
  25. ↑ "the three sexy skills of data geeks". m.e.driscoll: data utopian (in English). Retrieved 2020-04-03.
  26. ↑ Yau, Nathan (2009-06-04). "Rise of the Data Scientist". FlowingData (in English). Retrieved 2020-04-03.
  27. ↑ "Basic Example". benfry.com. Retrieved 2020-04-03.{{cite web}}: CS1 maint: url-status (link)
  28. ↑ "ASA Statement on the Role of Statistics in Data Science". AMSTATNEWS. American Statistical Association. 2015-10-01. Archived from the original on 20 June 2019. Retrieved 2019-05-29.
  29. ↑ 29.0 29.1 29.2 Donoho, David (September 18, 2015). "50 years of Data Science" (PDF). Retrieved April 2, 2020.{{cite web}}: CS1 maint: url-status (link) 引用错误：无效<ref>标签；name属性“:7”使用不同内容定义了多次
  30. ↑ Data science and its applications = La @science des données et ses applications. Escoufier, Yves., Hayashi, Chikio (1918-....)., Fichet, Bernard.. Tokyo: Academic Press/Harcourt Brace. 1995. ISBN 0-12-241770-4. OCLC 489990740. 
  31. ↑ Murtagh, Fionn; Devlin, Keith (2018). "The Development of Data Science: Implications for Education, Employment, Research, and the Data Revolution for Sustainable Development". Big Data and Cognitive Computing (in English). 2 (2): 14. doi:10.3390/bdcc2020014.
  32. ↑ Wu, C.F. Jeff. "Statistics=Data Science?" (PDF). Retrieved April 2, 2020.{{cite web}}: CS1 maint: url-status (link)
  33. ↑ Murtagh, Fionn; Devlin, Keith (2018). "The Development of Data Science: Implications for Education, Employment, Research, and the Data Revolution for Sustainable Development". Big Data and Cognitive Computing (in English). 2 (2): 14. doi:10.3390/bdcc2020014.
  34. ↑ 34.0 34.1 34.2 34.3 34.4 34.5 Press, Gil. "A Very Short History Of Data Science". Forbes (in English). Retrieved 2020-04-03. 引用错误：无效<ref>标签；name属性“:1”使用不同内容定义了多次
  35. ↑ Naur, Peter (1 July 1966). "The science of datalogy". Communications of the ACM. 9 (7): 485. {{cite journal}}: Text "doi:10.1145/365719.366510" ignored (help)
  36. ↑ Data science and its applications = La @science des données et ses applications. Escoufier, Yves., Hayashi, Chikio (1918-....)., Fichet, Bernard.. Tokyo: Academic Press/Harcourt Brace. 1995. ISBN 0-12-241770-4. OCLC 489990740. 
  37. ↑ Murtagh, Fionn; Devlin, Keith (2018). "The Development of Data Science: Implications for Education, Employment, Research, and the Data Revolution for Sustainable Development". Big Data and Cognitive Computing (in English). 2 (2): 14. doi:10.3390/bdcc2020014.
  38. ↑ Wu, C.F. Jeff. "Statistics=Data Science?" (PDF). Retrieved April 2, 2020.{{cite web}}: CS1 maint: url-status (link)
  39. ↑ Press, Gil. "A Very Short History Of Data Science".
  40. ↑ 40.0 40.1 Wu, C. F. J. (1997). "Statistics = Data Science?". Retrieved 9 October 2014.
  41. ↑ "Identity of statistics in science examined" .The University Records, 9 November 1997, The University of Michigan. Retrieved 12 August 2013.
  42. ↑ "P.C. Mahalanobis Memorial Lectures, 7th series". P.C. Mahalanobis Memorial Lectures, Indian Statistical Institute. Archived from the original on 26 Feb 2017. Retrieved 18 Jul 2017.
  43. ↑ Murtagh, Fionn; Devlin, Keith (2018). "The Development of Data Science: Implications for Education, Employment, Research, and the Data Revolution for Sustainable Development". Big Data and Cognitive Computing (in English). 2 (2): 14. doi:10.3390/bdcc2020014.
  44. ↑ Gupta, Shanti (December 11, 2015). "William S Cleveland". Retrieved April 2, 2020.{{cite web}}: CS1 maint: url-status (link)
  45. ↑ Talley, Jill (June 1, 2016). "ASA Expands Scope, Outreach to Foster Growth, Collaboration in Data Science". Amstat News. American Statistical Association.{{cite news}}: CS1 maint: url-status (link)
  46. ↑ Davenport, Thomas H.; Patil, D. J. (2012-10-01). "Data Scientist: The Sexiest Job of the 21st Century". Harvard Business Review. No. October 2012. ISSN 0017-8012. Retrieved 2020-04-03.
  47. ↑ "US NSF - NSB-05-40, Long-Lived Digital Data Collections Enabling Research and Education in the 21st Century". www.nsf.gov. Retrieved 2020-04-03.
  48. ↑ Press, Gil. "Data Science: What's The Half-Life Of A Buzzword?". Forbes (in English). Retrieved 2020-04-03.
  49. ↑ Gupta, Shanti (December 11, 2015). "William S Cleveland". Retrieved April 2, 2020.{{cite web}}: CS1 maint: url-status (link)
  50. ↑ 50.0 50.1 Cleveland, W. S. (2001). Data science: an action plan for expanding the technical areas of the field of statistics. International Statistical Review / Revue Internationale de Statistique, 21–26.
  51. ↑ International Council for Science : Committee on Data for Science and Technology. (2012, April). CODATA, The Committee on Data for Science and Technology. Retrieved from International Council for Science : Committee on Data for Science and Technology: http://www.codata.org/
  52. ↑ Data Science Journal. (2012, April). Available Volumes. Retrieved from Japan Science and Technology Information Aggregator, Electronic: http://www.jstage.jst.go.jp/browse/dsj/_vols
  53. ↑ Data Science Journal. (2002, April). Contents of Volume 1, Issue 1, April 2002. Retrieved from Japan Science and Technology Information Aggregator, Electronic: http://www.jstage.jst.go.jp/browse/dsj/1/0/_contents
  54. ↑ The Journal of Data Science. (2003, January). Contents of Volume 1, Issue 1, January 2003. Retrieved from http://www.jds-online.com/v1-1
  55. ↑ National Science Board. Long-Lived Digital Data Collections Enabling Research and Education in the 21st Century . National Science Foundation . Retrieved 30 June 2013.
  56. ↑ Citation needed
  57. ↑ Markoff,John(2009-12-14). "Essays Inspired by Microsoft’s Jim Gray, Who Saw Science Paradigm Shift". The New York Times. Retrieved 2018-04-26.
  58. ↑ Davenport, Thomas H.; Patil, D. J. (2012-10-01). "Data Scientist: The Sexiest Job of the 21st Century". Harvard Business Review. No. October 2012. ISSN 0017-8012. Retrieved 2020-04-03.
  59. ↑ "US NSF - NSB-05-40, Long-Lived Digital Data Collections Enabling Research and Education in the 21st Century". www.nsf.gov. Retrieved 2020-04-03.
  60. ↑ "IEEE Task Force on Data Science and Advanced Analytics"
  61. ↑ "2014 IEEE International Conference on Data Science and Advanced Analytics"
  62. ↑ "NY gets new bootcamp for data scientists: It’s free, but harder to get into than Harvard ". Venture Beat Retrieved 2016-02-22.
  63. ↑ Talley,Jill(2016-06-01) "ASA Expands Scope, Outreach to Foster Growth, Collaboration in Data Science" . AMSTATNEWS. American Statistical Association. Retrieved 2017-02-04
  64. ↑ "Journal on Data Science and Analytics"
  65. ↑ Press, Gil. "Data Science: What's The Half-Life Of A Buzzword?". Forbes (in English). Retrieved 2020-04-03.
  66. ↑ "Best Jobs in America". Glassdoor (in English). Retrieved 2020-04-03.
  67. ↑ 67.00 67.01 67.02 67.03 67.04 67.05 67.06 67.07 67.08 67.09 67.10 67.11 67.12 67.13 "Computer and Information Research Scientists : Occupational Outlook Handbook: : U.S. Bureau of Labor Statistics". www.bls.gov (in English). Retrieved 2020-04-03. 引用错误：无效<ref>标签；name属性“:2”使用不同内容定义了多次
  68. ↑ 68.0 68.1 68.2 68.3 68.4 68.5 "What is a Data Scientist?". Master's in Data Science (in English). Retrieved 2020-04-03.
  69. ↑ 69.0 69.1 69.2 69.3 "11 Data Science Careers Shaping the Future". Northeastern University Graduate Programs (in English). 2018-11-23. Retrieved 2020-04-03.
  70. ↑ 70.0 70.1 Pham, Peter. "The Impacts Of Big Data That You May Not Have Heard Of". Forbes (in English). Retrieved 2020-04-03.
  71. ↑ 71.0 71.1 71.2 Martin, Sophia (2019-09-20). "How Data Science will Impact Future of Businesses?". Medium (in English). Retrieved 2020-04-03.
  72. ↑ Shell, M Scott (September 24, 2019). "An introduction to Python for scientific computing" (PDF). Retrieved April 2, 2020.{{cite web}}: CS1 maint: url-status (link)
  73. ↑ "R FAQ". cran.r-project.org. Retrieved 2020-04-03.
  74. ↑ Rhodes, Margaret (15 July 2014). "A Dead-Simple Tool That Lets Anyone Create Interactive Maps". Wired. Retrieved 2020-04-03.
  75. ↑ Darrow,Barb(May 21, 2015). "Data science is still white hot, but nothing lasts forever" .Fortune. Retrieved November 20, 2017.
  76. ↑ "Nate Silver: What I need from statisticians - Statistics Views". www.statisticsviews.com. Retrieved 2020-04-03.
  77. ↑ "What's the Difference Between Data Science and Statistics?". Priceonomics (in English). Retrieved 2020-04-03.
  78. ↑ DharVasant (2013-12-01). "Data science and prediction". Communications of the ACM (in English). 56 (12): 64–73. doi:10.1145/2500499.
  79. ↑ "Statistics is the least important part of data science « Statistical Modeling, Causal Inference, and Social Science". statmodeling.stat.columbia.edu. Retrieved 2020-04-03.
  80. ↑ Posted by Vincent Granville on December 8, 2014 at 5:00pm; Blog, View. "Data science without statistics is possible, even desirable". www.datasciencecentral.com (in English). Retrieved 2020-04-03.
  81. ↑ Miller, Steven (2014-04-10). "Collaborative Approaches Needed to Close the Big Data Skills Gap". Journal of Organization Design (in English). 3 (1): 26–30. {{cite journal}}: Text "doi:10.7146/jod.9823" ignored (help); Text "issn:2245-408X" ignored (help)
  82. ↑ De Mauro, Andrea; Greco, Marco; Grimaldi, Michele; Ritala, Paavo. "Human resources for Big Data professions: A systematic classification of job roles and required skill sets". Information Processing & Management. {{cite journal}}: Text "doi:10.1016/j.ipm.2017.05.004" ignored (help)
  83. ↑ Barlow, Mike (2013). The Culture of Big Data. O'Reilly Media, Inc.. 
  84. ↑ Chambers, John M. (1993-12-01). "Greater or lesser statistics: a choice for future research". Statistics and Computing (in English). 3 (4): 182–184. {{cite journal}}: Text "doi:10.1007/BF00141776" ignored (help); Text "issn:0960-3174" ignored (help)
  85. ↑ Collins, Francis S.; Tabak, Lawrence A. (2014-01-30). "NIH plans to enhance reproducibility". Nature. 505 (7485): 612–613. {{cite journal}}: Text "doi:10.1038/505612a" ignored (help); Text "issn:0028-0836" ignored (help); Text "pmc:4058759" ignored (help); Text "pmid:24482835" ignored (help)
  86. ↑ McNutt, Marcia (2014-01-17). "Reproducibility". Science (in English). 343 (6168): 229–229. {{cite journal}}: Text "doi:10.1126/science.1250475" ignored (help); Text "issn:0036-8075" ignored (help); Text "pmid:24436391" ignored (help)
  87. ↑ Peng, Roger D. (2009-07-01). "Reproducible research and Biostatistics". Biostatistics (in English). 10 (3): 405–408. {{cite journal}}: Text "doi:10.1093/biostatistics/kxp014" ignored (help); Text "issn:1465-4644" ignored (help)

Category:Information science

类别: 信息科学

Category:Computer occupations

类别: 计算机职业

Category:Computational fields of study

类别: 研究的计算领域

Category:Data analysis

类别: 数据分析


This page was moved from wikipedia:en:Data science. Its edit history can be viewed at 数据科学/edithistory

取自“https://wiki.swarma.org/index.php?title=数据科学&oldid=8092”