计算机学院计科专业大数据方向课程简介

Mr.Z2001 2023-08-20 20:32:55

目录

  • 计算机学院大数据方向课程简介
  • 1 大数据方向课程列表
  • 2 各科简介
  • 2.1 数据科学导论
  • 2.2 Python
  • 2.3 大数据技术原理与应用
  • 2.4 大数据算法
  • 2.5 推荐系统
  • 2.6 计算机综合实训
  • 3 结语

计算机学院大数据方向课程简介

1 大数据方向课程列表

课程名主讲老师考核方式学期必修
数据科学导论于戈、???大作业3-1
Python栗伟、李宇闭卷考试3-1
大数据技术原理与应用张天成大作业3-2
大数据算法乔百友大作业3-2
推荐系统??????4-1

由于笔者还写文章时是大三暑假,所以暂时没有推荐系统课程的信息。等课程结束后补充。

2 各科简介

2.1 数据科学导论

这门课主要学习一些非常常见的数据分析方法及模型,还有如何用R语言进行自动化数据分析。什么是数据分析?举个例子的话就是:假设你手里有近十年的天气情况,然后让你预测今年的天气情况。或者你手里有百万级别的购物清单数据,让你分析一下用户的购买习惯。这些都是数据分析的内容。

关于R语言。不用担心,99%的学生在上这门课之前没有接触过R语言,但都可以顺利结课。R语言的基本操作很简单,通过一些简短的教程和老师上课给的代码就可以完成课程内容。R语言环境搭建也很简单。顺带一提,R语言是常用的数据分析语言,经济专业的学生普遍使用R语言、STATA、SPSS等软件进行数据分析。

至于主讲老师另一位为什么打了问号,是因为另一位老师不固定,大概率是于戈老师课题组的另一位老师。笔者当年上课时候是a老师,雨课堂上提供的视频资料室b老师,听说今年是c老师。

教材对于写作业和期末大作业来讲挺重要的,ppt上东西不太全,教材上有比较详细的解析。电子书笔者没有找到中文版,只找到了英文版。英文版电子书链接

2.2 Python

这门课程是Python入门课,主要学习Python语法和一些常用的Python库(如pandas,numpy,regex等)。

因为大家都学过C++,所以上手Python还是很快的。Python的环境安装和环境依赖是有说法的,建议大家提前熟悉,免得到时候代码跑不出来。

这门课有四个平时作业和一个期末考试。笔者修Python时是线上考试,所以开卷了。正常在学校应该是闭卷。平时的四个作业压力不算小,涉及到的技术点如下:

  • 爬虫
  • 连接数据库
  • C/S架构开发(客户端要求图形界面),B/S应该也行,提前问清楚
  • 数据可视化
  • socket网络传输

对于以上知识点,助教会教,可以按照助教教的来做。整个过程下来是辛苦的,但是一定是非常值得的。锤炼下来后,会发现是真的会写Python小项目了。建议同学们不要怕累,多多坚持一下,收获真正的知识和技能。

教材不太重要,期末考试就是八股文,还有考细节的语法题、概念题(这一小部分应该是为了消除满分)。90分不难。

2.3 大数据技术原理与应用

这门课原来叫“分布式模型与编程”。这门课主要学习分布式计算框架的原理和使用方法——Hadoop。

框架这个词对于同学们来讲应该不陌生了。我们一路走来接触了Qt、Tkinter、Pytorch、Tensorflow等框架。用过这些框架的同学应该都清楚,学习使用框架就是两件事:有哪些函数可以用?这些函数怎么用?至于函数内部是怎么实现的,不用去深究,因为是发布者已经写好的,我们只是拿过来用。

这门课的技术点如下:

  • Java8的使用
  • Linux系统的使用
  • XShell、Xftp的使用
  • Hadoop配置
  • 云计算平台的使用(华为云)
  • hdfs(文件系统)的使用
  • HBase(数据库)的使用
  • NoSQL、Redis、MongoDB(数据库)的使用
  • MapReduce(并行计算框架)的使用
  • (选做)Hive(数据仓库)的使用
  • (选做)Spark(流计算框架)的使用
  • (选做)Flink(流计算框架)的使用

这门课压力比较大,且Linux+Java的组合可能会让同学们害怕。但是好在所有的技术点只要求掌握最最最最最最基础的部分,且网上教程很多(甚至有答案)。这门课最闹心的部分其实是配环境,常见的有:虚拟机崩了、缺少系统文件、配置文件写错了、版本不匹配等等。

想卷的同学,提前熟悉Linux系统,再熟悉Java,再逐一熟悉Hadoop的各个部分。然后你就可以提前完成阶段性任务当助教赚绩点啦~修完这门课,以后对于云资源的使用就不会陌生了,且算是入了并行数据处理项目开发的门。

2.4 大数据算法

这门课主要学习大数据算法。大数据算法的特点与我们之前学习的算法不同,主要体现在:不要求精确解,且看起来很玄乎。

这门课上课听一听就好了,作业不难,期末大作业也不难~课程后期讲MapReduce并行计算框架,而这个东西在大数据技术原理与应用中已经讲过了,所以这门课的难度不大。

2.5 推荐系统

(暂略)

2.6 计算机综合实训

计算机综合实训分两阶段,第二阶段有三个方向,分别是:大数据、人工智能、JavaWeb开发。这里的大数据方向学的差不多也是Hadoop那一套,不过内容会更丰富一些,除了上面提到的以外,还有Scala、Kafka、Spark等内容。

3 结语

以上就是大数据方向的大致内容,希望可以在大家选方向时有所参考。如果有什么问题,欢迎在评论区提出,我会尽量回答。

...全文
303 回复 打赏 收藏 转发到动态 举报
写回复
用AI写文章
回复
切换为时间正序
请发表友善的回复…
发表回复
大数据财务分析实训总结全文共5页,当前为第1页。大数据财务分析实训总结全文共5页,当前为第1页。大数据财务分析实训总结 大数据财务分析实训总结全文共5页,当前为第1页。 大数据财务分析实训总结全文共5页,当前为第1页。 [摘要]随着大数据技术向财会行业的渗透,熟悉大数据财务分析的学生成为企业追逐的人才和对象,在财会专业开设大数据分析和业务处理课程成为必然。然而财会学生由于计算机知识和数据分析体系的匮乏,这限制了学生在大数据财务分析上的思维和分析能力,而上海悦岚数据公司开发的DEEP系统则是解决这一难题的有力工具。本文从财务数据分析案例出发,分析了DEEP系统对大数据财务分析的强大功能和不足之处。 [关键词]DEEP系统,职业教育,1+X证书,大数据财务分析 1.职业教育的现状分析 目前职业教育的发展水平还赶不上所谓的新经济、新技术、新业态对职业教育的要求。中央领导已经多次用几个"新"来说明新技术革命之下,经济、业态、技术发生的变化。而让人遗憾的是,目前为止职教界对"新职教"既缺乏重视、又缺乏研究。实际上不管你愿意不愿意,职业教育在当前面临着重新定义和如何重新定义的考验。随着云计算、物联网、大数据和人工智能("云物大智")等技术的普及推广,未来的传统岗位将无事可做,代之以的是新的业态和新的岗位。人工智能可能会代替医生、律师等咨询性工作;智能和新能源汽车的投入使用会使家庭用车保有量将削减70%,保险公司和4S店将面临倒闭……在这种情况下,怎么来定义职业教育?怎么来设置专业课程内容?在这种背景下,"新职教"应运而生。例如传统专业分类尽管还存在,但边界已经模糊了。它们同"云物大智"技术已经高度嫁接起来了。换句话说,专业离开了"云物大智"技术就别叫优质和现代。有些课程也必须改变了,如计算机公共课传统内容的学习可以交由学生自学和网络考试来完成,新的计算机公共课的内容就要把电商技术、物联网技术基础和移动互联网技术基础教给学生。让不同专业的同学掌握这三种技术,这是"新职教"公共课教学大数据财务分析实训总结全文共5页,当前为第2页。大数据财务分析实训总结全文共5页,当前为第2页。内容的重大改革。同时新职教还涉及学校定位、培养规格、教学实践基地功能、考核标准、校企合作、教师队伍的提升、创新教育的落实等诸多方面的再思考和重新定义。 大数据财务分析实训总结全文共5页,当前为第2页。 大数据财务分析实训总结全文共5页,当前为第2页。 2.基于DEEP平台的1+X大数据财务分析技能培训及课程体系建设 教育部等在《关于在院校实施"学历证书+若干职业技能等级证书"制度试点方案》中明确提出,院校是1+X证书制度试点的实施主体。试点院校要根据职业技能等级标准和专业教学标准要求,将证书培训内容有机融入专业人才培养方案,优化课程设置和教学内容,统筹教学组织与实施,深化教学方式方法改革,提高人才培养的灵活性、适应性、针对性。北京首冠科技集团以"1+X"大数据财务分析等级证书试点为契机,携手多方力量,推动院校"新会计"专业建设,深化职业教育教学改革,开启大数据财务分析人才培养新时代。情景式案例教学,学数据相关基础理论体系及规模化生产型企业各部门业务与大数据结合的应用场景,让财会专业学生熟悉并体验企业各职能部门常用数据源类型、汇集方法、数据加工、挖掘分析、可视化类型等应用,可以初步结合自身财务背景,对公司各部门运营数据做财务关联管理及经营风险方面,培养初级的数据思维能力。财务场景具体案例实操,培养学生多场景财务数据应用分析能力。体验大数据财务分析的基本过程和所涉及到的基本知识,对大数据财务分析的实战场景有一个直观的认知。四川大学锦城学院的财务会计学院在面临财会专业招生人数不断下降的不利情况下,决定与大数据财务分析、财务共享、RPA财务机器人等一系列知名企业进行深度合作,进行专业转型和传统专业改造,打造面向"云物大智"技术的智能会计和大数据财务专业方向。为此,财会学院与金蝶合作,引入了财务共享平台及教学管理系统;另外,还与上海悦岚数据公司深度合作,引入该公司开发的DEEP系统,并成为该公司的校企合作基地。财会学院准备以DEEP系统提供的4门课程,即《大数据理论基础与应用实战》《财务大数据融合课》大数据财务分析实训总结全文共5页,当前为第3页。大数据财务分析实训总结全文共5页,当前为第3页。《数据思维与实训》《Python数据科学实例教程》为基础,再结合数据分析的技术体系,如图1所示,建设锦城学院大数据财务分析课程体系。 大数据财务分析实训总结全文共5页,当前为第3页。 大数据财务分析实训总结全文共5页,当前为第3页。 3.基于DEEP平台的大数据 务分析课程案例教学 3.1实验任务 一是统计差旅费。二是差旅费统计结果的可视化。现有某公司差旅记录数据集,需对数据进行加工
31 科技资讯 SCIENCE & TECHNOLOGY INFORMATION 科技资讯 2021 NO.02 SCIENCE & TECHNOLOGY INFORMATION 信 息 技 术 DOI: 10.16661/j.cnki.1672-3791.2008-5042-6440 大数据云计算环境下的数据安全 苗莉 (海南健康管理职业技术学院 海南海口 571900) 摘 要: 现阶段我国科学技术的不断进步 , 互联网给人们的生活带来了巨大变化, 而大数据云计算凭借着自身存 储量大、 高效率等优势逐渐被应用在社会生活中 , 并且给人们带来了极大的便利。 虽然现在的大数据云计算为促 进经济发展发挥了一定的效果, 但是其中存在的网络安全问题也受到了社会各界的关注, 由于大数据云计算存在 一定的安全风险, 并在开放性的互联网发展的过程中 , 容易造成数据丢失或被窃取等情况, 大数据的安全问题更 关乎到广大网络用户的直接利益, 所以, 需要积极采取有效措施为大数据云计算的安全性提供保障, 从而确保 大众利益, 促进我国大数据云计算的快速、 稳定发展。 关键词: 数据安全 大数据 云计算 互联网 中图分类号: TP309.2 文献标识码: A 文章编号: 1672-3791(2021)01(b)-0031-03 Data Security in Big Data Cloud Computing Environment MIAO Li (Hainan Health Management College, Haikou, Hainan Province, 571900 China) Abstract: With the continuous advancement of science and technology in China at this stage, the Internet has brought tremendous changes to people's lives and big data cloud computing has gradually been applied in social life with its own advantages such as large storage capacity and high efficiency and it has brought people great convenience. Although the current big data cloud computing has played a certain role in promoting economic development, the network security issues in it have also attracted attention from all walks of life. Because big data cloud computing has certain security risks, it is in the process of open Internet development. It is easy to cause data loss or theft. The security of big data is more related to the direct interests of the majority of network users. Therefore, it is necessary to actively take effective measures to provide protection for the security of big data cloud computing so as to ensure the public interest and promote the rapid and stable development of China's big data cloud computing. Key Words: Data security; Big data; Cloud computing; Internet 作者简介: 苗莉 (1976—) , 女, 硕士, 讲师, 研究方向计算机科学、 计算机课程教育教学、 多媒体技术、 大 数据等。 近年来, 我国对于大数据云计算研究的准确性有 了显著提高, 虽然还处于较为基础的阶段, 并不能代 替统计学成为国家社会发展的核心数据, 但是大数据 云计算依然能够在商业管理以及行政管理等许多方 面的应用发挥了巨大的商业价值。 但是, 随着大数据 中各项技术的不断完

2,117

社区成员

发帖
与我相关
我的任务
社区描述
东北大学计算机类专业社区
辽宁省·沈阳市
社区管理员
  • gibeonwu
  • Mr.Z2001
  • Yu_Des2023
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告

自强不息,知行合一

试试用AI创作助手写篇文章吧