链接：具体授课文件

授课内容

  • 大数据平台搭建与应用
  • 数据处理
  • Linux操作系统

课程软件和环境

课程所需的软件和环境如下

各项软件

钉钉

无要求

VScode

https://code.visualstudio.com/download#
需要的扩展插件：

  • Chinese (Simplified) (简体中文) Language Pack for Visual Studio Code
  • Atom One Light Theme
  • Markdown All in One
  • Python
  • python snippets

notepad++

https://notepad-plus.en.softonic.com/download
无要求

pycharm-community

无要求
在使用时候需更改pip安装源
常用的镜像源：
清华: https://pypi.tuna.tsinghua.edu.cn/simple
豆瓣: http://pypi.douban.com/simple/
阿里: http://mirrors.aliyun.com/pypi/simple/
华为: https://mirrors.huaweicloud.com/repository/pypi/simple/

Anaconda（只需要在教师机进行安装）

https://www.anaconda.com/download/#macos
安装完成后需要更新jupyter notebook
确保版本在7.0以上即可

VMware® Workstation 17 Pro

https://www.vmware.com/products/workstation-pro/workstation-pro-evaluation.html
要破解，激活码如下：

  • JU090-6039P-08409-8J0QH-2YR7F
  • ZF3R0-FHED2-M80TY-8QYGC-NPKYF
  • FC7D0-D1YDL-M8DXZ-CYPZE-P2AY6
  • ZC3TK-63GE6-481JY-WWW5T-Z7ATA
  • 1Z0G9-67285-FZG78-ZL3Q2-234JG
  • 4A4RR-813DK-M81A9-4U35H-06KND
  • NZ4RR-FTK5H-H81C1-Q30QH-1V2LA

Xshell：

https://www.xshell.com/zh/free-for-home-school/
无要求

其他文件

以下内容不用安装，存放着就行

  • hadoop-3.1.3.tar
  • jdk-8u212-linux-x64.tar
  • Centos安装镜像
  • Ubuntu安装镜像
  • phpStudy
  • Centos系统
  • Ubuntu系统

以上软件的打包下载链接：

http://218.78.60.120:60031/big_data/need_to_install.zip

AI环境推荐

如何补python基础

https://github.com/jackfrued/Python-100-Days

但我更建议将以上当做“手册和工具书”，实际操作中通过AI

使用pip镜像源(原本的在国外太慢了)

可以在使用pip的时候加参数-i https://pypi.tuna.tsinghua.edu.cn/simple

例如：pip install -i https://pypi.tuna.tsinghua.edu.cn/simple requests

这样就会从清华这边的镜像去安装pyspider库。