至数云

使用阿里云抢占服务器体验至数云平台

1. 抢占阿里云服务器

阿里云链接: https://ecs.console.aliyun.com/

选择抢占式实例，4核心8GB任意选一个，可以指定释放时间

20241101175851

选择Centos 7.9 64位的系统版本

20241101175920

注意！！安全组需要开放端口号: 8080(必须开放)、8081(可选)、8082(可选)、4040(可选)、30177(可选)

20241101175947

自定义root密码

20241101180035

获取服务器的内网ip和外网ip

20241101180120

系统信息如下

系统: Centos7.9
资源: 4核8GB
外网ip: 47.92.206.49
内网ip: 172.16.215.83
账号: root
密码: zhishuyun123..

2. 进入服务器

ssh root@47.92.206.49

20241101180227

3. 安装java环境(在线安装)

Ubuntu系统，执行命令如下:
sudo apt update
sudo apt install openjdk-8-jdk openjdk-8-jre -y

sudo yum install java-1.8.0-openjdk-devel java-1.8.0-openjdk -y

20241101180421

3. 安装java环境(离线安装)

cd /tmp
nohup wget https://openfly.oss-cn-shanghai.aliyuncs.com/java/zulu8.78.0.19-ca-jdk8.0.412-linux_x64.tar.gz >> download_jdk.log 2>&1 &
tail -f download_jdk.log

注意！！！一定要在~/.bashrc中配置JAVA_HOME环境变量

tar -vzxf /tmp/zulu8.78.0.19-ca-jdk8.0.412-linux_x64.tar.gz -C /opt
ln -s /opt/zulu8.78.0.19-ca-jdk8.0.412-linux_x64 /opt/java
tee -a ~/.bashrc <<-'EOF'
export JAVA_HOME=/opt/java
export PATH=$PATH:$JAVA_HOME/bin
EOF
source ~/.bashrc
java -version

4. 下载至数云安装包

等待时间比较久，大约1GB安装包

cd /tmp
nohup wget https://isxcode.oss-cn-shanghai.aliyuncs.com/zhishuyun/zhishuyun.tar.gz >> download_zhishuyun.log 2>&1 &
tail -f download_zhishuyun.log

20241101181047

5. 解压安装包

cd /tmp
tar -vzxf zhishuyun.tar.gz

20241101181114

6. 启动至数云

cd /tmp/zhishuyun/bin
bash start.sh

20241101181156

7. 检测服务是否启动

健康检测接口: http://47.92.206.49:8080/tools/open/health

20241101181317

8. 访问至数云服务

1M的带宽，首次加载，大约40s

访问接口: http://47.92.206.49:8080
管理员账号: admin
管理员密码: admin123

20241101181443

9. 创建用户租户

创建用户zhishuyun
创建租户体验租户

20241219160103

10. 上传许可证（可选）

使用基础功能，不需要上传许可证
在官网的最下面，可以免费获取体验许可证

官网链接: https://zhishuyun.isxcode.com/

20241101181637

20241101181601

20241101181700

11. 安装集群

退出后台管理界面，使用zhishuyun账号登录

20241101181813

20241101181829

20241101181846

选择StandAlone类型的集群，支持默认安装spark服务

20241101181911

点击集群名称

20241101181923

推荐使用内网ip
host: 172.16.215.83
用户名: root
密码: zhishuyun123..
默认安装Spark: 打勾

20241101182039

20241101182056

20241101182118

20241101182151

20241101182209

12. 访问spark服务

Spark Master: http://47.92.206.49:8081

20241101182243

Spark Worker: http://47.92.206.49:8082

20241101182258

13. 添加Mysql数据源

如果用户没有可测试的mysql数据源，可以通过docker快速启动一个mysql服务

docker run \
  --name zhishuyun-mysql \
  --privileged=true \
  --restart=always \
  -d \
  -p 30306:3306 \
  -e MYSQL_ROOT_PASSWORD=zhishuyun123 \
  -e MYSQL_DATABASE=test_db \
  mysql:8.0

类型: Mysql
链接信息: jdbc:mysql://47.92.206.49:30306/test_db
用户名: root
密码: zhishuyun123

20241101185611

20241101182933

14. 新建作业流，执行默认sparksql

20241101183016

20241101183042

20241101183120

默认sql为查询当前时间

20241101183235

20241101183248

15. 新建jdbc执行sql

创建两张表，一张原始表一张结果表，并在原始表中插入一条数据

20241101183356

-- 原始表
create table users(
    username varchar(100),
    sex int,
    birth datetime
);
-- 结果表
create table users_result(
    username varchar(100),
    sex int,
    birth varchar(100)
);
-- 结果表中插入一条数据
insert into users values('zhangsan',13,now());