网站建设属于哪个行业分类,wordpress 代码缓存,wordpress主题切换不了,和一起做网店差不多的网站将下发的ds_db01.sql数据库文件放置mysql中
12、编写Scala代码#xff0c;使用Spark将MySQL的ds_db01库中表user_info的全量数据抽取到Hive的ods库中表user_info。字段名称、类型不变#xff0c;同时添加静态分区#xff0c;分区字段为etl_date#xff0c;类型为String使用Spark将MySQL的ds_db01库中表user_info的全量数据抽取到Hive的ods库中表user_info。字段名称、类型不变同时添加静态分区分区字段为etl_date类型为String且值为当前日期的前一天日期分区字段格式为yyyyMMdd。使用hive cli执行show partitions ods.user_info命令将结果截图粘贴至答案表.docx中对应的任务序号下
13、 编写Scala代码使用Spark将MySQL的ds_db01库中表sku_info的全量数据抽取到Hive的ods库中表sku_info。字段名称、类型不变同时添加静态分区分区字段为etl_date类型为String且值为当前日期的前一天日期分区字段格式为yyyyMMdd。使用hive cli执行show partitions ods.sku_info命令将结果截图粘贴至答案表.docx中对应的任务序号下 软件名称 版本 ubuntu 18.04 64 位 Hadoophadoop-3.1.3.tar.gz 3.1.3 Jdkjdk-8u212-linux-x64.tar.gz 1.8 Sparkspark-3.1.1-bin-hadoop3.2.tgz 3.1.1 Hiveapache-hive-3.1.2-bin.tar.gz 3.1.2 MySQL 5.7 Scalascala-2.12.x.tgz 2.12 Vue.js 3.2 ECharts 5.1 JDBC驱动 mysql-connector-java-5.1.37.jar 集成开发工具IDEA 2022 社区版 一、Hive安装地址
1Hive官网地址
Apache Hivehttps://hive.apache.org/ 2文档查看地址
GettingStarted - Apache Hive - Apache Software Foundationhttps://cwiki.apache.org/confluence/display/Hive/GettingStarted 3下载地址
Index of /dist/hive (apache.org)http://archive.apache.org/dist/hive/
二、Hive安装部署
1. 把 apache-hive-3.1.2-bin.tar.gz上传到Linux的/export/software目录下