帝国大数据项目笔记

2022.10.6号
1.创建聚合表，大数据的前锋！
创建聚合表，三个：
CREATE TABLE `i9j_cn`.`phome_book_1` ( `id` INT(10) NOT NULL AUTO_INCREMENT COMMENT 'id' , `book` VARCHAR(255) NOT NULL COMMENT '本页聚合名' , `pageid` VARCHAR(255) NOT NULL COMMENT '关联的文章id' , `bookerid` INT(10) NOT NULL COMMENT '作者id' , `bookurl` VARCHAR(100) NOT NULL COMMENT '本页的链接' , `description` VARCHAR(255) NOT NULL COMMENT '本页的描述' , `bookerurl` VARCHAR(100) NOT NULL COMMENT '作者链接' , PRIMARY KEY (`id`), UNIQUE `book` (`book`)) ENGINE = InnoDB;
CREATE TABLE `i9j_cn`.`phome_book_2` ( `id` INT(10) NOT NULL AUTO_INCREMENT COMMENT 'id' , `book` VARCHAR(255) NOT NULL COMMENT '本页聚合名' , `pageid` VARCHAR(255) NOT NULL COMMENT '关联的文章id' , `bookerid` INT(10) NOT NULL COMMENT '作者id' , `bookurl` VARCHAR(100) NOT NULL COMMENT '本页的链接' , `description` VARCHAR(255) NOT NULL COMMENT '本页的描述' , `bookerurl` VARCHAR(100) NOT NULL COMMENT '作者链接' , PRIMARY KEY (`id`), UNIQUE `book` (`book`)) ENGINE = InnoDB;
CREATE TABLE `i9j_cn`.`phome_book_3` ( `id` INT(10) NOT NULL AUTO_INCREMENT COMMENT 'id' , `book` VARCHAR(255) NOT NULL COMMENT '本页聚合名' , `pageid` VARCHAR(255) NOT NULL COMMENT '关联的文章id' , `bookerid` INT(10) NOT NULL COMMENT '作者id' , `bookurl` VARCHAR(100) NOT NULL COMMENT '本页的链接' , `description` VARCHAR(255) NOT NULL COMMENT '本页的描述' , `bookerurl` VARCHAR(100) NOT NULL COMMENT '作者链接' , PRIMARY KEY (`id`), UNIQUE `book` (`book`)) ENGINE = InnoDB;
创建一个作者表，自行建立，分为四个字段：id，作者，作者链接，作品id集合
2.导入准备好的作者数据
之前已采集150万条不重复的数据到另外一个数据表
所以我将之前的数据表导出，然后放到目前项目的数据库里面