AIGC2024_山海经异兽记- Makelog(造物记)

经过这几年的比赛活动，我发现蘑菇云总是走在的科技教育前沿。无论是从图形编程入行，还是开源硬件，机器人教育，人工智能教育等等，蘑菇云总能把住科技教育的脉搏，把最新的科技知识带给我们。现在后悔有些活动没有参加，有信息闭塞的原因，有自身经济能力弱的原因，还有就是自身技术不够硬。做为经济落后地区科技教师真要感谢蘑菇云，没有门槛、没有地域差异、平易近人的让我们学到最新的科技教育知识。

在看到AIGC大赛的消息后第一时间报了名，我不明白什么是AIGC。蘑菇云组织了培训，听了云天和昊男两位大佬的培训后基本明白点了。培训结束再看回放彻底明白了AIGC是什么，原来是我们一直在用的生成式人工智能。微信群里创客老师们也做了自己的AI试用分享，大家共同选出的，是已经避坑的就是最适合我们的了。

一、创作灵感
在设计这个之初想起甘肃蘑菇云俞老师的话，“本地特色的就是最好的”。这句话用在创客大赛可以，如果用在AIGC感觉到有些过时了。我想了几个方案，有物理小镇、星际小镇，总觉得差强人意，突然想到山海经！！！山海经让我眼前一亮！那让人心驰神往的异兽世界！那不屈不挠与恶劣环境抗争的精神！山海经非常适合用AI生成图片和视频，太完美了！

一、文案的生成

1.文案生成

文案的生成用的是kimi（https://kimi.moonshot.cn/），我输入的对话内容为，“我是一名老师，晚上睡觉时家养的小猫领我穿越到山海经世界，参观了山海经异兽，并和山海经神话人物互动。写出以上文案，并对文案做分镜处理”。一下是Kimi生成的文案：

文案：

标题：《山海经奇遇：夜游异兽世界》

正文：

在月光的轻抚下，我，一名普通的老师，被家中小猫的神秘力量引领，穿越时空的缝隙，来到了一个古老而神秘的世界——《山海经》的世界。在这里，我将揭开异兽的神秘面纱，与神话中的人物进行一场跨越时空的对话。

第一章：夜幕下的启程

在宁静的夜晚，我被小猫的呼唤声吸引，跟随它来到了一个奇异的光门。穿过光门，我发现自己置身于一个充满奇幻色彩的世界，那里有我从未见过的植物和异兽。

第二章：异兽的盛宴

我被一群奇异的生物所包围，它们是《山海经》中描述的异兽。有的长着翅膀，有的拥有多个头颅，还有的能够喷火。我被邀请参加它们的盛宴，品尝了只有在这个世界才能找到的珍馐美味。

第三章：神话人物的对话

在宴会上，我遇到了神话中的人物，如夸父、精卫和女娲。我们交谈甚欢，他们向我讲述了他们的传说和这个世界的秘密。

第四章：智慧的传承

在与神话人物的交流中，我学到了关于勇气、智慧和坚持的故事。这些故事让我对生命和宇宙有了更深的理解。

第五章：归途的启示

随着夜幕的消散，我被送回了现实世界。虽然身体回到了家中，但我的心却留在了那个奇妙的世界。我决定将这次经历记录下来，分享给学生们，让他们也能领略到《山海经》的魅力。

分镜处理：

分镜一：夜晚，老师在书桌前备课，小猫跳上桌子，用神秘的目光注视着老师。

分镜二：老师跟随小猫来到光门，光门中透出奇异的光芒，老师犹豫了一下，然后勇敢地踏入光门。

分镜三：老师出现在一个奇幻的世界，四周是奇异的植物和异兽，老师惊讶地环顾四周。

分镜四：异兽们围绕着老师，邀请他参加盛宴。老师坐在异兽之间，品尝着奇特的食物。

分镜五：老师与神话人物交谈，他们的表情丰富，手势生动，老师听得津津有味。

分镜六：老师在神话人物的讲述中若有所思，仿佛在思考着什么重要的问题。

分镜七：随着天亮，老师被送回现实世界，他站在书桌前，手中拿着笔，准备记录下这次奇妙的经历。

分镜八：老师在课堂上分享这次经历，学生们听得入迷，眼中闪烁着好奇和向往的光芒。

这个文案和分镜处理可以作为一部动画或电影的初步构思，后续可以根据需要进一步细化和完善。

生成的文案是初步的，要让文稿产生图片，达到自己满意的目标还要好好修改。

2. 山海经异兽查询

山海经异兽的查询仍旧用的是Kimi（https://kimi.moonshot.cn/），我输入的对话内容，“山海经异兽”，系统给出了十种异兽的介绍。

三、图片的生成

图片的生成用了HiDream.ai（https://www.hidreamai.com/lab）和商汤描画（https://miaohua.sensetime.com/login?redirect=https://miaohua.sensetime.com/generate）。HiDream.ai生成的图片有点卡通了，达不到我对故事人物的设定，商汤描画的绘画风格具有沧桑感非常适合山海经的场景设定。以下是按大赛要求选出的10张图片：

分镜一图片

分镜一原本想着生成男老师的照片，确实是生成了。整图非常漂亮，可惜人物是外国人。总不能让外国人来阐释我们老祖宗的文化吧……试了多遍，用女老师的身份可以，这张像新疆面孔，勉强说的过去了。

分镜二图片

分镜三图片

夔牛图片

飞廉图片

精卫图片

精卫Kimi查到的介绍为白色喙、红色脚，生成的是红色的喙，试了多遍都是红色的。在剪映制作视频时要修改台词文本为“红色喙”。

烛龙图片

穷奇图片

蛊雕图片

应龙图片

狍鸮图片

犼图片

图片数量12张，超过了10张。其中烛龙、蛊雕图片尺寸比例是1:1，在制作最终视频时我就将这两的视频合在一个屏幕相当于一幅图。

一、视频的生成

视频的生成用的是HiDream.ai（https://www.hidreamai.com/lab）图生视频技术。

HiDream.ai具有文生视频和图生视频、视频增强4K三种功能，个别图片生成的视频不满意，我重新选择图片再制作视频。

五、数字人的制作

数字人的制作可以用剪映软件和腾讯智影（https://zenvideo.qq.com/），两个都是收费的，腾讯智影免费部分够用了。但是腾讯智影生成的数字人有白色的背景，即使设置了生成透明背景在导入剪映软件后就是黑色背景。数字人背景色在视频合成中讲解解决办法。

六、音乐的创作

音乐的创作用云天大佬介绍的豆包软件，以前用豆包没注意过能生成音乐。考虑到是我的软件版本旧了，安装新版本软件有音乐创作功能。豆包创作了山海经音乐《山海旧忆》，很好听。清澈的男中音，歌词融入现代人对中华古文化的向往，很有历史的代入感。生成的音乐为mp4格式，如果要导出mp3使用格式工厂。

豆包生成音乐

以下为《山海旧忆》全部歌词：

乘黄白泽飞廉九尾狐

鹿蜀狸力孰湖鸣蛇育沛

赤鱬虎蛟胜遇钩蛇豪虎

这些动物曾经住在山海经深处

精卫填海后羿射日夸父逐日

上古神话究竟是否真实

燧人取火神农尝百草仓颉造字

华夏文明薪火相传生生不息

如果能回到从前我要看看山海经

为它们每一个都拍照合影

若千年后人类依旧在文明继续

请记住他们曾经存在过的证明

另外歌词的提取也用到AI，用微信的图片提取文字功能。

七、视频合作制作

视频合成使用剪映软件，将准备好的视频、数字人导入，文案肯定不适合做为视频解说，必须自己写。数字人导入时会带着白色或黑色的背景，黑色是腾讯智影在数字人创建时设置成透明色，透明色导入剪映就变黑色。我的解决办法也是用AI，询问豆包剪映怎么设置数字人透明色。豆包回答是在画面菜单设置，选择抠像，设置强度和阴影。效果如下图，数字人完美的和画面融合在一起。