AI绘画的“小秘密”都在这一篇文章里******
有了AI,人人都可以是艺术家。AI绘画的出现,恰如瑞士艺术家保罗·克利所言:“艺术不是再现可见,而是使不可见成为可见。”经过20年左右的发展,目前基于不同类型或者模态元素的AI绘画发展情况不尽相同,发展最久的是“以图生图”,再到近期火爆的“文+图”生图。当然,也有团队已经研发出由语音生成图像的技术。
上传一张图片,或者输入一些简单的关键词,系统就能自动生成一张卡通图像……最近一段时间,AI绘画开始在互联网社交平台走红。
AI绘画,顾名思义就是利用人工智能进行绘画,是人工智能生成内容的典型应用场景之一。其主要原理是收集大量已有作品,通过算法对其内容和风格特征进行解析,最后再生成新的作品,所以算法是AI绘画的核心。
当前,“凭空”生成图像的AI绘画,其实也会动辄“翻车”:也许上一秒AI通过你的照片绘出的是一张充满艺术感的二次元画像,下一秒你的宠物猫、狗则可能被画成可爱少女或肌肉猛男。
事实上,AI绘画早已火爆全球。第一张公开展出的、由人工智能创作的绘画作品《埃德蒙·贝拉米的肖像》曾于2018年在佳士得拍卖行以43.25万美元成交,那是一张由机器学习了从14世纪到20世纪的1.5万张肖像画之后自动生成的一张肖像画作品。
AI绘画是如何实现“凭空”生图的?除了娱乐外,AI绘画还有哪些潜在的应用前景?
从“以图生图”到“语音生图”
2022年,由人工智能创作的《太空歌剧院》一度火出圈。在美国科罗拉多州举办的新兴数字艺术家竞赛中,《太空歌剧院》获得“数字艺术/数字修饰照片”类别一等奖。它的构图、配色以及画面的细节堪称精致。然而,这个作品的创作者不是艺术家,而是来自美国科罗拉多州的游戏设计师。
这位游戏设计师在一个名为“Midjourney”的AI创作工具里,先输入几个关键词,如光源、构图、氛围等,得到了100幅作品,再进行约80小时的修图修饰,最终选出3幅作品,最后把图像打印到画布上。
通过简单交互式对话在短时间内生成的“艺术”作品,让人类艺术家展开了一场关于“AI绘画作品参赛是否属于作弊”的争论。这场声势浩大的争论也令大众直观地意识到如今的AI绘画水平已经发展到了何种程度。
“人工智能在艺术方面的创作最早可以追溯到上个世纪末,当时的人工智能绘画技术叫作‘图像的风格化滤镜’。”中国科学院自动化研究所多模态人工智能系统全国重点实验室研究员董未名说,最初的AI绘画方法比较简单,比如一张普通的照片,通过一些图像处理的算法,把照片像素进行几何或者色彩上的变换,然后再调节不同参数,就可以模拟出类似油画或者水彩画的风格。
经过20年左右的发展,目前基于不同类型或者模态元素的AI绘画发展情况不尽相同,发展最久的是“以图生图”,再到近期火爆的“文+图”生图。当然,也有团队已经研发出由语音生成图像的技术。
AI绘画主要依靠三种技术模式实现
董未名介绍,目前AI绘画主要借助图像风格迁移技术、图文预训练模型和扩散模型实现。
“图像风格迁移技术指的是图像处理算法通过对输入的真实图像内容特征和对参考的艺术图像风格特征的提取,实现真实图像内容特征和艺术图像风格特征的融合,从而生成新的艺术图像。”董未名举例,如果将美国旧金山艺术宫的外景照片和印象派创始人莫奈绘制的作品,通过图像风格迁移技术进行融合,就能得到一张看起来像是由莫奈绘制的美国旧金山艺术宫的绘画作品。最初的AI绘画采用的正是这种技术。
不过,在董未名看来,图像风格迁移技术大多依赖的是生成式对抗网络(GAN)算法,它最大的问题是生成的绘画作品艺术性不强,笔触和构图让人觉得与真实的绘画有差距,所以长久以来,AI绘画一直“籍籍无名”。
当图像风格迁移技术还在挣扎于输出作品的审美问题时,图文预训练模型的出现,加速了AI绘画的崛起。
“依托图文预训练模型,只要输入一句话或者上传一幅风格明显的图片,算法就能将图像特征和文字特征‘对齐’。生成的绘画作品的内容特征和上传图片的内容相似,艺术性也比图像风格迁移技术生成的图片强很多。”董未名举例,比如支撑图文预训练模型的可对比语言—图像预训练(CLIP)算法,就是利用图文特征“对齐”的能力,再结合已有的生成模型,实现“以图生图”或者“图+文”生图。
不过,董未名坦言,图文预训练模型的推广也存在一些争议,有部分人认为,该模型在训练前期,需要用大量的图形处理器(GPU)进行数据训练,耗电量大、成本很高,而该模型的应用场景却不够清晰。但也有人认为,也许该模型未来可以打造为通用的人工智能模型,用它完成更多的算法作业,只是这还需要时间的验证。
诚然没有一项技术是完美的,这也为人类探究更先进的技术提供了无限动力。当下最流行的扩散模型便是其中之一。
“目前最新的AI绘画技术采用的就是扩散模型,这种模型可以把一个随机采样的噪声输入模型,然后尝试通过去噪来生成图像。”董未名表示,扩散模型也存在弱点,由于模型对图片内容识别的能力不足,或者难以完全理解识别文字的意义,以及训练数据的偏差,有时便会生成“四不像”的作品。此外,扩散模型生成图片的速度比较慢,目前还达不到实时生成图片。
互联网治理、元宇宙或潜藏应用前景
AI绘画目前的应用场景,更多聚焦于社交软件。近期在国内社交网络“火出天际”的AI绘画软件主要集中在小程序及App。随着AI绘画小程序的火爆,短视频平台抖音也迅速上线了AI绘画特效。同时,此前腾讯上线了“QQ小世界AI画匠”活动,百度也推出了首款AI艺术和创意辅助平台“文心一格”。
有了AI,人人都可以是艺术家。AI绘画的出现,恰如瑞士艺术家保罗·克利所言:“艺术不是再现可见,而是使不可见成为可见。”“AI现在已经完美实现了这一目标,人们可以通过机器计算来绘制出很多现实中见不到的场景。”董未名畅想,不远的将来,AI绘画或许还将展现更丰富的应用场景。
“现在网络上充斥着很多不良内容,这些内容为了逃避监管经常以绘画的形式出现,而当前很多内容识别模型对真实图片识别得很准确,但缺乏不良内容艺术作品的相关训练数据,所以对不良内容识别不准确。也许可以用AI绘画技术,积累不良内容艺术作品的数据,并用以训练识别模型,以提升互联网内容的安全监管能力和识别的准确率。”董未名建议。
在董未名看来,作为一种艺术呈现形式,AI绘画也将在元宇宙、设计、文旅等行业催生新的商业模式。例如AI绘画目前在AI辅助创作、短视频、影视制作和元宇宙等方面都有布局,因为这些赛道都离不开创意,AI绘画可以帮助创作者通过简单的特征输入,实现对其创意的预览,甚至可以直接进行创作。
不过,董未名并不讳言,当下AI绘画仍然存在版权争议问题。AI绘画的核心是模型,而训练模型需要使用大量图像、文本数据。对于未经授权的图片,经过运算之后所生成的图像版权归属尚难界定。“有的画家风格特别明显,如果用画家的画去训练算法模型生成作品,那最后的版权属于谁呢?”董未名提出的问题,正是多数AI绘画作品所面临的现实问题。
AI绘画掀起了一场资本的群体狂欢,希望有一天它能走出“照猫画虎”的尴尬,真正服务艺术创作、创造更多价值。(科技日报记者 金凤)
2022国家医保谈判落幕 大病用药是重点******
为期4天的2022国家医保药品目录谈判1月8日在北京落下帷幕。国家医保局医药管理司负责人对新冠治疗药物谈判情况进行回应:此次进入谈判的新冠治疗药物共3种,其中阿兹夫定片、清肺排毒颗粒谈判成功,辉瑞奈玛特韦片/利托那韦片(Paxlovid)组合包装因报价高未能成功。
相比前两年,参与本次医保谈判的药品数量明显增多。根据国家医保局此前发布的名单,今年通过形式审查的有343种药品,包括目录外新增品种药198个,目录内续约品种药145个。此外,还有多款抗癌药、高值罕见病药物等大病用药参与今年的国家医保谈判。
本次医保谈判规则并无特别变化,药企经过两轮报价,超过医保底价115%会出局,落入范围则继续谈判,最终形成谈判价格。不过,今年国家医保谈判首创的两个新规则——“简易续约”“非独家药品竞价”备受关注。
“简易续约”“非独家药品竞价” 两大新规首次实施
因疫情等缘故,2022年国家医保谈判被推迟到2023年1月5日至8日举行。谈判期间,每天早上8点左右,谈判会场外便聚集了等待入场的医药企业谈判代表,他们背着包,手持装有草稿纸、计算器的文件袋,聚在一起排队签到。
中青报·中青网记者从现场获悉,4天的国家医保谈判期间,每天的侧重点有所不同。首日谈判侧重抗病毒、呼吸类、麻醉类药品;1月6日侧重心血管、骨科及免疫疾病类药品;1月7日的重点集中于罕见病和肿瘤领域,是本次谈判的重点之一;最后一天的谈判则以中成药为主。
通常情况下,每家药企谈判时间在20-30分钟左右。谈判结束后,不少参与谈判的药企代表表示“感觉不错”“压力不大”“降幅在预期之内”,还有药企代表称“国家支持力度很大”。
除了药企代表,谈判会场外还聚集了不少医药行业人士。一位医药行业分析师在现场对记者表示:“今年我尤其关注‘简易续约’的情况。”
“简易续约”是今年医保谈判的新增亮点之一。2022年6月29日,国家医保局发布《谈判药品续约规则》,明确了独家品种简易续约规则。根据规定,协议将于2022年12月31日到期,并同时满足独家药品、本协议期基金实际支出未超过基金支出预算(企业预估值,下同)的200%、未来两年的基金支出预算增幅合理等5项条件的药品,可以进行简易续约,续约有效期为两年。
有业内人士分析,“简易续约”有助于简化谈判流程,提高续约效率,缓解行政审批和企业申报的压力。有部分新增适应症的创新药有望不用重新谈判,而是通过“简易续约”规则直接纳入医保。这对于药企而言是一项重要的利好。
一位参与“非独家药品竞价”的药企代表对记者表示,他们的谈判并不算顺利:“大家一直在‘出价’,就看价格能有多低。”
“非独家药品竞价”是本次医保谈判的另一项新规。《非独家药品竞价规则》指出,药品通过竞价纳入药品目录的,取各企业报价中的最低者作为该通用名药品的支付标准。如企业报价低于医保支付意愿的70%,以医保支付意愿的70%作为该药品的支付标准。这就意味着,如果某一家参与“非独家药品竞价”的药企报价更低,其他药企也会被动以这一低价进入医保。
抗癌药、罕见病药等成为谈判重点
根据国家医保局此前公布的名单,2022国家医保谈判共有343种药品正式通过形式审查,其中包括198种目录外西药和中成药与145种目录内西药和中成药。辉瑞公司的新冠口服药Paxlovid、上百万元一针的CAR-T类药物、PD-1/PD-L1类抗肿瘤药物、高值罕见病药物等备受关注。
1月8日夜间,国家医保局发布消息,Paxlovid最终因生产企业辉瑞投资有限公司报价高,谈判未能成功。此前,Paxlovid已于2022年2月1日获国家药监局附条件批准,北京、上海等地也将Paxlovid纳入临时医保。根据近期国家医保局会同有关部门联合印发的《关于实施“乙类乙管”后优化新型冠状病毒感染患者治疗费用医疗保障相关政策的通知》《新型冠状病毒感染诊疗方案(试行第十版)》中的所有治疗性药物,包括Paxlovid、阿兹夫定片、莫诺拉韦胶囊、散寒化湿颗粒等,医保都将临时性支付到2023年3月31日。
本次谈判在第二天和第三天迎来重头戏,其间参与谈判的企业包括拜耳医药、百洋医药、西安杨森、扬子江药业、海融医药、济川药业、百济神州、先声药业、君实生物等。国家医保局此前公布的通过初步形式审查的药品名单显示,这些企业参与谈判的药品涉及多款抗癌药,以及部分罕见病高值药物。
本次参与国家医保谈判的还有19款罕见病用药,包括治疗脊髓性肌萎缩症(SMA)、Castleman病、法布雷病、戈谢病、多发性硬化等罕见病的药品。例如,罗氏制药的SMA药物利司扑兰口服溶液用散参加了去年的国家医保谈判,但最终未能成功。山东省药械采购平台显示,此前罗氏制药已将利司扑兰口服溶液用散的价格从6.38万/支降至1.45万/支。
自2018年以来,国家医保局通过谈判将19种罕见病药纳入医保药品目录,平均降幅达52.6%。2021年医保谈判中,渤健公司研发生产的SMA治疗药物诺西那生钠注射液从70万/针降至3.3万/针,当时国家医保局谈判代表张劲妮的发言“每一个小群体都不该被放弃”感动了很多人。
本报北京1月8日电
中青报·中青网见习记者 裴思童 刘胤衡 来源:中国青年报