您的位置:首页 > 互联网

3D版Midjourney来了?Luma AI发布Genie 1.0,生成手办只需10秒_3d手办制作流程

发布时间:2024-01-12 12:40:38  来源:互联网     背景:

声明:本文来自于微信公众号 机器之能(ID:almosthuman2017),作者:机器之心,授权转载发布。

文生3D 模型又来新玩家。

随着生成式 AI 的浪潮席卷而来,科技公司都在冲击 AIGC 的下一个突破口 ——3D 生成。

目前,文生3D 在学术界取得了许多新突破。在产业界,无论是像英伟达这样的行业巨头,还是像 Stability AI 这样的中坚力量,都推出了自己的文生3D 工具。虽然3D 生成领域一直卷到飞起,但是好像一直没有出现一款效果足够惊艳,生成速度足够快的代表性产品。

如今,一直致力于3D 内容生产的 Luma AI 向这一领域发起了挑战。就在昨天,Luma AI 发布了一个文生3D 模型的项目 —— Genie1.0。只需要输入一句文字提示,Genie1.0就能在10秒内生成四个高保真的3D 模型。用户可以从中选择,并在三维网格界面内对模型的纹理进行编辑。

这些 AI 生成的3D 模型可以在屏幕上预览,也可以导出到 Blender、 Unity 等工具中进一步使用,直接加入动画、游戏、VR 等工作流中。

Genie1.0不仅有网页版,在 discord 平台和手机端都可以试玩。一经发布,慕名而来的网友们就把 Genie1.0冲上了 App Store 下载榜前列。

试用地址:https://lumalabs.ai/genie?view=create

效果有多惊艳,一起来看看。

简单输入提示flower cat,再等待几秒,四只身上带有不同花纹图案的猫咪就出现了。想要什么手办,AI 直接送上精美的盲盒版本,一次输入,能抽四次,怎么算都很赚。

泡泡玛特风格这么可爱的手办,也能安排。想要什么隐藏款,AI 版本实现量产。

文生3D 中的难题,毛发和物体表面的花纹,Genie1.0也有令人惊艳的表现。它生成的熊猫能看得到毛茸茸的质感,衣服上的纹样也没有出现明显的失真。

3d手办制作

推特 @lintworld

如果《星球大战》出3D 动画版本,直接使用这只 Genie1.0生成的尤达大师好像也没什么问题。

推特 @blizaine

和其他3D 模型对比,Luma AI 的表现在立体度和真实感方面,也能拔得头筹。

3d手办制作流程

推特 @taziku_co

除了生成效果惊艳,Genie1.0还有编辑功能。拆掉了原来的专业门槛,告别贴素材,修改3D 模型的材质可以像用手机 P 图一样简单。

Genie1.0提供了原始、光滑和反光三种质感,点击页面右侧的圆形按钮即可切换。还可以按照需要导出不同清晰度和格式的模型,与其他3D 编辑软件无缝对接。

以往,批量设计3D 模型往往需要花费数天,虽然目前市面上已经有很多 AIGC 工具把3D 设计的时间缩短到只需几小时甚至更短。但 Genie1.0已经把人们加工的时间压缩到了2分钟。

已经有3D 设计师表示把 Genie1.0生成的模型导入3D 动画软件 Maya,因为 AI 生成的模型质量很高,纹理坐标(UVs)很合适,只有几个小块有重叠,花2分钟小调一下,就直接可用,体验一流。

红米8Pro处理器

在动画软件中加上几个动作锚点,3D 动画就这么制作好了。

在此基础上稍加编辑,静态的模型模型瞬间大秀机械舞,带来十几秒的连贯表演。

推特 @paradoxrenders

转化成游戏动画,也进化成了速通版本,只需要打字就能生成游戏角色动画可能也不再是梦。

其中的模型基础由 Genie 生成,源自 YouTube@OlliHuttunen78

虽然 Genie1.0还未完全克服 AI 生成的3D 模型往往比较模糊这个问题的最后一公里。但在引入 Magnific ai 来提升分辨率之后,卡车轮胎上的花纹、排气管的褶皱,连接零件的电线都被勾勒出了清晰的细节,和真实世界中的卡车摆件没什么分别。

Genie1.0能做到的正好直击了3D 设计的痛点,传统的3D 建模过程通常较为繁琐,往往需要大量专业人员的手工操作,这不仅导致制作周期延长,同时也增加了整体成本。进入动画、游戏、VR 等进一步设计流程后,建模还需进一步调整和修改,设计成本又将成倍上升。

也许正如 Luma AI 创始人 Amit Jain 所说:借助 Genie,运用 AI 大规模制作3D 物品或许将不再只是幻想。

在 Genie 的加持下,即使不会3D 建模和绘画设计,但有一个涉及3D 图形或3D 场景的想法,你都可以让它像精灵一样实现你任何的想法。

目前,Genie 既有免费版,也有付费 API。付费界面每次需要花费1美元。该公司指出,这比依靠人类设计师更便宜、更快捷。

Luma AI 公司介绍

推出 Genie1.0的 Luma AI 是一家生成式人工智能初创公司,该公司一直致力于3D 内容方案,主要产品和功能包括图片转3D、视频转3D、文本转3D 等。

这家公司成立于2021年,首席执行官 Amit Jain 曾是苹果公司的计算机视觉系统工程师,首席技术官 Alex Yu 曾是加州大学伯克利分校的研究生(放弃博士学业创办了 Luma AI )。二人在3D 视觉、机器学习、实时图形学等领域都有所建树。

这家公司已经经历了数轮融资,其中在由 Amplify Partners、Nventures(Nvidia 投资部门)和 General Catalyst 领投的 A 轮融资中筹集了2000万美元,在由硅谷顶级风投公司 Andreessen Horowitz、英伟达领投的 B 轮融资中筹集了4300万美元。截至目前,公司共融资7000多万美元,估值在2亿到3亿美元之间。

就其产品而言,不同于文本转图像模型所产出的数字艺术平面位图,Luma AI 利用 AI 从照片、视频或文字描述中创建物体的3D 模型,这些模型可以根据需要被下载、操作、编辑和渲染。

去年11月,Luma AI 在 Discord 服务器上推出了文生3D 模型 Genie。这次的1.0版本,把出图时间从20多秒提升到了10秒之内。

Luma AI 的核心技术是神经辐射场(NeRF)算法。Luma AI 基于 NeRF 做了很多改进和优化。在场景图像获取、数据预处理、模型训练、模型渲染及其他模型文件的生成等方面,Luma AI 均做了很多优化工作。在此基础上,技术更高超的人类艺术家可以高效地制作更好的模型。此外,Genie 的输出或许也能满足一些人的特定生产需求。

同日,Luma AI 还官宣了三位新成员,其中首席科学家宋佳铭(Jiaming Song)将领导基础模型研究团队。他本科毕业于清华大学,硕博毕业于斯坦福大学。在加入 Luma AI 之前,他曾担任英伟达学习和感知(Learning and Perception)研究团队和深度想象(Deep Imagination)研究团队的研究科学家。

3d模型手办

另外,加州大学伯克利分校博士 Matthew Tancik 将领导应用研究团队,来自苹果设计工作室的 Tuhin Kumar 领导界面、交互和产品设计团队。

参考链接:

产品体验入口:https://top.aibase.com/tool/lumaai-genie

https://techcrunch.com/2024/01/09/luma-raises-43m-to-build-ai-that-crafts-3d-models/

https://twitter.com/LumaLabsAI/status/1744778363330535860

https://www.theregister.com/2024/01/10/textto3d_image_startup_luma/

迪士尼或将裁员数千人 新闻


返回网站首页

本文评论
趣读亮相中国移动全球合作伙伴大会,打造5G沉浸式阅读新体验
  11月14日, 2019(第七届)中国移动全球合作伙伴大会在广州拉开了帷幕。作为中国移动咪咕公司旗下数字阅读平台,咪咕阅读携5G富媒书、趣读 、至境听书、至臻听书(24bit)、5G...
日期:01-12
荣耀畅玩40 Plus曝光:千元机新品 明晚发布!_新品荣耀畅玩20
10月13日19:30,荣耀X40 GT新品发布会即将召开,届时将推出一款主打游戏性能的LCD中端机——荣耀X40 GT。而根据数码博主的最新爆料,在此次发布会上,除了荣耀 X40 GT,荣耀还将推出...
日期:10-14
AI智能超越人类终破解!李飞飞高徒新作破圈,5万个合成数据碾压人类示例,备咖啡动作超丝滑
声明:本文来自于微信公众号 新智元(ID:AI_era),作者:新智元,授权转载发布。AI巨佬Geoffrey Hinton称,科技公司们正在未来18个月内,要使用比现在GPT-4多100倍的算力训练新模型。更...
日期:10-30
旷视科技上市受益龙头_旷视科技入选2022年度产业领袖系列榜单“信息新基建榜”
  近日,由物联网智库和挚物·AIoT产业研究院主办的2020AIoT产业年终盛典在北京成功举办。盛典发布了《2021物联网全景图谱报告》(以下简称《报告》)和2020年度产业领袖系...
日期:07-10
卡萨帝天玺空调功能_卡萨帝天玺空调,分区送风黑科技精准客户需求
  日常生活中吹空调的时候,很多人容易觉得空调吹着吹着要么太热,要么太冷,这是因为普通的空调温度比较机械化,总是只能吹出一种温度的风来。这样一来体感不同的人感觉到的温...
日期:07-15
拎包入住!“京东青年城”投入60亿建近4000套公寓「北京东城区青年公寓」
5月5日 消息: 5月4日,京东官方宣布“京东青年城”正式启动。微软必应机器人在哪里 据了解,在与京东总部大楼隔路相望的地块上,未来将建起近4000套家电、家具齐全,可拎包入住的员...
日期:05-05
云米S2净水器一直冲洗中_云米净水器S2 600G发布:出水零等待 8秒接满一杯水
  云米去年推出了一台净水器——互联网净水器S2,400G通量,10秒就能接满1杯水(166ml),1分钟出水1L。   而今天,全新升级的云米互联网净水器S2 600G也已上市,原价1999元,首发仅...
日期:11-18
郭明錤:苹果 iPhone 14 的发布/发货日期可能早于 iPhone 13/12_苹果什么时候发布
IT之家 8 月 18 日消息,彭博社 Mark Gurman 此前爆料,苹果公司计划在 9 月 7 日星期三(预计北京时间 9 月 8 日凌晨)举行首次秋季发布会活动,推出 iPhone 14 / Pro 系列和 Apple...
日期:09-26
中国移动设计院真实待遇「中国移动设计院与中航光电共建签约仪式成功举办」
通信世界网消息(CWW)2023年12月15日,中国移动通信集团设计院有限公司(以下简称中国移动设计院)与中航光电科技股份有限公司(以下简称中航光电)在京举行“河南省液体冷却技术工程研...
日期:12-16
微信输入法更新 新版支持五笔输入_微信五笔输入法下载
1月10日 消息:近日,微信输入法进行了更新,新增了五笔输入法,这一变化引发了网友的广泛关注和讨论。有人感叹这是时代的变迁,也有人认为这是接触电脑较早的标志。科大讯飞年营业...
日期:01-10
新加坡国立大学发布Goat 算数能力超过GPT-4「新加坡国立大学computing」
6月6日 消息:尽管大规模语言模型在各种自然语言处理任务中展现出卓越的性能,但算术类问题仍然是一个难题,即使是目前最强大的GPT-4也很难解决基本的运算问题。为何iphone14plu...
日期:06-06
小米最便宜的无线耳机「49.5元 小米无线耳机半价了」
本周,小米耳机和配件也开始了促销,现在小米Air 2 SE半入耳式无线耳机原价99元,现在只要49.5元了,相当于半价抢购,这款耳机采用TWS真无线设计,并且支持小米手机开盒弹窗。分体式真...
日期:11-16
一加Ace 2V、OPPO Find X5等机型开启安卓14、ColorOS 14公测招募_一加采用oppo系统
IT之家 10 月 10 日消息,一加 Ace 2V、OPPOFind X5、OPPO Find X5 Pro 天玑版、OPPO Reno8 Pro+、OPPO Pad 2 现已开启 Android 14 x ColorOS 14.0 升级公测版本用户招募。对...
日期:10-11
Android 12首个开发者预览版发布_安卓开发者预览计划
  (原标题::新界面 众多底层更新)   谷歌今天发布了面向 Pixel 设备的下一版 Android 系统 Android 12 的首个开发者预览版。按照谷歌的惯例,Android 的首个预览版充满了...
日期:07-16
ps5 全球销量「全球涨价又如何?索尼PS5总销量破2500万台」
今年8月,索尼宣布,因国际经济环境、通货膨胀以及汇率因素的影响,将调整部分市场PS5售价,此次调价针对欧洲、中东和非洲、亚太地区和拉丁美洲地区以及加拿大的部分市场推行。其中...
日期:11-05
日产超70万辆汽车召回:5款车引擎零件缺陷 或致车辆趴窝_2020年日产召回
快科技7月14日消息,据报道,因旗下5种车型在引擎零件设计上存在缺陷,有无法正常行驶的可能性,日产汽车公司当天向日本国土交通省提交申请,请求召回约69.9万辆汽车。目前,日产汽车没...
日期:07-14
苹果将于6月推出多款新品!苹果表将迎史上最大的软件更新「苹果手表最新软件版本是多少」
快科技4月17日消息,名记马克古尔曼(Mark Gurman)在最新消息中提到,苹果将会在6月推出多款新品。iphone 14系列最新功能配置被曝这其中最重磅的主角就是MR头显了,但这款产品对于普...
日期:04-17
360数科 年报_360数科二季度营收同比增长4.5%,净利润同比降37%
更新WhatsApp 查看最新行情   记者/王蕙蓉   8月19日,美股上市的金融科技公司360数科有限公司(NASDAQ:QFIN)发布2022年第二季度未经审计的财务业绩报告。...
日期:08-20
暴雪游戏运营「暴雪关停国服后 CEO发声:游戏行业被亚洲主宰 东西方竞争不平衡」
1月24日,暴雪与网易的合作协议正式到期,目前《魔兽世界》《炉石传说》《暗黑破坏神III》《星际争霸II》《魔兽争霸III:重制版》《风暴英雄》等游戏都已经停服。15.6 oled 4K魅...
日期:02-10
AI赋能基层医疗  李彦宏率百度闯入“改变世界企业榜”
  8月20日,《财富》杂志发布“改变世界企业榜”,通过“可衡量的社会影响”、“经营业绩”、“创新程度”与“企业整合”四个维度对全球企业进行综合评判,遴选出52家通过经营...
日期:02-27