以大模型、AIGC为代表的人工智能浪潮已经在悄然改变着我们生活及工作方式,但绝大部分人依然不知道该如何使用。
因此,我们推出了「AI在用」专栏,通过直观、有趣且简洁的人工智能使用案例,来具体介绍AI使用方法,并激发大家思考。
我们也欢迎读者投稿亲自实践的创新型用例。
今天,我们分享 X 用户 @gabchuayz 的案例—— 利用 Claude 3 Opus (最贵的一款)视觉推理能力,读懂宜家家具安装说明书!
-
案例地址:
https://twitter.com/gabchuayz/status/1766143549794357458
作者透过 Workbech 来接入 Claude 3 Opus
首先,进入 Claude 3 Opus ,输入提示( Prompt ):
-
you are a friendly assistant
这也是 OpenAI 官方认可写好 Prompt 的重要策略之一,让模型充当某个角色,它往往会表现地更专业,回答也更明确。
然后,上传说明书图片并附上简单文字提示:
-
These are instruction manuals. List out the steps clearly.
这位作者按顺序(步骤 1 — 14 )上传了七张说明书图片。这是其中一张图片的内容:
来自@gabchuayz
这是 Claude 3 Opus 返回的结果:
来自@gabchuayz
下面是翻译过来的内容。对于不善阅读图片说明的用户来说,这个回答显然大幅降低了安装门槛,它甚至识别出了螺丝的型号。
-
使用提供的工具(100092),将2颗螺丝(104521、104522)固定在圆形零件上,如图所示。
-
使用4颗螺丝将锤形零件(101339)连接到步骤1中组装的结构上。
-
使用4颗螺丝将另一个锤形零件(101339)连接到相反的一侧。
-
使用4颗螺丝连接两侧的零件。
-
将带箭头标记的零件插入组装结构的开口处,使用4颗螺丝(101339)固定。
-
使用提供的工具(101339),将带箭头标记的零件固定在组装的框架结构上。
-
使用4颗螺丝进一步固定框架结构的零件。
-
框架结构现在已经完全组装好了。
-
使用工具(101339)驱动另外四颗螺丝,以加固连接。
10、使用四颗螺丝(101339)固定盒子结构的顶部。
11、插入带箭头标记的零件,关闭盒子的一侧。
12、使用工具(101339)驱动16颗螺丝,将所有零件紧密固定。
13、附加的图示显示了组装框架结构内部创建的细分隔间。
14、最后的图示提供了组装完成的整体尺寸,包括六颗螺丝固定的手柄。
这是我们得到的结果。虽然还是存在明显的问题,比如识别不了 d (不是螺丝,而是会随商品赠送的扭螺丝简易工具),但并不妨碍我们对安装步骤有一个大体了解,并且知道这是一种比较典型的宜家家居安装风格。
如果是乐高安装说明书呢?我们按顺序(步骤 1-5 )输入了下面五张乐高安装说明书:
Claude 3 Opus 返回的结果如下。椅子被识别为桌子,安装步骤也和图片内容不吻合。
我们的新专栏会带来更多不同大模型的案例演示,欢迎大家留言评论并给出改进建议。