OpenAI的DALL-EAI图像生成器现在也可以编辑图片了

传感器技术 2022-04-26 07:00


DALL-E 2 结果为“泰迪熊将闪闪发光的化学物质混合为疯狂的科学家,蒸汽朋克”。 
人工智能研究小组 OpenAI创建了一个新版本的 DALL-E,它的文本到图像生成程序。DALL-E 2 具有原始系统的高分辨率和低延迟版本,可生成描绘用户描述的图片。它还包括新功能,例如编辑现有图像。与之前的 OpenAI 工作一样,该工具并未直接向公众发布。但研究人员可以在线注册以预览该系统,OpenAI 希望以后可以将其用于第三方应用程序。
最初的 DALL-E 是艺术家“萨尔瓦多·达利”和机器人“WALL-E”的组合,于2021 年 1 月首次亮相。这是对人工智能视觉表达概念能力的有限但引人入胜的测试,从对法兰绒衬衫人体模型的平凡描绘到“乌龟制成的长颈鹿”或萝卜遛狗的插图。当时,OpenAI 表示将继续在该系统的基础上进行构建,同时检查潜在的危险,例如图像生成偏差或错误信息的产生。它试图使用技术保障和新的内容策略来解决这些问题,同时减少其计算负载并推动模型的基本功能。

“戴贝雷帽和黑色高领毛衣的柴犬狗”的 DALL-E 2 结果。
DALL-E 2 的一项新功能是修复,它在更精细的级别上应用了 DALL-E 的文本到图像功能。用户可以从现有图片开始,选择一个区域,然后告诉模型进行编辑。例如,您可以将客厅墙上的一幅画挡住,然后用另一幅画替换它,或者在咖啡桌上添加一瓶鲜花。该模型可以填充(或移除)对象,同时考虑房间中阴影方向等细节。另一个功能,变体,有点像不存在的图片的图像搜索工具。用户可以上传起始图像,然后创建一系列与其类似的变体。他们还可以混合两个图像,生成具有两者元素的图片。生成的图像为 1,024 x 1,024 像素,比原始模型提供的 256 x 256 像素有了飞跃。 
DALL-E 2 建立在 CLIP 之上,这是 OpenAI 去年也宣布的计算机视觉系统。OpenAI 研究科学家 Prafulla Dhariwal 说:“DALL-E 1 只是从语言中提取了我们的 GPT-3 方法并将其应用于生成图像:我们将图像压缩成一系列单词,我们刚刚学会了预测接下来会发生什么。”许多文本 AI 应用程序使用的 GPT 模型. 但单词匹配并不一定能捕捉到人类认为最重要的品质,而且预测过程限制了图像的真实性。CLIP 旨在以人类的方式查看图像并总结其内容,OpenAI 在此过程中迭代以创建“unCLIP”——一个从描述开始并朝着图像前进的倒置版本。DALL-E 2 使用称为扩散的过程生成图像,Dhariwal 将其描述为从“点袋”开始,然后以越来越多的细节填充图案。

房间的现有图像,在一个角落添加了火烈鸟。
有趣的是,关于 unCLIP 的一篇论文草稿说它部分抵制了 CLIP 的一个非常有趣的弱点:人们可以通过用一个表示其他东西的词(如 iPod )。作者说,变体工具“仍然很有可能生成苹果图片”,即使使用的是 CLIP 无法识别为史密斯奶奶的错误标签图片。相反,“尽管该标题的相对预测概率非常高,但该模型从未生成 iPod 的图片。”
DALL-E 的完整模型从未公开发布,但其他开发人员在过去一年中已经磨练了自己的工具来模仿它的一些功能。最受欢迎的主流应用程序之一是 Wombo 的 Dream 移动应用程序,它可以生成用户以各种艺术风格描述的任何图片。OpenAI 今天没有发布任何新模型,但开发人员可以使用其技术发现来更新他们自己的工作。

DALL-E 2 结果为“一碗看起来像怪物的汤,用羊毛编织而成。”
OpenAI 已经实施了一些内置的保护措施。该模型是根据剔除一些令人反感的材料的数据进行训练的,理想情况下会限制其产生令人反感的内容的能力。有一个水印表明该作品的 AI 生成性质,尽管理论上它可以被裁剪掉。作为一种先发制人的反滥用功能,该模型也无法根据名称生成任何可识别的面孔——即使要求像蒙娜丽莎这样的东西,显然也会从绘画中返回真实面孔的变体。
DALL-E 2 将由经过审查的合作伙伴进行测试,但有一些警告。禁止用户上传或生成“非 G 级”和“可能造成伤害”的图像,包括任何涉及仇恨符号、裸露、淫秽手势或“与正在进行的重大地缘政治事件相关的重大阴谋或事件”的内容。他们还必须披露人工智能在生成图像中的作用,并且他们不能通过应用程序或网站将生成的图像提供给其他人——所以你最初不会看到像 Dream 这样的由 DALL-E 驱动的版本。但 OpenAI 希望稍后将其添加到该组织的 API 工具集中,使其能够为第三方应用程序提供动力。Dhariwal 说:“我们希望在这里继续进行分阶段的过程,这样我们就可以从获得的反馈中不断评估如何安全地发布这项技术。” 


本公众号高薪签约长期专栏作者,欢迎具备优秀写作能力的科技从业或爱好者,联系传感器小编YG18511751369(微信号)

期待下一篇10W+出自您的笔下!

 

免责声明:本文版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题,请第一时间告知,我们将根据您提供的证明材料确认版权并按国家标准支付稿酬或立即删除内容!本文内容为原作者观点,并不代表本公众号赞同其观点和对其真实性负责。 

  

 

为您发布产品,请点击“阅读原文”

  
传感器技术 制造业的未来是智能化,智能化的基础就是传感器; 互联网的方向是物联网,物联网的基石也是传感器; 关注传感器技术,获得技术资讯、产品应用、市场机会,掌握最黑科技,为中国工业导航。
评论
  • 光耦合器,也称为光隔离器,是用于电气隔离和信号传输的多功能组件。其应用之一是测量电路中的电压。本文介绍了如何利用光耦合器进行电压测量,阐明了其操作和实际用途。使用光耦合器进行电压测量的工作原理使用光耦合器进行电压测量依赖于其在通过光传输信号的同时隔离输入和输出电路的能力。该过程包括:连接到电压源光耦合器连接在电压源上。输入电压施加到光耦合器的LED,LED发出的光与施加的电压成比例。光电二极管响应LED发出的光由输出侧的光电二极管或光电晶体管检测。随着LED亮度的变化,光电二极管的电阻相应减小,
    腾恩科技-彭工 2024-12-20 16:31 144浏览
  • Supernode与艾迈斯欧司朗携手,通过Belago红外LED实现精准扫地机器人避障;得益于Belago出色的红外补光功能,使扫地机器人能够大大提升其识别物体的能力,实现精准避障;Belago点阵照明器采用迷你封装,兼容标准无铅回流工艺,适用于各种3D传感平台,包括移动设备、物联网设备和机器人。全球领先的光学解决方案供应商艾迈斯欧司朗(瑞士证券交易所股票代码:AMS)近日宣布,与国内领先的多行业三维视觉方案提供商超节点创新科技(Supernode)双方联合推出采用艾迈斯欧司朗先进Belago红
    艾迈斯欧司朗 2024-12-20 18:55 145浏览
  • 汽车驾驶员监控系统又称DMS,是一种集中在车辆中的技术,用于实时跟踪和评估驾驶员状态及驾驶行为。随着汽车产业智能化转型,整合AI技术的DMS逐渐成为主流,AI模型通过大量数据进行持续训练,使得驾驶监控更加高效和精准。 驾驶员监测系统主要通过传感器、摄像头收集驾驶员的面部图像,定位头部姿势、人脸特征及行为特征,并通过各种异常驾驶行为检测模型运算来识别驾驶员的当前状态。如果出现任何异常驾驶行为(如疲劳,分心,抽烟,接打电话,无安全带等),将发出声音及视觉警报。此外,驾驶员的行为数据会被记录
    启扬ARM嵌入式 2024-12-20 09:14 108浏览
  • 百佳泰特为您整理2024年12月各大Logo的最新规格信息。——————————USB▶ 百佳泰获授权进行 USB Active Cable 认证。▶ 所有符合 USB PD 3.2 标准的产品都有资格获得USB-IF 认证——————————Bluetooth®▶ Remote UPF Testing针对所有低功耗音频(LE Audio)和网格(Mesh)规范的远程互操作性测试已开放,蓝牙会员可使用该测试,这是随时测试产品的又一绝佳途径。——————————PCI Express▶ 2025年
    百佳泰测试实验室 2024-12-20 10:33 150浏览
  • 耳机虽看似一个简单的设备,但不仅只是听音乐功能,它已经成为日常生活和专业领域中不可或缺的一部分。从个人娱乐到专业录音,再到公共和私人通讯,耳机的使用无处不在。使用高质量的耳机不仅可以提供优良的声音体验,还能在长时间使用中保护使用者听力健康。耳机产品的质量,除了验证产品是否符合法规标准,也能透过全面性的测试和认证过程,确保耳机在各方面:从音质到耐用性,再到用户舒适度,都能达到或超越行业标准。这不仅保护了消费者的投资,也提升了该公司在整个行业的产品质量和信誉!客户面临到的各种困难一家耳机制造商想要透
    百佳泰测试实验室 2024-12-20 10:37 239浏览
  •                                                窗        外       年底将近,空气变得格外寒冷,估计这会儿北方已经是千里
    广州铁金刚 2024-12-23 11:49 101浏览
  •         不卖关子先说感受,真本书真是相见恨晚啊。字面意思,见到太晚了,我刚毕业或者刚做电子行业就应该接触到这本书的。我自己跌跌撞撞那么多年走了多少弯路,掉过多少坑,都是血泪史啊,要是提前能看到这本书很多弯路很多坑都是可以避免的,可惜这本书是今年出的,羡慕现在的年轻人能有这么丰富完善的资料可以学习,想当年我纯靠百度和论坛搜索、求助啊,连个正经师傅都没有,从软件安装到一步一布操作纯靠自己瞎摸索,然后就是搜索各种教程视频,说出来都是泪啊。  &
    DrouSherry 2024-12-19 20:00 145浏览
  • //```c #include "..\..\comm\AI8051U.h"  // 包含头文件,定义了硬件寄存器和常量 #include "stdio.h"              // 标准输入输出库 #include "intrins.h"         &n
    丙丁先生 2024-12-20 10:18 98浏览
  • 随着工业自动化和智能化的发展,电机控制系统正向更高精度、更快响应和更高稳定性的方向发展。高速光耦作为一种电气隔离与信号传输的核心器件,在现代电机控制中扮演着至关重要的角色。本文将详细介绍高速光耦在电机控制中的应用优势及其在实际工控系统中的重要性。高速光耦的基本原理及优势高速光耦是一种光电耦合器件,通过光信号传递电信号,实现输入输出端的电气隔离。这种隔离可以有效保护电路免受高压、电流浪涌等干扰。相比传统的光耦,高速光耦具备更快的响应速度,通常可以达到几百纳秒到几微秒级别的传输延迟。电气隔离:高速光
    晶台光耦 2024-12-20 10:18 189浏览
  • 国产数字隔离器已成为现代电子产品中的关键部件,以增强的性能和可靠性取代了传统的光耦合器。这些隔离器广泛应用于医疗设备、汽车电子、工业自动化和其他需要强大信号隔离的领域。准确测试这些设备是确保其质量和性能的基本步骤。如何测试数字隔离器测试数字隔离器需要精度和正确的工具集来评估其在各种条件下的功能和性能。以下设备对于这项任务至关重要:示波器:用于可视化信号波形并测量时序特性,如传播延迟、上升时间和下降时间。允许验证输入输出信号的完整性。频谱分析仪:测量电磁干扰(EMI)和其他频域特性。有助于识别信号
    克里雅半导体科技 2024-12-20 16:35 116浏览
  • 光耦固态继电器(SSR)作为现代电子控制系统中不可或缺的关键组件,正逐步取代传统机械继电器。通过利用光耦合技术,SSR不仅能够提供更高的可靠性,还能适应更加复杂和严苛的应用环境。在本文中,我们将深入探讨光耦固态继电器的工作原理、优势、挑战以及未来发展趋势。光耦固态继电器:如何工作并打破传统继电器的局限?光耦固态继电器通过光电隔离技术,实现输入信号与负载之间的电气隔离。其工作原理包括三个关键步骤:光激活:LED接收输入电流并发出与其成比例的光信号。光传输:光电传感器(如光电二极管或光电晶体管)接收
    腾恩科技-彭工 2024-12-20 16:30 121浏览
  • 汽车行业的变革正愈演愈烈,由交通工具到“第三生活空间”。业内逐渐凝聚共识:汽车的下半场在于智能化。而智能化的核心在于集成先进的传感器,以实现高等级的智能驾驶乃至自动驾驶,以及更个性、舒适、交互体验更优的智能座舱。毕马威中国《聚焦电动化下半场 智能座舱白皮书》数据指出,2026年中国智能座舱市场规模将达到2127亿元,5年复合增长率超过17%。2022年到2026年,智能座舱渗透率将从59%上升至82%。近日,在SENSOR CHINA与琻捷电子联合举办的“汽车传感系列交流会-智能传感专场”上,艾
    艾迈斯欧司朗 2024-12-20 19:45 197浏览
  • ALINX 正式发布 AMD Virtex UltraScale+ 系列 FPGA PCIe 3.0 综合开发平台 AXVU13P!这款搭载 AMD 16nm 工艺 XCVU13P 芯片的高性能开发验证平台,凭借卓越的计算能力和灵活的扩展性,专为应对复杂应用场景和高带宽需求而设计,助力技术开发者加速产品创新与部署。随着 5G、人工智能和高性能计算等领域的迅猛发展,各行业对计算能力、灵活性和高速数据传输的需求持续攀升。FPGA 凭借其高度可编程性和实时并行处理能力,已成为解决行业痛点的关
    ALINX 2024-12-20 17:44 143浏览
我要评论
0
点击右上角,分享到朋友圈 我知道啦
请使用浏览器分享功能 我知道啦