谷歌 I/O 十大重磅发布：天生式 AI 杀疯全场，首发折叠屏手机 ...

海田1

智东西（公众号：zhidxcom）
作者 | ZeR0
编辑 | 漠影
智东西5月11日报道，本日破晓，在一年一度的谷歌I/O开辟者大会上，谷歌CEO桑达尔·皮查伊 （Sundar Pichai）公布："对于天生式AI，我们正以一种大胆而负责任的方式迈出下一步。"
天生式AI是本场大会的绝对主角。在大会开场前，谷歌先发布了一款用天生式AI计划的卡牌游戏I/O FLIP。从图像到文本形貌都是AI天生的。

开源代码：https://github.com/flutter/io_flip
紧接着，多位谷歌高管轮替上阵，公布了一系列与天生式AI相干希望，涉及全新大模子、AI谈天呆板人、搜刮、办公软件、云服务、安卓体系等，包罗：
1、AI大模子：新一代语言模子PaLM 2善于多语言翻译、推理、编程，部门测试体现凌驾GPT-4，共有4种规格，最轻量级可摆设于移动装备；多模态大模子Gemini正在练习中。
2、AI谈天呆板人：Bard已取消期待名单，向180多个国家及地域开放，新增支持韩文和日本，本年炎天将新增对中文等别的40种语言的支持；问答新增图片输入输出。
3、Pixel硬件：发布Pixel 7a智能手机、谷歌首款折叠屏手机Pixel Fold、Pixel Tablet平板电脑。
4、AI搜刮：谷歌天生式AI实行版搜刮引擎展示对话功能，搜刮天生体验开放注册。
5、Workspace：对标微软Office百口桶，让AI写邮件、绘图、制表、代写文稿。
6、谷歌云：天生式AI协作工具Duet AI提供代码辅助和谈天辅助功能，谷歌推出基于NVIDIA H100 GPU的A3新实例。
7、AI工具：通过构建评估工具、增长水印和元数据等方式检测AI天生内容，用AI让照片编辑功能更加简朴，谷歌舆图沉醉式视图上线在即。
8、安卓：增长由天生式AI驱动的信息复兴、天生式AI壁纸功能。
9、3D魔镜：推出最新Starline项目原型，几个尺度摄像头就能产生更高质量的传神3D图像。
10、生命研究：包罗谷歌工程师在内的100多名科学家构成的同盟公布了天下上第一份人类泛基因组参考草案，论文登上本日国际顶级学术期刊Nature的封面。
一、PaLM 2：新一代语言模子，部门基准测试体现凌驾GPT-4
谷歌新一代大型语言模子PaLM 2接纳谷歌最新的TPU底子办法举行练习，善于数学、推理、多语言翻译、编程。在MATH等使命的基准测试中，PaLM 2的部门性能体现凌驾了GPT-4。

1、多语言：PaLM 2对多语言文本举行了更多的练习，覆盖100多种语言。PaLM 2还通过了高级语言本领测验，到达"醒目"程度。
2、推理：PaLM 2的广泛数据集包罗包罗数学表达式的科学论文和网页，因此它在逻辑、知识推理和数学方面比上一代更强。

3、编程：PaLM 2是在大量公开可用的源代码数据集上举行预练习的，担当了凌驾20种编程语言的预练习，善于Python、JavaScript等盛行编程语言，同时也可以用Prolog、Fortran和Verilog等语言天生专门的代码。它不但可以或许明白、天生和调试代码，还能表明修复错误背后的缘故原由，以便开辟者在天下各地举行协作。

为了方便广泛摆设，谷歌构建了4种规格的PaLM 2大模子，分别是Gecko（壁虎）、Otter（水獭）、Bison（野牛）、Unicorn（独角兽）。
此中Gecko非常轻量级，可在移动装备上工作，而且速率充足快，即便在离线环境下也能在装备上运行精彩的交互式应用步伐。
谷歌还公布凌驾25款由PaLM 2驱动的新产物和新功能。
比方，谷歌康健研究团队用医学知识对PaLM 2举行微调，开辟了Med-PaLM 2。这是第一个在美国医疗执照测验风格的题目上到达专家程度的大型语言模子，可以检索医学知识、答复题目、天生有效的模板、解码医学术语。
谷歌正在为其增长多模式功能来合成信息，好比胸部X光和乳房X光查抄等图像，盼望有一天能改善病人的治疗结果。Med-PaLM 2将在本年炎天晚些时间向一小部门云客户开放。

除了推动科学研究外，PaLM 2还资助改进一样平常应用。比方，Sec-PaLM是颠末安全用例练习的PaLM 2的专门版本。通过谷歌云，它利用AI来资助分析息争释潜伏恶意脚本的举动，可以更好地检测哪些脚本现实上对个人和构造构成威胁。

近来谷歌大脑和DeepMind归并成一个团队，正专注于安全、负责地构建更强盛的体系，包罗仍在练习中的其下一代底子模子Gemini。
据悉，Gemini是多模态大模子，在工具和API集成方面服从很高，跟PaLM 2将有差别规格。
自本日起，开辟者可以注册利用PaLM 2模子，谷歌客户可在Vertex AI中利用具有企业级隐私、安全和管理的模子。
二、Bard：引入图片问答，新增多项导出功能
谷歌本日公布的Bard更新涉及扩大访问范围、新增图像功能、优化编程功能和应用步伐集成。从本日起，Bard将完全运行在PaLM 2之上。
Bard已取消期待名单，向180多个国家和地域开放，并新增对日文和韩文的支持。Bard很快将支持40种语言，包罗中文。

详细功能上，Bard的谈天问答新增图像互动。
你可以问它："新奥尔良有哪些必看景点？"Bard的复兴不但有笔墨，另有丰富的图片。

你也可以向Bard输入图像。好比上传一张两只小狗照片，让Bard写个风趣的标题。

短短几秒钟内，Bard就能借助Google Lens对照片举行分析，检测狗的品种，然后草拟出一些创造性的阐明笔墨。
别的，Bard升级了编程和导出功能，包罗：
1、泉源引用：假如Bard引用了一段代码或别的内容，只需点击解释，Bard就会在这些部门下划线，并链接到源代码或内容。
2、暗黑模式：开辟者喜好这个模式。
3、导出按钮：开辟者喜好导出到Colab的功能，以是Bard很快将添加导出和运行代码功能，与其互助同伴Replit一起，从Python开始。
别的，谷歌推出了别的两个导出操纵，方便用户将Bard的复兴直接导出到Gmail和Docs中。
将来谷歌筹划将各种谷歌应用步伐和服务的功能整合到Bard的体验中。

Bard还将可以或许使用网络上的各种服务，通过外部互助同伴举行扩展。接下来几个月，谷歌筹划将Adobe的创意天生式AI模子家属Adobe Firefly集成到Bard中，如许用户就能轻松快速地将本身的创意转化成高质量图像，然后进一步编辑或添加到Adobe Express中的计划中。
好比，向Bard输入："在孩子集会上制作一个独角兽和蛋糕的图像。"Bard几秒钟内就天生了符合要求的全新图像。

三、Pixel硬件产物上新：智能手机、折叠屏手机、平板电脑
谷歌还推出了Pixel 7a、Pixel Fold和Pixel Tablet平板电脑。Pixel 7a克日起可购买，Pixel Fold和Pixel Tablet的预订现已开放。三款装备都接纳了谷歌旗舰芯片Google Tensor G2。

Pixel 7a起售价499美元，包罗了谷歌高端手机的很多必备功能，好比人脸解锁、8GB内存、90Hz表现屏、无线充电等等。Pixel 7a拥有AI驱动的Pixel Call Assist电话呼唤功能和及时翻译、语音信息转录等语音功能。

Pixel Fold是谷歌首款折叠屏手机。谷称它比市场上任何其他可折叠手机都要薄，拥有折叠屏手机中最好的摄像头，打开后屏幕尺寸是7.6英寸，预订价格1799美元，并将赠予Pixel Watch。

Pixel Tablet平板电脑拥有11英寸表现屏，预售价499美元，可与充电音箱底座搭配利用。放到音箱上时，它就相称于酿成了一个带屏智能音箱，可以作为智能家居的中控装备。

当它处于Hub模式时，点击Google Home图标就能访问全部兼容的智能家居装备，包罗检察视频门铃、调治恒温器、打开客堂的灯等等。它也是第一款内置Chromecast的平板电脑，用户可以从手机上播放视频或音乐。
为了让平板电脑和折叠屏手机更好用，谷歌公布了50多个谷歌应用步伐的更新，以更充实地使用更大的屏幕。
谷歌智能家居软件Google Home也举行了更新，应用步伐中的新装备选项卡为用户提供了一个清楚的视图和中心位置来管理全部智能家居装备，包罗与Matter配对的装备。
四、搜刮：用天生式AI改变信息构造方式
在搜刮中引入天生式AI功能，有助于更快明白主题，发现新的观点和看法，更轻松地完成使命。
好比输入题目："对于一个有3岁以下孩子和一只狗的家庭来说，bryce canyon和arches哪个更好?"天生式AI会敏捷整理出可用的关键信息，还提供有相应链接。
同时，界面上有发起的后续题目，当你点击这些按钮，就会进入一个新的对话模式，然后你可以扣问更多题目。

搜刮中的天生式AI还可以资助用户在购物时全面相识，得到产物相干形貌，包罗最新的批评、评级、代价、产物图片等等。

这种新的天生式AI购物体验构建于谷歌购物图（shopping Graph）上。谷歌购物图拥有凌驾350亿个产物列表，其产物、卖家、品牌、批评和库存数据集不停革新，从而提供奇怪讯息。
谷歌在搜刮实行室举行了一个名为SGE（搜刮天生体验）的实行，本日开放注册，将于将来几周在美国推出。

有了SGE，搜刮广告将继承出如今整个页面的专用广告位。在这种新的体验中，广告商仍旧有时机在他们的搜刮路程中打仗到潜伏客户。
谷歌致力于进步透明度，使广告与天然搜刮效果区别开来。当搜刮广告出现时，它们会标识清楚透明的广告标签，并以黑体字表现"赞助"标签。

五、谷歌Workspace：AI做图绘表写文稿
多年来，谷歌AI进步已经资助凌驾30亿用户节流了时间，好比智能撰写、智能复兴、为文档天生择要等功能。仅在已往一年，这些AI功能就在Workspace中被利用了凌驾1800亿次。
有了更强盛的天生模子后，谷歌将在Gmail中进一步推出"帮我写作（help me write）"功能。只要输入你的要求，点击创建，一份完备的草稿就写好了，你可以在此底子上进一步美满它。

谷歌Workspace中的Duet AI提供了Slides幻灯片和Meet视频集会中的图像天生工具、Sheets表格中的创建自界说筹划等工具。

起首，谷歌公布将Gmail的智能写作体验带到移动装备上，增长草拟复兴功能。用户仅输入几个词作为提示词，就能让AI草拟完备的邮件复兴。
谷歌也将Duet AI嵌入到Slides幻灯片中。用户输入几个单词就能天生图像。

制表也更加方便。Duet AI通过主动化数据分类和自界说筹划的创建，可以资助用户比以往更快地分析和处置惩罚Sheets表格中的数据。

同样的，将Duet AI整合到Meet视频通讯软件中，点击几下就能天生独特的自界说配景。
假如你在Docs文档中写一份工作形貌，Duet AI不但会资助你写内容，还会包罗智能芯片，好比位置和状态等信息，以及好比你的公司名称之类的一些个性化细节变量。它还提供有校对功能。

在I/O大会上，谷歌先容了可以体验谷歌早期功能和产物创意的实行室（Labs），克日起可报名申请到场一系列实行的有限名额：
1、搜刮实行室：在谷歌搜刮中探索信息的新方式，如SGE（搜刮天生体验），提供AI的概述、指针和后续发起。
2、Workspace实行室：在谷歌Workspace中创建和与AI协作的新功能，好比在谷歌Docs文档和Gmail中编写发起，在Sheets工作表中构造数据，在Slides幻灯片中天生文本天生图像。
3、Tailwind项目：一个AI条记本，由你的条记和资源驱动。
4、MusicLM：把笔墨形貌酿成音乐的工具。

六、谷歌云Duet AI：对战微软Copilot，让云服务更好用
谷歌云公布推出新的天生式AI协作工具Duet AI，为云服务用户辅助编程，补全上下文代码，提供酿成发起，及时天生整个代码函数，以及帮忙举行代码检察和查抄。从功能来看，根本上跟微软Copilot对标。

PaLM 2为谷歌云Duet AI提供支持。Duet AI将为任何范例、任何技能程度的用户提供支持，既能为开辟者提供代码发起，为数据工程师提供基于提示词的数据洞察，也能为业务用户创建基于谈天功能的应用步伐。业务用户借助谈天功能可以或许得到特定开辟或云相干题目的答案。

Duet AI可嵌入到谷歌云接口中，包罗集成开辟情况（IDE）、谷歌云Console以致谈天功能。
对于盼望更简朴有用地创建天生式AI应用的开辟者，谷歌云AI产物还引入了新的底子模子和功能。为了继承支持和鼓励更多的客户和互助同伴，谷歌正在Vertex AI中开放天生式AI支持。
新的底子模子可在Vertex AI中访问：谷歌代码天生底子模子Codey，通过代码天生、代码完成和代码谈天资助加快软件开辟；文生图底子模子Imagen，可以让客户天生和定制工作室级图像；先辈语音模子Chirp，支持语音控制、字幕和语音辅助等语音使命。这些模子均可通过API访问，通过天生式AI Studio举行调解，并具有企业级的安全性和可靠性。

AppSheet的Duet AI将支持用户创建智能业务应用步伐，毗连他们的数据，并通过天然语言将工作流构建到谷歌Workspace中。无需编程，用户将可以或许通过在AI提示引导下的谈天中形貌他们的需求来构建应用步伐。这可以让开辟团队将时间会合在其他高影响力的工作上。

文本嵌入（Text Embeddings）API是一个新的API端点，支持开辟者基于对文本或图像的语义明白构建保举引擎、分类器、问答体系、相似性匹配和其他复杂的应用步伐。
Vertex AI是超大规模企业中第一个将人类反馈强化学习（RLHF）作为托管服务提供的端到端呆板学习平台，支持构造联合人类反馈来深度定制和改进模子性能，教会模子制止不得当的输出。
支持全部这些创新的是谷歌AI优化的底子办法。谷歌公布构建基于NVIDIA H100 GPU的新A3假造机，这些假造机与近来发布的G2假造机一起为练习和服务AI模子提供了全面的GPU功能。

A3是第一个利用谷歌定制计划的200Gbps IPU的GPU实例，相比A2假造机可实现高达10倍的网络带宽，具有低尾部耽误和高带宽稳固性。
A3超等盘算机的规模提供高达26EFLOPS的AI性能。A3假造机也非常得当推理工作负载，与谷歌由NVIDIA A100 Tensor Core GPU*支持的A2假造机相比，其推理性能提拔了30倍。
七、AI工具：辨别真伪、照片编辑与沉醉式舆图
针对天生式AI会产生错误信息的题目，接下来几个月内，谷歌搜刮将添加一个用于核查图片信息可信度的评估工具，提供关于相应图片的有效配景信息，好比雷同的图片大概初次出现的时间和所在，以及它在网上的哪些其他地方被发现。

为了辨认出AI天生内容，谷歌筹划很快将水印、元数据及其他技能创新集成到最新的天生模子中。元数据答应内容创建者将附加上下文与原始文件相干联，从而提供更多信息。谷歌将确保每一张AI天生的图像都有这个元数据。

谷歌还练习了一个检测合成音频的分类器，正确率靠近99%。
谷歌相册中的邪术编辑器Magic Editor接纳天生式AI，让照片编辑变得更加简朴。它资助用户对照片中的特定地区举行编辑，也可以优化团体构图，将拍摄主体置于最佳位置。无论是更换天空配景，照旧挪动照片中的人，操纵都非常轻松。

谷歌舆图即将上线Immersive View沉醉式视图功能。该功能利用盘算机视觉和AI技能将数十亿街景和航拍图像融合在一起，创建一个丰富的数字天下模子。用户可以看到所需门路的全部信息，预览自行车道、人行道、十字路口和停车位，检察氛围质量信息及路况变革。

通过新的鸟瞰图API，开辟者可以轻松将爱好点的3D鸟瞰视频集成到本身的应用步伐中，为人们提供更多关于一个地方的视觉信息。谷歌还通过Map Tiles API推出了一个实行性的Photorealistic 3D Tiles，来资助开辟者定制3D舆图。

八、安卓：天生式AI驱动的信息复兴和个性化壁纸
谷歌分享了用AI技能让安卓手机更具个性化，包罗Magic Compose、影戏壁纸和天生式AI壁纸。
Magic Compose由天生式AI提供支持，可资助用户在对话中添加额外的个性。它会根据你的信息上下文提供发起复兴，乃至能将你写的内容转换成差别的风格。该功能将在夏日推出测试版。

心情壁纸支持用户用本身最喜好的心情组合、图案和颜色来定制装备。影戏壁纸接纳呆板学习网络，能将用户最喜好的照片转换成3D图像。天生式AI壁纸利用谷歌的文本到图像扩散模子，用户输入本身创意想法的形貌后，手机就能天生相应的独特壁纸以供选择。

为了制止"防丢神器"被滥用于侵占用户安全，谷歌将在本年夏日晚些时间推出全新的"查找我的装备"体验，在安卓上推出未知追踪器警报。手机确定四周有未知追踪器在移动时，就会主动关照用户。用户可以检察物理禁用跟踪器并制止更新位置，并能自动搜刮附近的未知追踪器。
谷歌将继承将安卓带到新的屏幕上，正在与三星互助打造一个基于安卓的全新沉醉式XR平台。
九、3D魔镜：最新原型大降硬件本钱
本日谷歌推出了最新的3D视频集会体系Starline项目原型。该项目标演示结果非常神奇，就似乎你坐在一面魔镜前，可以跟远隔千里的另一个人及时攀谈，而镜中人拥有宛如真人的立体感和巨细，就似乎谁人人坐在你对面一样平常。

谷歌早期的Starline项目原型占据了整个房间，必要复杂的硬件，体系的规模和复杂性使其难以应用于许多办公室中。
因此，对于其最新原型机，谷歌开辟了新的AI技能，只必要几个尺度摄像头就能产生更高质量的传神3D图像。其原型机如今更像一个传统的视频集会体系，从一个餐厅摊位的巨细缩小到一个平板电视，变得更轻易摆设和访问。
十、AI助攻生命研究突破：天下上第一个人类泛基因组参考
包罗谷歌研究中央的工程师在内，一个由来自60个机构的119名科学家构成的同盟，在本日登上国际顶级学术期刊Nature封面的一篇论文中，公布了第一份人类泛基因组参考草案。

现在的人类参考基因组只代表一个人在DNA上每个点的数据，与之差别的是，泛基因组参考基因组包罗来自每个位置的很多个体的数据。这创造了一种更好地代表人类遗传多样性的新资源，使科学家和大夫可以或许更正确地诊断和治疗疾病，并开辟新的治疗方法。
为了促进该同盟的积极，谷歌工程师资助开辟和应用深度学习方法来办理基因组学方面的挑衅。工程师们接纳了用卷积神经网络辨认基因变异的开源工具DeepVariant。该同盟使用这些改进的方法改进了泛基因组分析技能，并消除了人类基因组长而特殊难以解码的片断的测序错误。
谷歌的DeepConsensus利用transformer来改正测序仪器数据中的错误，资助进步了用于构建泛基因组的数据的正确性。使用DeepConsensus数据，该同盟可以或许开辟出一种长读汇编器，终极正确率凌驾99.999%。
论文链接：https://www.nature.com/articles/s41586-023-05896-x
结语：谷歌自揭AI攻略
皮查伊说，谷歌有15种产物的用户数凌驾5亿，此中6个产物的用户数目凌驾20亿，这给了谷歌许多时机来实现"构造天下上的信息，使其广泛可用和有效"的永恒任务。
预测将来，谷歌将通过4个紧张方式让AI对每个人都有资助：1）加强知识和学习，加深人们对天下的明白；2）引发创造力和生产力；3）让开辟者和企业可以或许构建本身的厘革性产物和服务，赋能他人创新；4）通过负责任地构建和摆设人工智能，让每个人都能同等受益。