您的位置:首页 > 互联网

下一代 Docker 来了!1小时构建缩至1.5分钟,还能结合 LangChain、Ollama 等做 AI 应用开发

发布时间:2023-10-08 15:21:44  来源:互联网     背景:

声明:本文来自于微信公众号 InfoQ(ID:infoqchina),作者:褚杏娟、核子可乐,授权转载发布。

美国电动车品牌rivian

在日前于洛杉矶召开的 Dockercon 大会上,缔造开源容器技术的同名公司 Docker 发布了一系列产品,在致力于加速本地和云上应用程序交付的同时,还与生成式 AI 做了结合,深入探索这一新鲜趋势中的技术潜力。

与 AI 的深度集合

如今,在几乎所有用于训练和推理的生成式 AI 应用当中,Docker 容器已经成为最主流的部署方法。这次大会,Docker 推出了新的 GenAI Stack,可以在几分钟内帮助开发人员启动 GenAI 应用程序。

“开发人员对 GenAI 的可能性感到兴奋,但技术堆栈的变化速度、供应商数量和巨大差异使其难以了解应该如何下手。”Docker 公司 CEO Scott Johnston 表示,虽然目前用 Docker 容器来协助共享和部署 AI 模型的作法已经非常普遍,但仍需要更多探索来进一步降低生成式 AI 应用的开发门槛。

现在,Docker 发布的 GenAI Stack 能够显著简化整个流程,将 Docker 与 Neo4j 图数据库、LangChain 模型链接技术和用于运行大语言模型(LLM)的 Ollama 相集成。具体组件包括:

  • 预配置的开源 LLM(例如 Llama2、Code Llama、Mistral),或私有模型(例如 OpenAI 的 GPT-3.5和 GPT-4);

  • Ollama 帮助开发人员在本地启动并运行开源 LLM;

  • Neo4j 作为图形和原生向量搜索的默认数据库,可以发现数据中显式和隐式的模式和关系,使 AI/ML 模型更快、更准确,并作为这些模型的长期记忆;

  • Neo4j 知识图谱作为 LLM 的知识库,以获得更准确的 GenAI 预测和结果;

  • LangChain 在 LLM、应用程序和带有向量索引的数据库之间进行编排,并作为开发由 LLM 提供支持的上下文感知推理应用程序的框架;

  • 还有一系列支持工具、代码模板、操作方法和 GenAI 最佳实践。

GenAI Stack 拥有多种目标用例,包括构建具有检索增强生成(RAG)功能的支持型客服机器人、Python 编码助手和自动内容生成工具等。开发人员能够无缝导入数据、创建向量索引、嵌入问题和答案,并将它们存储在向量索引中;还可以生成各种格式的回复,例如项目列表、思维链、GitHub issue、pdf、诗歌等。此外,开发人员可以比较 LLM 自身、带有向量的 LLM 以及集成了向量和知识图谱的 LLM。

Johnston 指出,“整套方案预先配置、准备就绪,开发人员可以随时在这里开始编码并启动实验。”GenAI Stack 现已在 Docker Desktop 学习中心和 https://github.com/docker/genai-stack 的存储库中提供。

此外,本届 Dockercon 上也公布了全新亮相的 Docker AI 产品,将成为开发人员获取 AI 驱动见解及容器开发建议的集成化服务。

当今市场上,各类生成式 AI 开发者工具并不少见。其中既有 GitHub Copilot 这位超级明星,也有 Amazon CodeWhisper 等人气选项。Docker 如今也携自家生成式 AI 工具(简称为 Docker AI)加入战局。

Docker 并没有像微软及其他供应商那样将 Docker AI 称为“copilot”(即拉力赛车中坐在副驾的领航员,目前多数厂商倾向于使用这个术语来描述辅助用户的生成式 AI 工具),而选择了特别的称呼:“机甲”。Docker 应该是希望自己的“机甲套装”能为开发者赋予完成任务所需要的强大力量。

据介绍,Docker AI 已经接受了来自数百万个 Dockerfile、compose 文件及错误日志中 Docker 专有数据的训练。Docker AI 将被直接集成至开发者的工作流程当中,以便在发生错误时提供帮助。它将显示开发环境中潜在的修复选项,允许开发者在提交变更之前测试修复效果。Docker AI 的目标也很简单,就是为开发者提供更好的工作体验,并确保在问题发生之前进行故障排查与修复。

Johnston 指出,虽然 GitHub Copilot 等同类工具已经非常实用且功能强大,但 Docker AI 也有自己的独特优势:经过专门微调以适应容器开发需求。“Docker AI 在训练中接触的,是其他大语言模型难以触及的丰富专有 Docker 数据流。”

本地与云的协作

除了在 AI 上发力,Docker 还发布了三款新产品:Docker Scout、Next-generation Docker Build 和 Docker Debug,致力于将本地开发的响应能力和便利性与云的按需资源、连接性和协作结合起来。上述三个产品是对现有 Docker 产品(Docker Desktop、 Private Repos 以及 Docker Hub)的补充。

Johnston 表示:“云为开发团队提供了许多潜在的好处,但大多数‘内循环’解决方案都需要彻底改变工具和工作流程,而且很少有开发人员愿意将他们的整个笔记本电脑放到云端运行。” 而新产品将云带到了开发团队代码 - 构建 - 测试 - 调试的“内循环”过程中:

Docker Scout GA

Docker Scout 目前已经正式推出,能够在应用程序使用的库中发现已报告的漏洞。Docker Scout 补充了 Docker 现有的可信内容、构建自动化和 SBOM 工具,添加了相关的见解、策略评估和上下文修复,同时通过与 Sysdig、JFrog Artifactory、AWS ECR、BastionZero、GitHub、GitLab、CircleCI 和 Jenkins 集成来满足开发人员的工作需求。

实际上,GitHub 的 Dependabot 等工具已经可以实现类似的功能,它的出现会不会多此一举?Johnston 对此表示,“我们的目标是与 GitHub 合作,而非与之对抗和竞争。我们希望共同为开发人员提供完整的项目视图,Sysdig 就是典型的案例。”

注:Sysdig 是一款与 Scout 相集成的第三方工具,它能“显示运行时中实际执行的内容,并据此在仪表板中优先显示开发者较为关注的内容。

Docker Scout,现已全面上市

Next-generation Docker Build

“我们发现每位开发团队成员日均要花一个小时来等待容器镜像构建完成,这是因为此前的 Docker Build 只能以本地方式运行。”Johnston 指出。现在,只需切换 Build 命令行即可将构建负载移交至云端。

“与本地构建相比,我们发现远程构建的速度提高了39倍。”这等效率提升不仅要归功于强大的设施资源,更得益于缓存机制的支持。“开发团队经常会使用相同的基础镜像,所以只要把这类镜像缓存起来,每位团队成员都能从中获益。”

那么,Next-generation Docker Build 到底是单纯服务于开发,还是可以成为持续集成(CI)部署流程中的一部分?Johnston 给出的答案是,“它初步面向开发流程,但我们也看到有用户在尝试将其引入持续集成流程。”例如,开发者可以在 GitHub Actions 或者 GitLab Pipelines 处调用 Docker Build。

Docker Debug

Docker Debug 想要解决的问题并不难理解:当应用程序在容器内的运行时中发生故障时,我们往往难以精准跟踪。开发人员可能会花费多达60% 的时间来调试应用程序,但是大部分时间花在了排序、配置工具和设置上,而非实际的调试上。

Johnston 表示,“以往,开发者根本没有一款用于深入探索容器内部的工具。而 Docker Debug 提供的就是这样一套具备语言中立性的一体式工具集,能够帮助开发人员专注于解决问题、避免在设置调试工具上浪费精力。”

实际上,Docker Debug 本身也是个容器,只是容纳的是开发者调试工具。Docker 公司一位发言人解释称,它的工作原理就是提供一套工具集,用以调试挂载了损坏容器文件系统的容器。Docker 还引入了其他一些功能,例如分析入口点、验证入口点的二进制文件或 CMD 等,并围绕潜在问题提供更好的用户体验。”

在构建包含调试工具与容器内运行内容的文件系统的过程中,Docker Debug 会使用 Nix(一款软件包管理器兼系统配置工具)等工具创建辅助文件系统,之后 Docker Debug 会调用 mergefs 来合并这两套文件系统(即原始文件系统加调试工具系统)。“如此一来,就能得到一套同时包含原始容器及所有调试工具的文件系统。”

Johnston 还反复强调,开发者用户其实并不需要过于纠结这些细节。“对于开发者来说,这套工具集就是能轻松发挥出‘神奇的’效力。”

结束语

在去年3月底宣布获得1.05亿美元的 C 轮融资后,Docker 进行了一系列收购,包括 Mutagen、Atomist、Tilt 、Nestybox 等,在软件供应链安全、高性能远程开发等方面持续投入。这次大会上,Johnston 透露,Docker 每月活跃开发者数量已高达2000万,而且从业务角度看 Docker 已经拥有超过7.9万家商业客户。

Johnston 曾在今年3月指出,Docker 收入正稳步增长、在过去3年间增长了30倍。而支撑这种喜人局面的,恰恰是某些不受欢迎的决定,例如2021年将 Docker Desktop 由免费产品调整为付费产品,包括将团队(Teams)账户纳入价格更高的商业(Business)订阅。但从目前的情况看,力排众议的决策已经初见成效,Docker 现在有更多资金可用于打磨自己的技术储备。


返回网站首页

本文评论
搭载超薄潜望模组 「OPPO」-Reno10 Pro+即将亮相
不就前OPPO官方已经宣布,将于5月24日14:30正式推出全新的OPPO Reno 10系列,这将是迄今为止拍照最强的Reno系列机型。随着发布时间的日益临近,官方关于该机的预热也更加密集。现...
日期:09-17
抖音“外卖”怎么样?我们体验了一把「抖音有外卖了吗」
声明:本文来自于微信公众号 三言财经(微信号:sycaijing),作者:DorAemon,授权转载发布。前不久,抖音开始布局外卖到家业务的消息引发关注。而近日,抖音外卖服务也开始在北京、上海...
日期:02-10
社交应用 Soul 提交 IPO 申请 计划纳斯达克挂牌上市_soul终止ipo
  5月11日消息:今天社交App Soul向美国证券交易委员会(SEC)提交了首次公开发行(IPO)申请,计划在纳斯达克挂牌上市。摩根士丹利、美银,杰富瑞和中金为此次IPO联席承销商。...
日期:12-03
小米Civi 2发布:颜值超高 共有4种配色「小米Civi新品发布」
在小米新品发布会上,小米发布了Civi系列新机小米Civi 2。该机共有4种配色,分为冰冰蓝、怦怦粉、朦朦黑以及与Hello Kitty联合设计的特别款“小白裙,每款配色的颜值都非常的高。...
日期:09-29
诺基亚贝尔公司怎么样「专访诺基亚贝尔白瑞:无线专网正助力工业数字化转型升级」
通信世界网消息(CWW)6月4日至6日,由工业和信息化部主办的“第31届中国国际信息通信展览会”(以下简称PT展)在北京国家会议中心举行。本届展览会以“打通信息大动脉共创数智新时代...
日期:06-07
LEBEN同医代表团队赴阿拉伯考察 将探索更多合作可能
  2019年9月9日-9月13日,LEBEN(同医)代表团队赴阿拉伯开展了为期5天的考察。LKBT创始人Amos Lang,中国电信事业部、技术部以及研究院的高层领导,分别代表LEBEN(同医)的重要...
日期:05-21
星巴克星礼卡被指国内外双标 国内收取延期管理费_星巴克星礼卡有使用期限吗
此前,澎湃新闻曾报道星巴克“星礼卡”存在收取延期管理费的情况,用户到期时会被扣除管理费。一些用户持有的三百多张卡到期后,被扣除了三千多元的管理费,引发了广泛关注。星巴克...
日期:06-09
Windows内核现0-day漏洞 微软忙修复(win10 0day漏洞)
  11月2日消息:微软昨日证实,它正在努力修补在Duqu恶意软件中发现的0-day漏洞。安全研究人员发现,Duqu恶意软件内隐藏了一种未知的 Windows内核漏洞。CrySyS集团最初发现的...
日期:07-24
科技巨头正在变成工业巨头
互联网经济是实打实的实体经济,现在的科技巨头都快要变成工业巨头了。...
日期:09-27
消失的汽车,找车的人_消失的车卖亏的房
文|《中国企业家》记者 任娅斐编辑|姚赟头图来源|视觉中国“他们要是不说,我都不知道这是个车,找了半天,现在就要清这个车。”蒋勤说道。站在河岸边,顺着蒋勤所指的方向,发现河道边...
日期:08-11
报告称三星 Galaxy S23 Ultra手机物料成本469美元,占比售价39%
IT之家 6 月 1 日消息,根据市场调查机构 Counterpoint Research 分享的最新物料清单(BoM)报告,认为三星生产一台 8GB 内存、256GB 存储、支持 Sub-6GHz 的 Galaxy S23 Ultra 手...
日期:06-02
开车上高速竟让婴儿平躺副驾驶!理想汽车回应:非常危险 坚决反对
快科技6月2日消息,很多人提了新车之后,都会拍照晒到社交平台与好友分享提车的喜悦之情,然而,今日一张挂着临时牌照的理想新车照片却在网上引起众多网友不满。照片中,车主将婴儿平...
日期:06-03
索尼历年市值_索尼预测2011财年亏损206亿元 达16年来最高
(坎贝)北京时间5月23日消息,据国外媒体报道,由于日本311地震导致工厂减产以及在线娱乐服务遭黑客入侵的影响,日本最大消费电子产品出口商索尼预测的2011财年业绩低于分析师预期...
日期:07-28
荣耀70手机24期免息 立减500到手2199「保底消费88买手机减700」
荣耀70手机现在来到了史低价,全系立减500元,并且在2000元左右价位段中,也算是影像方面的首选机型。易建联代言德邦快递照片苹果新款ipadpro2022发售时间chromebook为什么便宜在...
日期:10-21
iQOO史上标准版!iQOO 11官宣搭载骁龙8 Gen 2处理器「iqoo8安卓12」
11月29日消息,今天iQOO官宣iQOO 11将搭载骁龙8 Gen 2处理器,采用自研V2芯片,突破性能极限;同时首发2K 144Hz E6全感屏,成就电竞直屏天花板。同时采用120W闪充和5000mAh大电池,告别...
日期:12-02
小米13 Ultra真机曝照:潜望式长焦敲定
小米13 Ultra的发布时间越来越近,也有更多信息被曝光。一位数码博主发布了疑似小米13 Ultra的真机实拍图,基本上和此前爆料的消息吻合。从曝光图中我们可以看到,小米13Ultra将...
日期:04-12
微众银行严格把控风险提升经营发展质量(微众银行潜在风险)
  微众银行WeBank是国内首家民营银行和互联网银行,对于自身的风险把控和经营管理非常重视,目的也是为了能够提供更好、更安全、更便捷的金融服务给大众。微众   2019年,...
日期:07-16
大主播的尽头是淘宝「大主播的尽头是淘宝店铺吗」
声明:本文来自微信公众号“价值星球Planet”(ID:ValuePlanet),作者:归去来,编辑:唐飞,授权转载发布。日前,有报道称网红主播“疯狂小杨哥”背后公司三只羊网络,以及辛巴团队将于近期...
日期:05-31
微软收购valve「微软收购动视暴雪遭英监管机构阻止」
(原标题:微软收购动视暴雪遭英监管机构阻止,动视暴雪盘前跌超10%) 澎湃新闻记者 吴遇利科技巨头微软收购游戏开发商动视暴雪一案...
日期:04-26
连自己都不放过!任天堂举报《王国之泪》偷跑消息误伤官号「王国之心switch平台」
快科技5月8日消息,近一段时间,由于《塞尔达传说:王国之泪》的意外偷跑,任天堂开始在各大社交平台举报相关内容。但现在看来,这样大规模的举报也造成了一些误伤”。今天,有用户发现...
日期:05-08