利用实时分析技术改造工厂车间

制造商面临着巨大的压力,必须利用所有可用的智能功能,如机器视觉和 AI 驱动的视频分析等技术。这些都是实现从缺陷检测和预防到工人安全等一切事项的关键工具。但很少有制造商是 AI 领域的专家,要掌握的东西很多,要处理的事情也很多,更不用说要为未来的重大技术投资做好准备。这些新技术需要具有适应性和互操作性。

参与有关需求讨论的人员包括 Jonathan Weiss,工业 机器 视觉提供商 Eigen Innovations 的首席营收官;以及 Aji Anirudhan,人工 智能 视频分析公司 AllGoVision Technologies 的首席销售和营销官。他们讨论了实施工业 4.0 的挑战,制造商如何利用数据驱动的工厂,以及 AI 如何继续改变工厂车间(视频 1)

视频 1。来自 AllGoVision 和 Eigen Innovations 的行业专家讨论 AI 在制造业领域的变革性影响。(资料来源:insight.tech

机器视觉和 AI 如何应对工业 4.0 挑战?

Jonathan Weiss: 我们所做的只是用于质量检验的机器视觉,我们专注于工业制造。传统视觉系统非常适合检测生产足迹问题,通常情况下,它们会告诉您产品是好是坏。但如何帮助人们预防缺陷,而不仅仅是告诉他们已产生缺陷?

这正是我们软件的独特之处。我们不仅利用视觉系统、摄像头和不同类型的传感器,还直接与过程数据记录器、OPC UA 服务器连接,甚至在控制网络层面直接连接 PLC。我们提供深入了解制造零件的实际变量和指标,以及流程中出现的问题和导致缺陷的变异类型。我们的很多工作都是基于 AI 和 ML。

视频分析如何解决当前工业环境中的工人风险问题?

Aji Anirudhan: 这个行业的首要问题是如何加强自动化,如何引进更多机器。但人不会从工厂车间消失,这基本上意味着人与机器之间会有更多的互动。

联合国的一些数据表明,全球企业每年在工作场所人身伤害和财务损害方面花费 26800 亿美元。这一成本是每个制造商都非常关心的主要问题。传统上,他们所做的是关注发生事故的不同场景,并制定政策以确保不再发生此类事故。

但这并不足以降低成本。发生事故的原因可能多种多样;本来未预料到的场景仍然可能造成潜在事故。因此,必须建立一个实时机制,以确保事故从一开始就不会发生。

这意味着,如果车间员工应该佩戴安全帽而没有戴,就会被识别出来,以便一线经理可以立即处理,即使事故还没有发生。最重要的是:减少事故意味着降低保险成本,从而提高公司的盈利能力。

在工业制造领域,它是人的不同行为模式、人与机器或人与车辆之间不同互动的组合。我们认为,不同客户的工人安全要求也不尽相同:石油和天然气公司对设备、防护装备和安全计划的要求与制药公司不同。

例如,我们曾与印度一家公司合作,该公司的生产线上有液态金属,有时会发生金属溢出的情况。从人员安全和工厂安全的角度来看,这是非常危险的。公司希望对其进行持续监控,并在发生任何情况时立即报告。 

目前,制造商是否已准备好迎接数据驱动型工厂的挑战?

Jonathan Weiss: 制造商作为一个整体,普遍认同数字化和自动化的必要性。我认为进行大规模部署的正确道路上仍需大量的指导——从哪里开始;如何确保计划的效率和成功;以及如何将规模扩展到工厂以外。

我所在的领域,它正在帮助工业企业克服摄像头系统各自为政、无法与其他企业系统通信的难题。此外,还无法跨生产线、工厂甚至跨机器扩展这些 AI 模型。这正是传统摄像系统的失灵之处。在 Eigen,我们已经破解了这一难题。

但 Aji 和我破解的只是一个更大谜题中的一小块,这个谜题的一个共同点就是数据。我们为所有生产数据创建单一信息源,以此方式来推动可行的洞察或自动化。简而言之,它是放置所有数据的单一位置,包括质量数据、流程数据、安全数据、现场服务类型数据、客户数据、保修信息等。然后开始与各种企业级应用程序建立双向连接,这样 ERP 就能了解质量的着眼点,反之亦然。

拥有单一信息源,然后采用正确的策略和架构,将各种类型的软件部署到整个工业企业的单一信息源中。

制造商如何将机器视觉应用于工厂运营?

Jonathan Weiss: 首先了解要解决的问题是什么。您希望减少的最频繁发生的最高价值缺陷是什么?

在焊接领域,有些东西是人眼通常无法看到的,因此视觉系统变得非常重要。例如,复杂的装配工艺流程需要红外摄像机,由于人眼无法轻易看到零件的整个几何形状,因此无法了解某个地方是否存在缺陷,或者要找到缺陷非常困难。

找到一个能提供最大价值的用例,然后再从该用例回溯。然后是选择技术。我一直鼓励人们寻找适应性和可扩展性强的技术,因为如果一切顺利,它可能不会成为工厂范围内部署的唯一一个视觉系统。

Aji Anirudhan: 目前,大多数工厂都安装了闭路电视摄像头,以满足合规和其他需求,我们在 AllGoVision 的要求可以轻松与来自摄像头的输入/输出匹配。摄像头的位置或照明状况可能有所不同。或许非常特定的用例需要不同的摄像头,也许是热成像摄像头。但在 80% 的情况下,我们可以重新利用现有的基础设施,在视频信号的基础上进行传输。

与英特尔等合作伙伴合作有多重要?

Aji Anirudhan: 我们是首批采用英特尔开放式窗口架构的视频分析提供商之一。我们一直在使用英特尔处理器,从早期版本一直到现在的 Gen4 和 Gen5,性能实现了显著提升。英特尔在提供适合运行基于深度学习的模型的平台方面所做的工作对我们来说非常有用。

运行深度学习算法的一些新的增强功能,如集成 GPU 或新的 锐炫 GPU,我们非常开心能够利用这些设备提高运行算法的效率。英特尔是我们当前和未来战略的重要合作伙伴。

随着 AI 领域不断发展,还有哪些机遇?

Jonathan Weiss: 在 Eigen,我们进行各种类型的检查。例如,检查在纸张上涂抹特殊涂料的机器。机器的一个部件会在纸张通过时对其进行分级,你只有 8 秒的时间来收集机器上两毫米半的涂层累积情况,否则将会造成价值约 15 万美元的损失。而这种情况在一年中可能会发生很多很多次。在整个换班过程中,甚至也会发生多次。

在思考未来的情况时,我们有 8 秒钟的时间来检测累积情况并自动采取行动防止设备故障。我们现在只需一秒钟就能完成这项工作,但想想我们未来在三分之二秒或半秒内就能完成这项工作,真是令人兴奋。

因此,我认为未来的技术将变得更加强大,而我们使用技术的方式也将变得更加多样。我看到许多这类复杂工具的民主化越来越受欢迎。在 Eigen,我们从头开始构建软件,旨在让生产领域的任何经验水平的任何人都能构建视觉系统。这对我们来说非常重要,对我们的客户也非常重要。

虽然在我们的领域,我们一直对产品质量保持特别关注,但正如 Aji 刚才提到的,人不会消失。我认为这恰恰说明了人们对 AI 的一个普遍误解,即 AI 会取代人类,夺走工作岗位。我们在产品质量方面看到的情况实际上恰恰相反:通过将视觉系统和软件工具引入工厂,我们使工厂能够更快地检验零件。现在,他们能够生产更多的产品,这意味着公司能够雇佣更多的员工来生产更多的零件。

我的很多客户都表示,他们工厂中人员流动率最高的是目视检验员。这可能是一份让人不舒服的工作,连续 12 小时站在原地盯着从身边经过的零件,头都要转晕了。因此,这种需求可以维生素和止痛药来类比。对这些企业来说,它可能是一种止痛药,而不再是维生素。我们正在帮助缓解组织痛点,这并不是什么可有可无的东西。

Aji Anirudhan: 有趣的是的是所有生成式 AI,以及我们如何利用这些技术。视觉大模型基本上着眼于解释复杂的视觉或复杂的场景。例如:有一种环境,车辆可以通行,但人却不能通行。客户说:“是的,如果工人推着手推车,他也可以沿着同样的路径前进。”但如何界定一个是否有手推车?

因此,我们正在研究类似于 LVM 的新增强技术,以推出新的用例。未来几年,生成式 AI 技术将帮助我们以更好的方式解决工厂中的这些用例。但我们还有很多事情要做。因此,我们对技术感到兴奋;我们对正在进行的实施感到兴奋。我们期待着与世界各地的客户开展更大规模的业务。

相关内容

要了解 AI 驱动型制造业的详情,请收听 AI 驱动型制造业:创建数据驱动的工厂,并阅读 机器视觉解决方案:检测和预防缺陷。如需了解 AllGoVision 和 Eigen Innovations 最新创新情况,请关注他们的 Twitter/X 账号 @AllGoVision 和 @EigenInnovation,以及 LinkedIn 账号 AllGoVision 和 Eigen Innovations Inc.

 

本文编辑人员为 文字编辑 Erin Noble.

利用下一代处理器和 COM Express 对 AI 工作负载进行扩展

X 射线、超声波和内窥镜检查机会产生大量数据,有时数据太多以至于无法理解。作为响应,医疗设备 OEM 将 AI 直接集成到医疗成像和诊断机器中,使临床医生和患者都能更高效、更有效地使用筛查程序。

支持启用 AI 的医疗成像和诊断需要具有显卡和计算性能的高端硬件来实时执行智能成像工作负载。直到最近,实现这些功能的最简单方法还是通过独立加速器——就前期硬件成本和功耗而言,这种方法成本很高,但效率很低。

但迄今为止,成本最高的设计决策是错误的系统架构。AI 正在迅速发展,因此如果没有灵活、适应性强和可升级的系统硬件,设备可能在被充分破坏之前就过时了。

“AI 工作负载发展如此之快,当你开始谈论硬件时,就有点危险了,” 嵌入式解决方案的全球领导者 congatec AG 公司的基础设施细分市场经理 Zeljko Loncaric 说。“这是医疗设备设计人员面临的最重大挑战之一。他们还面临着在长生命周期系统中实现新功能的障碍。”

基于英特尔® 酷睿 超移动处理器的 COM Express 模块可应对这些挑战。由于集成了 GPU 和 NPU,它们在 AI 工作负载处理方面提供了卓越的性能和效率。其具有固有的模块化设计,可以简化初始设计过程,并且能够在处理器的不同世代之间实现轻松升级。

平衡边缘 AI 在嵌入式计算中的寿命和创新

由于医疗成像设备必须经过全面的认证流程才能使用,因此它们的生命周期平均为十年或更长时间。与此同时,AI 技术是医疗成像的一个有意义的进步,具有显著提高超声波、移动超声波、内窥镜机、X 射线等诊断效率和准确性的潜力。

但是,面对重新设计和重新认证医疗设备的时间和成本,原始设备制造商在没有极具引人注目的商业案例的情况下,对过渡到支持 AI 的下一代平台犹豫不决。如果无法回答一个系统设计将保持多久的相关性,那么这个商业案例就变得不那么引人注目了。

英特尔新推出的酷睿超移动处理器,是第一个集成 NPU 的 x86 处理器,也是当今市场上能效最高的 SoC 产品家族之一。集成的 NPU 支持高级 AI 工作负载,而不会增加独立加速器的成本和复杂性。结合 SoC 领先的每瓦特性能,医疗设备设计人员可以在资源有限的边缘 AI 部署中更好地管理功耗和热效率。

Congatec 的产品线经理 Maximilian Gerstl 指出:“在移动超声设备和其他电池供电系统中,处理器的每瓦性能也非常有趣。”“英特尔对架构所做的工作令人印象深刻。这些数字从性能来看非常出色,不仅在 CPU 方面,而且在显卡方面也是如此。新处理器还为客户提供了前所未有的灵活性,允许他们在保持相同外形的情况下跨多代升级系统。”

如果没有一项伟大的新技术出现,组织将在同一个模块上停留 10 年或更长时间,这样他们就不必重新认证,”他继续说。“英特尔酷睿超移动处理器是一个巨大的进步。医疗保健组织必须考虑更改它。”

开放式标准模块加快通道系统升级

最新的 congatec conga-TC700 COM Express 紧凑型模块将英特尔酷睿超移动处理器的处理性能和应用就绪的 AI 功能集成在即插即用的外形中。医疗设备设计人员可以利用该模块作为构建高效的边缘 AI 系统的捷径,同时显著缩短上市时间并降低总拥有成本 (TCO)。由于 COM Express 是由全球技术联盟 PICMG 管理的开放式硬件标准,TC700 提供了与供应商无关的系统升级路径,通过该路径,可以简单地将遗留模块替换为具有相同接口的性能更高的模块。

“快速交换硬件的能力意味着组织可以让其应用程序运行很长时间,” Gerstl 解释道。“尽管他们必须重新认证新的硬件组件,但他们可以从以前的应用程序中引入许多软件和硬件设计。”

由边缘 AI 解决方案提供支持的智能医疗保健

Conga-TC700 由 congatec 专注于 OEM 解决方案的生态系统提供支持,该生态系统具有高效的主动和被动热管理解决方案、长期支持和随时可用的评估载板。该公司还在探索开源英特尔® OpenVINO 工具套件如何为其客户开发和部署 AI 视觉系统提供支持。据 Gerstl 称,该公司正在利用特定用例进行早期基准测试,以帮助客户更快地启动和运行应用程序。

对于 congatec 来说,英特尔酷睿超移动处理器的可用性代表着下一代边缘 AI 设备在价格、性能和功耗方面取得了相当大的进步。对于医疗设备 OEM 而言,这些处理器提供了通往支持 AI 的新成像和诊断设备的引人注目的路径。

“我们将继续启用 AI 加速、硬件和软件,并将其引入我们的产品,” Gerstl 说。“我们希望实现这一新趋势。”

 

本文由 insight.tech 的编辑主管 Georganne Benesch 编辑。

利用实时视频将 AI 用于加强工作场所安全

工作场所安全是各行各业都面临的现实问题。近期发布的一份报告指出,每年有高达 3.74 亿人遭受工伤事故。这是一个可怕的数字,但幸运的是,企业可以采取行动降低风险。

例如,许多企业已经在基础设施中安装闭路电视摄像头 (CCTV) 系统用于日常安全和资产管理。这些设备还可用于识别潜在危险等其他用途,以减少工伤事故。

这种视频分析技术应用的前提是,偶然一两次发生可能构成小事故,但频繁的重复则可能预示着更广泛、令人担忧的模式。就员工健康和安全而言,这些负面模式可能代价高昂,但可以通过研究视频监控录像并采取相应措施加以预防。

资产密集型行业的安全分析

视频分析软件解决方案提供商 AllGoVision 最初涉足闭路电视领域时,重点关注的是安全和资产管理,但很快意识到该技术超越安全领域的潜力。据 AllGoVision 首席销售和营销官 Aji Anirudhan指出,该产品在各行各业中保护员工健康的作用越来越明显。

制造业、能源和公用事业等资产密集型行业尤其能从视频分析中获益,从而改善员工的工作条件。在这些行业中,工人安全可能会在两个基本方面受到影响:第一,当现场情况发生急剧变化时。当高温金属处理不当或暴露于石油或天然气泄漏产生的有毒烟雾时,会发生烧伤等事故。此外,工人也可能因不严格遵守安全规程危及自身健康。例如,在高风险工作条件下不穿戴适当的个人防护装备 (PPE) 会增加受伤的风险。

Anirudhan 解释道,传统的工人安全方法相当被动。员工健康安全团队对各种可能发生的有害情况进行风险评估,并相应制定培训方案。“每当发生事故,他们都会进行调查并努力更新政策,以尽量减少事故的发生,”他指出。虽然全公司范围的政策可减少工伤事故的数量,但问题依然严重。Anirudhan 补充道,这就是为何“任何能够深入了解不安全行为模式的解决方案都有助于防止事故的发生”。

AllGoVision 致力于成为这样的解决方案。特别是石油和天然气领域的能源和公用事业公司,因违规造成的安全问题比比皆是。Anirudhan 认为,无论是油田钻井设备,还是燃料的运输和存储,每一步出错的可能性都很大。

AI 工作场所安全机制

为了不影响工人的安全, AllGoVision 利用 AI 实时分析现场情况。闭路电视系统可直播视频数据,AI 安全分析软件可对其进行评估。该系统能够实时发现违规行为或问题区域,并提醒一线管理人员主动应对这些挑战。它提供的仪表盘可帮助了解安全规程遵守现状,并根据改进计划监控进展情况。Anirudhan 说,员工们也希望成为解决方案的一部分,这种分析可在没有采用“老大哥”监视方式的情况下讨论工作场所数据。

AllGoVision 特别重视数据隐私协议,仅保留元数据,而不保存单个工人的录像。该公司还致力于确保其模型无偏见,并聘请顾问确保遵守国际数据隐私法规。

经验丰富的安全分析提供商

AllGoVision 尤为突出的一点是,该公司利用其在视频分析方面的丰富经验来评估特定客户情况,并推荐能够实现预期结果的全面解决方案。该软件的即插即用格式意味着它可以与现有基础设施集成,添加数据层来获取信息。该公司与系统集成商合作,将解决方案集成到他们可能向客户提供的更大的视频管理包中。

在多个行业中执行工作场所安全规程的经历至关重要。“由于 AI 的民主化,几乎任何人都可以访问开源算法并创建视频分析。但将其推广到摄像头不同、照明度不同、期望值也不同的生产环境中,这是最具挑战性的部分,” Anirudhan 指出。“这正是我们的优势所在,我们能够解决不同垂直行业的安全和员工工作效率问题,尤其是在石油天然气、公用事业和制造业。”

Anirudhan 说,多年来,多年来,AllGoVision 随着英特尔® 平台的更新换代而不断发展。该公司也是 OpenVINO 的早期采用者之一,并使用英特尔® 至强® 处理器。“运行算法的成本已经显著下降,可为我们的客户节省成本。我们认为这是与英特尔合作带来的巨大优势,” Anirudhan 指出。

AI 工作场所安全的演变

Anirudhan 非常开心 AllGoVision AI 拥有工作场所安全的众多用例,包括建筑物和基础设施火灾烟雾检测或人群控管。AI 在工作场所安全领域的应用仍处于初级阶段,这为 AI 驱动的解决方案提供了巨大的机会,从而产生重大影响。

以政策为导向并不断重复实施的时代已经一去不复返。Anirudhan指出:“客户已发现转向实时主动方法的明显价值。”预计未来会监控更多参数,包括工人的疲劳程度。他补充道:“工作场所将增加更多可穿戴设备、传感器和物联网设备,它们都将添加到机器和人员管理的不同用例中。”

此外,Anirudhan 认为生成式人工智能在解决更复杂的用例,尤其是涉及人机交互的用例方面具有巨大潜力。

AllGoVision 正在努力解决令人担忧的工作场所安全统计问题。Anirudhan 说:“如果 AI 能够真正解决其中一些挑战,我们就能产生巨大的社会影响。”

 

本文由 insight.tech 的编务总监 Christina Cardoza 编辑。

利用基于音频的生成式 AI,协调创新

人工智能是许多不同技术的总称。生成式 AI 是我们经常听到的一个话题,尤其是 ChatGPT。ChatGPT 得到了广泛报道,但绝不是生成式 AI 行列中唯一一员。英特尔的 AI 软件架构师兼生成式 AI 推广者 Ria Cheruvu 最近一直感兴趣的一个问题是音频领域生成式 AI(视频 1)

视频 1。英特尔生成式 AI 传播者 Ria Cheruvu 探索基于音频的生成式 AI 的商业和发展机遇。(来源:insight.tech

但无论何种类型的生成式 AI 都令人震惊,开发人员并非始终确切知道从哪里开始,或者开始之后,如何优化模型。与英特尔合作,可以真正简化流程。例如,初学者开发人员可以使用英特尔® OpenVINO 笔记本电脑,利用教程和代码示例,帮助他们开始使用 GenAI 。然后,当他们准备好提升到一个新水平或准备扩展时,英特尔将随时帮助他们。

Ria Cheruvu 与我们讨论 OpenVINO 笔记本电脑存储库,以及生成式 AI 用于音频的现实应用,以及适用于呼叫中心的方面与适用于音乐家方面之间的差异。

生成式 AI 的不同领域有哪些?

就生成式人工智能的类型而言,这一领域无疑正在不断发展。ChatGPT 并非唯一!当然,文本生成是一种非常重要的生成式 AI,但也有图像生成,例如,使用 Stable Diffusion 等模型来生成艺术、原型以及不同类型的图像。还有音频领域,您可以开始制作音乐,或者制作合成化身的音频,以及许多其他类型的用例。

在音频领域,快速运行时尤为重要,这是常见的痛点之一。您希望模型超级强大,能够快速生成高质量输出的结果,那就需要大量计算。因此,我想说,优化生成式 AI 模型的技术堆栈绝对至关重要,这也是我在英特尔日常工作中研究的东西。

音频生成式 AI 的具体商机是什么?

使用语音人工智能或对话式人工智能来读取和处理音频,这确实非常有趣,这就是您使用语音代理(例如手机上的语音助手)所做的事情。将其与音频生成式 AI 比较,您实际上是在创建内容,例如,能够生成合成化身或声音,以便打电话和交谈。首先想到的商业应用肯定是呼叫中心,或者是具有使用这种所创建音频的模拟环境的元宇宙应用。

但创意领域、内容创作领域也有一些非传统商业用例,我们开始看到一些应用与音乐生成式 AI 相关。对我来说,这非常令人兴奋。英特尔开始研究生成式 AI 如何补充艺术家的工作流程:例如,创建作品,使用生成式 AI 来采样节奏。音乐家和音乐制作人如何利用生成式人工智能,将其纳入内容创作工作流程之中,这也有一个非常有趣的文化元素。

虽然它不是一个传统的商业用例,比如呼叫中心或使用音频进行零售的交互式自助服务终端,但我认为,音乐生成式 AI 在内容创作方面有着巨大的应用。最终,它还可以进入需要生成声音的其他类型领域,例如,创建用于 AI 系统训练的合成数据。

音频生成式 AI 的开发流程是什么?

生成式 AI 领域目前正在采用几种不同的方式。其中一种肯定是改造已有的模型架构,以用于其他类型的生成式 AI 模型。例如,Riffusion 基于图像生成模型 Stable Diffusion 的架构;它只是生成波形,而不是图像。

我最近与从事音乐领域研究的人交谈,我们讨论的一件事是,您可以为这些音频领域模型提供的输入数据多种多样。可以是音符,也许是钢琴作曲的一部分,一直到波形或特定类型的输入,专门用于 MIDI 格式等的用例。有多种多样的数据。

训练和部署这些模型需要哪些技术?

我们一直在调查许多有趣的生成式 AI 工作负载,这些工作负载是英特尔 OpenVINO 工具套件和 OpenVINO Notebook 存储库的一部分。我们将许多音频生成的关键示例当作非常有用的用例,用于提示和测试生成式 AI 功能。我们曾经与英特尔的其他团队合作,使用 Riffusion 模型,创作 Taylor Swift 类型的流行节奏,一直到更高级的模型,生成与某人说话的内容相匹配的音频。

我看到 OpenVINO 的一件事是,能够优化所有这些模型,特别是在内存和模型大小方面,而且能够在边缘、云和客户端之间实现灵活性。

OpenVINO 实际上针对该优化部分。有一个基本概念,即生成式 AI 模型的大小和内存占用面积很大;而所有这些模型的基础,无论是音频、图像还是文本生成,其中某些元素非常大。我们使用压缩和量化相关技术,将模型占用面积减半,不仅能够大幅减少模型尺寸,而且确保性能相差无几。

所有这些都源于一个非常有趣的本地开发概念。音乐创作者或音频创作者希望在创作内容时使用电脑,在从事密集型工作时,在云端工作,例如收集音频数据、录音、注释,以及与不同专家合作创建数据集。然后他们可以在电脑上执行其他工作负载,然后说:“好吧,现在让我在系统上本地生成一些有趣的流行节奏,然后在房间里制作原型。”

开发人员开始使用生成式 AI 有哪些示例?

我真正喜欢讨论的一个例子是,您如何正确地使用我们在笔记本存储库中展示的 OpenVINO 教程和工作负载,然后投入实际运用。在英特尔,我们与 Audacity 合作,后者是一个基本上实现开源音频相关编辑创作的工具。它是一种用于音频编辑的一站式 Photoshop 类型的工具。我们所做的一件事是通过我们提供的插件,将 OpenVINO 与其集成在一起。我们的工程团队从 Python 获取 OpenVINO Notebook 存储库中的代码,将其转换为 C++,然后将其部署到 Audacity 之中。

这样就能实现我之前提到的性能和内存改进,但它也直接集成到相同的工作流程中,许多编辑和操作音频的人也在利用此工作流程。您只需挑选一段声音,然后说 “生成”,OpenVINO 就会生成其余部分。

这是一个工作流程集成的例子,可用于艺术家工作流程;用于电影行业为语音制作生成合成音频;或用于零售行业中的交互式自助服务终端;或用于医疗保健领域的患者与医疗人员对话。工作流程的无缝集成是英特尔非常期待推动和帮助协作的下一步。

生成式 AI 还有哪些,特别是音频生成式 AI?

说到音频生成式人工智能,我认为在这个领域的任何一个特定时刻都是 “眨眼即失”。看到添加了如此众多工作负载,真是太神奇了。但是,展望不久的将来,也许是今年年底或明年,我能看到的一些发展肯定是围绕我之前提到的那些工作流程,以及确定您到底想在哪里运行,是在本地系统上,还是在云上,还是在两者的混合体上?这绝对是我真正感兴趣的事情。

我们正在尝试采用英特尔® 酷睿 Ultra 和类似类型的平台,在 AI 电脑上生成音频,当您坐在房间里与一群音乐家一起制作原型并玩音乐时,理想情况下,您不必访问云端。相反,您可以在本地这样做,将其导出到云端,然后在本地和云端之间往返移动您的工作负载。关键在于,我们如何将利益相关者纳入该流程,即我们如何准确创建生成式 AI 解决方案,将其实例化,然后随时维护?

最后,您能给我们留下一点关于生成式人工智能的启示吗?

现在,生成式人工智能这个领域光鲜亮丽,但几乎人人都能看到当中的价值,而前提是有一个面向未来的战略。英特尔对这个行业的价值主张,是能够携手开发人员,向他们展示他们能够利用这项技术做什么,以及在他们实现目标的每一步上给予帮助。

用于音频的生成式 AI (通用生成式 AI)的发展如此之快。因此,请密切关注工作负载、评估、测试和原型设计;在我们迈进音频生成、合成生成等众多领域的新时代之际,这些都绝对是关键。

相关内容

要详细了解生成式 AI ,请阅读生成式 AI 解决方案:从炒作到现实,并收听生成式 AI 在音频创作中构成新机遇。有关英特尔的最新创新,请在 X @IntelAILinkedIn 上关注他们。

 

本文由文案编辑 Erin Noble 编辑

实时数据分析推动更高效的运营

管理资产并不容易。例如,当您监督车队时,您需要环境方面准确而详细的信息。车辆加油时,单纯测量车辆中冷却剂的最高温度和最低温度,很难知道哪些方面会发生故障,何时发生故障。发动机灯的警告也过于笼统,可能意味着严重的事情,比如散热器要出毛病了,也可能表明一些无伤大雅的事情。

实时数据分析案例

资产密集型行业面临一系列数据相关问题。资产管理者往往根据不相关或过时的信息采取行动。即使在企业内部,一线员工需要查看并采取行动的数据也不一定与工厂经理开展工作所需的数据相同。而且,可能已经存在通知问题的机制,例如短信提醒,但误报使员工感到自满。过多的错误的和不相关信息可能会导致数据疲劳。最后,即使数据已掌握,您可能也没有足够的数据来做出明智的决策。

传感器数据管理解决方案提供商 SmartConnect 物联网总裁 Sahid Sesay 说,这些数据问题在各行各业都很普遍。这就是为什么资产管理人员和其他一线人员需要实时掌握更多相关数据,以便他们能够积极主动而不是被动地做出准确的数据驱动决策。

该公司的无代码 SC-IoTOS 传感器边缘网关软件(物联网传感器数据捕获转换聚合器)可将任何基于英特尔® 处理器的硬件连接到边缘的几乎任何类型的设备、传感器或摄像头。它可以安全地收集、存储、规范化、流式传输从任何地方捕获的数据和将捕获的数据流式传输到任何地方,并使其可用于分析和进一步处理。此类解决方案可在正确的时间向正确的人员提供正确的数据。

“当您增加高质量的流式数据的数量时,它会使整个组织的决策和信息触手可及,” Sesay 说。在数字化和工业转型时代,这种获得有意义和可操作的见解的途径正是组织所需要的。

易于操作的数据管理有助于系统集成商

在现有技术堆栈和基础设施中集成数据源是公司在获得洞察力之前必须跨越的另一个重大障碍。SmartConnect 解决方案利用传统智能和资产管理系统,根据所需指标添加传感器。通过将来自传统和新传感器的数据集成到一个无代码信息层中,物联网解决方案消除了许多公司难以获得洞察力的障碍。

将 SmartConnect 物联网解决方案分层到现有数据收集机制上并不涉及定制工作,这降低了其价格,并使产品受到系统集成商的欢迎。“系统集成商可以更快地响应提案请求,并消除运营中的风险。当他们想要发展时,他们可以在没有额外开销的情况下发展。解决方案本质上是可扩展的。从 PoC 或试点到生产,一步完成是很正常的。此外,它们还可以根据需要在地理位置和逻辑上进行扩展或调整,” Sesay 说。

数据集成使用案例

使用 SmartConnect 解决方案帮助一家总部位于北卡罗来纳州的食品加工公司发现工作流程中的问题,并更好地管理其运营。

传感器监测各种用于制冷单元和传送带资产管理的参数,从振动到温度、压力以及电动机的运行状况。由于采用多供应商传感器来监控设备和生产过程,因此没有统一的流式数据来反映资产的实际健康状况。

为了解决这个数据缺口问题,该公司在工厂车间部署了采用英特尔技术的边缘计算服务器,该服务器运行 SmartConnect SC-IoTOS 软件,在云端集成和处理本地数据,以提供实时数据分析。这种部署使所有相关利益相关者能够以一种可持续的方式访问维持运营所需的信息。

在加工厂开始使用 SC-IoTOS 服务器来确保稳定的数据流之前,资产健康数据每隔几周才会流入,这使得关键和不同资产的性能评估存在很大差距。即使是看似轻微的错误,例如忘记关冰箱门,也会导致违反卫生法规和代价高昂的后果。但现在可以根据具体情况进行实时数据分析,将警报发送给合适的人员,提高工作效率和绩效,帮助公司主动管理资产,减少停机时间,并使资产的价值更大。

面向资产管理的流式数据的未来

SmartConnect 背后的基本论点是,实时提供更多相关的数据分析,并在需要时发送基于短信的警报,而这并不局限于几个用例。由于时间是至关重要的,因此响应和维护服务可以重新设计到更高的效率水平。

实现的可能性是无限的。水泥、钢铁、采矿、纸浆和造纸制造业等资产密集型行业以及制药业都可以从集成的实时流式数据中受益,从而延长机器的使用时间。

操作区域可能包括填充线、货物包装、评估机器状态和出现故障的可能性。

同样重要的是,从难以掌握的可编程逻辑控制器,到更简单的无代码软件,以及基于微处理器的网关,使各地的制造商更容易使用自动化。“我们为全球的最终用户带来自动化功能,” Sesay 说。

通过无代码和低成本软件公平地实现自动化,将颠覆世界生产商品的方式和地点。数据驱动的操作意味着流程会尽可能高效。随着数据洞察力的民主化,大大小小的公司将不再需要盲目行事。

 

由 insight.tech 主编 Georganne Benesch 编辑。

一体机医疗 AI 电脑能够满足医疗保健计算的需求

在医疗保健行业,有一些制造医疗设备的公司和使用这些机器和设备的供应商。虽然这两个群体的商业模式完全不同,但它们面临着同样的挑战和机遇。两家公司都渴望部署最新技术,但都面临着严格的监管要求和较短的产品生命周期。

传统的医疗设备是用本地驻留在设备上的数据设计的。随着医疗保健设施对互操作性的需求日益增长,医疗保健专业人员可以通过支持 AI 的医疗电脑解决方案有效地提高效率,这些解决方案旨在维持关键任务环境,并在整个治疗过程中处理患者数据。

管理所有这些限制是一项艰巨的任务,但今天的医疗计算机可以胜任这项任务。卫生、小巧、便携的医疗级人工智能计算机可以被医院和诊所的从业人员使用。高性能处理器实现了近乎实时的 AI 分析,帮助医生和护士做出更快、更明智的诊断和治疗决策。

跟上物联网医疗设备中的 AI 创新

边缘 AI 和计算机视觉对于当今的成像和患者监控机器变得越来越重要,它们可以快速分析数据并为医生提供诊断支持。但对于医疗设备开发来说,整合这些尖端功能可能是一项艰巨的任务。根据法规,医疗设备开发平均需要 8 到 24 个月的时间来实现硬件和软件设计的变更,还需要两到三年的时间才能通过临床试验获得认证。

“他们无法不断升级到最新技术,”总部位于台湾的医疗电脑和医院 IT 解决方案全球生产商 Onyx Healthcare, Inc. 的总裁 John Chuang 表示。

一旦这些完成的医疗设备发布,它们就需要长时间被使用。医院拥有各种复杂的技术,通常需要 10 年或更长时间才能升级设备,在快速发展的医疗 AI 和计算机视觉开发的世界里,这是永恒的。

为了使机器尽可能保持最新,Onyx 与医疗设备公司、医院和英特尔合作,英特尔为该公司为医院和诊所生产的一体机 (AIO) 医疗计算机提供处理器。英特尔高性能处理能力是使软件能够运行边缘人工智能分析的关键。

Onyx 与英特尔密切合作,可以提供可扩展的定制设计,使医疗设备公司能够将最新的处理器融入到其医疗级计算技术中。“通过向医疗原始设备制造商和原始设计制造商提供最新技术,我们帮助他们保持领先地位,这样他们就不必担心他们的技术在他们推出设备时已经过时,” Chuang 说。

在需要的地方提供机器信息

在医院中,医疗设备是需要精确的定时和协调的复杂交响乐的一部分。医生依赖许多来源的信息来诊断和治疗患者,包括病历和实验室结果、血压和氧气监测仪,以及来自X-射线、CT 和超声扫描仪的图像。但由于这些机器由不同的制造商制造,使用不同的软件协议,它们通常不会相互连接,也不会与医院的 IT 系统连接。因此,医生通常必须检查脱节患者的数据。

像 Onyx 一体机医疗 AI 计算机这样的系统充当交响乐指挥家,整合来自所有来源的数据,包括病历和异地机器。它实现了高分辨率图像的传输和 AI 分析的性能,使医生能够全面、近乎实时地了解病人病情。

“传输的数据足以让医生做出合理、及时的治疗决策。这对于处于重症监护的患者,以及医生需要确定是否需要手术的情况尤其重要,” Chuang 说。

ONYX 一体机 AI 计算机也是为了满足医院严格的卫生要求而设计的。例如,它没有使用风扇来冷却,而是使用板载散热器,这样就形成了一个封闭的系统,不会将携带细菌的空气转移到医院走廊或病房中。“由于低功耗英特尔处理器技术的效率,我们能够使用无风扇设计,” Chuang 说。

医疗物联网的实际应用:移动护理和远程医疗解决方案

通过医疗计算机连接患者信息可以帮助医院和诊所实现更强的互操作性。这是 CAIH 的一个重要目标,CAIH 是法国政府成立的一个联盟,旨在整合全国医院网络的技术需求。Onyx 开发了两个解决方案来帮助该组织实现其目标。

第一个解决方案是移动护理站,装有一体机 AI 计算机的手推车,护士可以带着它去查房。医疗计算机使他们能够在他们从房间到房间的时候关注每一位患者。除了让护士了解病人的生命体征外,AIO 还帮助监控设备,例如,让护士知道 IV 是否不足。

Chuang 说,AI 监控有助于人员短缺的医院更好地满足患者的需求。它还帮助他们应对快速增长的远程医疗用途。在它为 CAIH 开发的第二个解决方案中,Onyx 使一体机计算机能够将医生与患者、护理人员和远程设施中的医疗设备连接起来,包括可能没有医生在场的专业护理所。

医生可以从自己的一体机计算机上查看患者,并指导护士使用医疗仪器,例如便携式超声仪或检查耳、鼻、喉或皮肤的器械。这些设备配备了高清摄像头,可以将医疗级图像传输给医生。

“有了这些信息,医生就可以做一些诊断,并快速确定患者是否需要立即去医院,” Chuang 说。否则,许多人将别无选择,只能被送到那里,对于那些在专业护理机构的人来说,这往往是一个挑战。

Onyx 一体机计算机还支持 5G 通信,允许拥有 5G 网络的远程设施将患者重要数据或滑倒事故的警报直接传递给医生或护士,而不是等待信息在云端处理。

构建面向未来的技术

随着 AI 功能的不断扩展,医疗计算机在患者护理中扮演着更重要的角色。但为了保持有用,它们必须随着与之连接的机器一起发展,Chuang 说。

“医疗计算机本身需要变得更像医疗设备。我们看到它们与专业机器交互的需求越来越大,对数据处理速度的要求也在提高。通过在我们的计算机中应用最新的英特尔技术,我们能够满足这些需求,” Chuang 补充道。

 

本文由 insight.tech 的编辑主管 Georganne Benesch 编辑。

AI 和计算机视觉推动生物医学研究

生物医学研究的突破往往来自于对相关性和因果关系(即人体生理过程的原理和方式)的理解。

科学家通过关联数据集,得出癌症发病率升高或对疫苗反应更好等结论。他们随后会研究这些相关性的根本原因。有条不紊地完成这些生物医学研究周期是一项乏味但有意义的工作。

现在,AI 驱动的计算机视觉已应用于医学成像,加速了数据相关性的发现。它能够更快地发现值得探索的问题点。这样,AI 就能帮助人类更快地锁定问题所在。并且这可以帮助人类科学家更快地找到改变生活的医疗解决方案。

医学成像中的 AI 模型

一个使用案例是梅奥诊所使用 AI 和机器学习显著增强超声成像的能力。首先,该医疗机构使用英特尔和戴尔的最新技术、工具和产品(在戴尔边缘系统上运行的英特尔® Geti 平台和英特尔® OpenVINO 工具套件),在内窥镜检查视频中查找肾结石,并评估护理点 (POC) 超声图像以判断心脏功能。

戴尔科技(一家提供广泛产品组合和全面服务的解决方案提供商)生命科学战略全球负责人 Alex Long 表示,梅奥诊所在 AI 超声成像应用方面的工作是这项技术的一个特别有用的案例。长期以来,对超声波的解读一直是主观的,容易出错,并且需要专门的培训。

但经过大量数据训练的视觉 AI 模型可以帮助护理人员提供更加个性化的病床护理。利用 AI 增强护理,可以更快、更准确地发现异常,而且只需少量培训。利用预训练模型和主动学习的现代方法使快速开发和部署这些模型成为可能。“我们的护理人员知道使用 AI 帮助患者护理的好处,但在 POC 超声这样的案例中,过去没有可行的 AI 模型”,梅奥诊所的 David Holmes 博士表示。他的工程师团队利用交互式 AI 建模工具快速开发了一个可在床边评估图像质量的 AI 解决方案,以确保在患者护理中使用最佳图像。

AI 在医学成像中的应用不仅仅是其作为诊断工具的能力。“这利用了视觉 AI 来解读成像数据,并准确增强了人类的能力”,Long 表示。经过培训的诊断人员通过筛选文件来发现问题(评估乳房 X 光照片以发现乳腺癌的早期迹象就是一个很好的例子),他们也可以受益于 AI,让 AI 引导他们对更多区域进行评估。AI 的优势在于,它会发现人眼由于确认偏差而可能遗漏的模式。

生物医学研究中的各种其他场景都可以从 AI 中受益,特别是涉及成像数据时。“事实证明,许多其他医疗系统本质上也是依靠视觉的”,Long 表示。这些系统都可以从使用 AI 作为增强人类能力的工具中受益。

合作推动创新

英特尔和戴尔科技的合作推动了这些 AI 驱动的突破。“社区的定义是一群志同道合、共同努力实现一个目标的人”,Long 说。“我们正看到一个医疗保健生命科学社区在戴尔和英特尔之间诞生。”

多年来,两家公司之间的合作一直有机健康地发展,Holmes 博士的工作就是两家公司如何发挥各自优势的一个例子。两家公司的医疗保健解决方案团队以及他们的技术和产品平台促进了与领先的生物医学研究人员和提供商的合作。

“我们产品组合的深度、合作伙伴关系的深度以及交付所需的 IT 和基础设施方面的专业知识”是戴尔做出的贡献,Long 表示。此外,戴尔牢记,医疗保健行业非常重视隐私和对患者敏感健康信息的保护。“这不仅仅是采用技术来降低成本”,Long 表示,“也事关利用技术推动人类改善健康的举措。我们对真正推动人类关怀充满热情。”

AI 在医疗领域的未来

梅奥诊所使用案例展示了 AI 模型在生物医学研究中的潜力。我们刚刚开始探索 AI 在视觉成像数据中发现相关性的方法,引导人类找到进一步探索的新途径。

研究人员几乎总是试图找到相关数据来得出结论,而且“如果想找到什么东西来确定相关性,没有什么比 AI 更好的了”,Long 表示。“我对 AI 在加速诊断、改善患者护理以及快速理解下一波启发式方法和治疗等方面的潜力感到非常兴奋。”

说到人体,还有很多方面有待发现。现在正是技术和医学交汇的激动人心的时刻,因为 AI 可以促成的发现数量令人难以想象。AI 可以利用多年的数据来训练其“视觉”。结果很可能是革命性的。

 

由 insight.tech 主编 Georganne Benesch 编辑。

新一代的产品为机器制造商建立优势

边缘 AI 和计算机视觉技术几乎在每个行业都发现了新用例。在工厂中,像自动光学检测 (AOI) 和工业机器人这样的应用提高了运营效率。在医疗保健领域,这些技术增强了医学成像和诊​​断能力。新技术让我们的城市能够实现更智能的交通管理,并增强我们办公室和公共场所的安全性。

AI 在许多不同领域的采用也改变了商业领袖对未来的预期。AI 技术虽然前途光明,但不再遥不可及。AI 已经开始为所有类型的组织带来积极的成果。“AI 在现实世界中的普及正在发生,” 边缘 AI 平台和 AIoT 解决方案提供商 Advantech产品经理 Christine Liu 说道。“如今的决策者将 AI 视为保持竞争力的‘必备条件’。”

对于 AI 解决方案的开发者来说,这是一个巨大的机遇,但他们也面临着需要克服的挑战,例如采用 AI 计算解决方案、集成软件 SDK、AI 模型训练等。

好消息是,嵌入式硬件合作伙伴关系可通过 Advantech 的 GPU 卡 EAI-3101(采用英特尔® 锐炫 A380 GPU 设计)等产品实现强大、可开发的 AI 计算。GPU 主要提供视觉图像优化,是目前用于增强 AI 计算能力的主流 AI 加速器之一。 

最新嵌入式 GPU 卡支持多种 AI 用例

EAI 系列产品线提供了全面的 AI 加速和图形解决方案,包括多款采用英特尔锐炫显卡的 PCIe 和 MXM GPU 卡。伴随着即将面世的英特尔锐炫 A380E,Advantech 推出了 EAI-3101,这是一款由英特尔锐炫 A380E 提供支持的新型嵌入式 PCIe GPU 卡,使用寿命为五年。该 GPU 卡搭载 128 个英特尔 Xe 矩阵 AI 引擎,提供 5.018 TFLOPS 的 AI 算力。凭借优化的散热解决方案和自动智能风扇,这些 GPU 卡可以满足不同的用例,包括游戏、医疗分析等。事实证明,这些设计在 AI 推理能力和图形计算方面优于竞争对手。

选择的多样性意味着 OEM、ODM 和机器制造商更有可能找到适合其需求的计算平台,无论预期的用例是什么。例如,工业领域的机器制造商很可能会选择一种常用的 PCIe 配置卡,而 MXM 卡较小的外形尺寸以及抗冲击和振动能力可能会吸引医疗设备制造商。

“英特尔® Dynamic Power Share 锐炫 GPU 和英特尔 CPU 可以在处理引擎之间自动动态(重新)分配功率,以根据使用案例提升性能,为各种边缘工作负载提供稳定、高性能的计算,” Liu 说到。“英特尔® OpenVINO 工具套件可帮助我们加快 AI 推理时间、减少人工智能模型占用空间并优化硬件使用。”

Advantech 与英特尔的开发合作伙伴关系使该公司能够更快地将最新的英特尔产品推向市场,因为它可以尽早获得英特尔最新一代的处理器。即使 Advantech 客户已经全面部署了其他解决方案,这也能让他们受益。例如,智能交通管理解决方案制造商 ISSD Electronics 在土耳其部署了智能交通管理系统,最近又升级了该解决方案以集成 Advantech 的 EAI-3100 系列。最终,该公司提高了系统的准确性,减少了人工智能推理延迟,并将建设成本降低了 33%,Liu 补充说到。

Advantech 还宣布推出 AIR 系列边缘人工智能推理设备的新型号:

  • AIR-150:基于第 13 代 英特尔® 酷睿 处理器的紧凑型无风扇边缘 AI 推理系统
  • AIR-310:配备 MXM-GPU 卡的边缘 AI 盒,由第 14 代英特尔® 酷睿 处理器提供支持
  • AIR-510:基于第 14 代英特尔® 酷睿 处理器和 RTX 6000 Ada 的边缘 AI 工作站

这些边缘 AI 平台采用最新的英特尔平台,适合多种不同的场景。企业可能会为办公室选择相对轻便的 AIR-150。为了实现工厂 AMR 自动化管理,AIR-310 提供了所需的工业协议和可扩展的 GPU 计算能力。如要构建可能具有更高图形计算要求的计算机视觉辅助医学成像解决方案,则应该选择更强大的 AIR-510。

为 AI 应用开发创造公平的竞争环境

除了硬件产品外,Advantech 还提供跨平台边缘人工智能软件开发套件 (SDK)。SDK 可提供基准测试工具,用于在解决方案开发过程的早期评估 AI 应用程序的硬件要求。这有助于开发人员为其解决方案选择最佳硬件,并防止他们在过多的计算能力上花费过多。此外,该 SDK 还支持部署后的实时监控和无线 (OTA) AI 模型更新。

作为 SDK 的一部分,OpenVINO 提供模型优化和硬件加速优势。该开源推理工具包还支持 PyTorch、TensorFlow 和 PaddlePaddle 等多种 AI 模型框架,帮助 AI 开发人员简化模型部署和软件开发工作流程。

方便使用的开源工具包和 SDK,结合成熟的边缘 AI 产品生态系统,将帮助更多机器制造商、OEM 和 ODM 借助稳定、开发就绪的 AI 计算环境更高效地进行市场竞争。它们有助于缩短整体解决方案的开发时间,并使设计人员能够更快地将创新产品推向市场。

Advantech 还提供 Edge AI SDK(AI 工具包),为上述所有 EAI 和 AIR 系列产品构建从评估、SDK 采用到部署的友好环境

那么,在未来几年中,预计 AI 应用开发将会有一个更加公平的竞争环境 — 这被一些人称为“人工智能的民主化”。

在 Liu 看来,这是我们日益 AI 化的世界的正确前进道路。“AI 的力量不应仅为少数公司所用。我们的边缘计算平台、SDK 和 OpenVINO 等资源可供每个人使用,”她说。“AI 未来将无处不在—这就是为什么我们需要这些开放且强大的解决方案。”

 

本文由 insight.tech 的编辑主管 Georganne Benesch 编辑。

机器视觉软件优化精炼厂运营

炼油行业知道,当利润率非常低时,企业运营的各个方面即使效率最低,也会迅速增加。该行业面临一系列挑战,从劳动力短缺到基础设施过时。企业还竞相满足严格的全球可持续发展标准。为了解决这些问题,行业依靠自动化和其他先进技术,可以在日常运营中的几乎方方面面提高粒度效率。

在此背景下,南非的 Impala 铂金基础金属精炼厂利用计算机视觉和边缘 AI 技术,确保高效运营。NTT 的子公司 Britehouse Mobility的一个工艺优化项目展示了机器视觉软件如何帮助改善硫酸铵(一种具有多种商业用途的无机盐)的复杂生产工艺。

硫酸铵生产的难题

硫酸铵是精炼厂生产的副产品,用作农业肥料和钒的制造原料。该工厂生产的产品必须符合农林渔部规定的特定标准。影响工厂生产硫酸铵的一个关键标准是镍含量,不得超过百万分之 200 (ppm)。但镍颗粒会附着在较小的硫酸铵晶体上。一种有效防止镍传播到成品的方法是使用振动筛来筛选产品。

振动筛会造成大量灰尘,特别是存在非常细微的颗粒时。因此,振动筛完全封闭,很难看到筛板何时受到遮蔽,而且通常只能在离线时打开筛子来检测。受到遮蔽的筛板会使含镍的细颗粒传播到成品,如果发现过晚,将会影响硫酸铵的质量。

定期打开筛子非常耗时。因此,在线监控系统可以帮助生产团队在筛子上出现附着或遮蔽现象时迅速做出反应。另一个优势是,由于振动筛是整个流程的最后一步,所以摄像头可以轻松检测上游过程的其他问题。

机器视觉和 3D 摄像头实操

Britehouse Mobility 解决方案展示了对体积式摄像头的使用,可以防止振动网筛的附着和遮蔽问题,以免造成成品产出质量下降。机器视觉算法配合摄像头,研究输出,识别筛子何时受堵。

只要用过智能手机拍照的人都知道,当存在大量摇晃的情况时,很难拍出清晰的照片。开发解决方案的挑战是找到可以在这种条件下工作的摄像头。

“它不仅是一个摄像头……它必须足够强大,可以承受这种环境中存在的暴力。” Britehouse Mobility 高级解决方案架构师 Donovan Bell说。此外,摄像头必须随着筛子一起移动,以达到相同的共振,这样图片便不会模糊。

由于摄像头置于光照充足的条件下,该团队训练了一个机器学习模型,以识别筛子正常运作和受堵的情况。最终结果会得到评级,以便经营者判断问题的严重程度,再做出干预。体积测量结果不仅提供了有关附着和遮蔽程度的信息,而且提供了不良镍的重量和尺寸信息。Britehouse Mobility Atajo OnEdge 平台是在边缘即时处理数据并且是一种云端扩展,提供了可视化,并在必要时提醒经营者。

“该解决方案减少了员工中断操作、摘下盖子并查看振动筛内部情况的次数,从而提高了安全和效率。” Britehouse Mobility 物联网部门负责人 Marco Capazario 表示。

此外,工人现在可以根据情况做出反应,而不是主动采取行动。Capazario 表示,这不仅仅是监控堵塞。“这让工人洞悉上游的故障情况,并能够深入分析根本原因。” 他补充道。Britehouse Mobility/NTT 解决方案可以解答许多问题:为什么有时我们会遇到效率损失?工厂上游发生了什么情况,导致了这种情况?我们能否根据数据洞察来识别这一点?

协作展示精炼厂创新

在英特尔的指导下,Britehouse Mobility/NTT 与 Framos合作,后者在工业级机箱中安装了英特尔® 实感 摄像头。此次合作帮助 Britehouse Mobility 将摄像头更快瞄准对象。实感摄像头凭借其体积测量能力和深度感知能力,因此完美契合。

由于对象检测和体积测量应用并不复杂,因此解决方案不需要大量的计算。“我们并不是试图以每秒 60 帧的速度分析实时视频。但如果我们这样做,我们可以将信息发送到云端,利用英特尔工具集来为我们呈现这些结果。” Bell 说。

基于云的 Atajo OnEdge 平台从网关获取并存储数据,以用于历史分析。用户能够使用该平台的仪表板和报告,跟踪长期和短期趋势。

计算机视觉的应用无穷无尽

虽然 Britehouse Mobility/NTT 解决方案仅适用于 Impala 用例,但其与机器视觉相关的核心组件却用途广泛。对于 Impala 来说,该团队正在开发另一个应用,涉及到监控移动式起重机的安全和现场合规情况。

“我们已经实现了硬件工业化,并且有一个高度可配置的软件层,因此我们可以快速连接模块并部署特定应用。” Capazario 说。“我们有大量机会改进各种工艺。”而且实施并不仅限于精炼行业。制造业和其他行业也已经成熟,适合此种实施。“用途可以说是无穷无尽。” Bell 说。

 

由 insight.tech 主编 Georganne Benesch 编辑。

优化外科手术团队:人工智能在手术室中的作用

当您或您的亲人面临手术时,您自然希望能够找到技术最精湛的外科医生。更不用说,它还拥有最先进的设施和最尖端的技术,以确保达到最佳效果。毕竟,风险可能会高得令人难以置信。因此,令人不安的是,直到最近,外科医生在手术室中仍缺乏决策支持资源。

虽然医疗技术应用在过去几年发展迅速,但与其他行业相比,外科领域采用先进技术的速度要慢一些。外科医生习惯于依靠自己的操作和从经验中获得的知识,这是有充分理由的。但医疗技术并不完全是机械臂和人工智能引导手术;只要将医疗数据从传统的孤岛中解放出来,并让外科医生在最需要的地方和时间(手术室中)获取这些信息,就能带来很多好处。

我们与数字手术平台提供商 Caresyntax 创始人兼首席执行官 Dennis Kogan 对此进行详细探讨,还谈到手术室的动态挑战、良好合作伙伴生态系统的重要性,以及人工智能辅助手术如何改善患者疗效(视频 1)

视频 1。Caresyntax 首席执行官 Dennis Kogan 讨论了将人工智能驱动的实时数据整合到外科手术中的问题,并强调了其关键时机和对外科医生的影响。(资料来源:insight.tech

手术室中的技术进步如何改变医疗期待?

我父亲是一名外科医生。多年前还在上大学的时候,我曾与他谈论运动员在效能管理、态势感知和分析等方面获得了多少决策支持。他告诉我:“外科手术中没有这样的东西。我们有非常有趣和重要的医疗设备,我们也在不断地将临床创新成果应用于实践,但真正的数据使用和决策支持却并不多。”

直到几年前,这种情况还没有太大改变。围绕医疗设备的创新层出不穷,但归根结底,这仍然只是帮助外科医生用手操作。我们现在看到的进步使外科团队也能拥有更好的决策支持机制。

我认为,人们越来越期待外科医生不能只考虑手术风险。他们确实需要支持,也的确需要更多信息来对风险进行分层。而这一切都在他们的头脑中进行可能不再可接受。

将新技术整合到手术室会面临哪些挑战?

与其他类型的疗法相比,患者可能不太了解手术室中发生了什么。显然,他们都处于麻醉状态。他们想要的是了解自己获得好结果的可能性有多大。我想他们可能会惊讶地发现,他们的手术团队得到的综合决策支持并没有想象中的那么多。

利用技术对外科领域进行创新所面临的挑战在于,外科手术是一种实时干预,您必须整合人工智能和软件,以便在该环境中运行。手术室中几乎不应该有滞后时间。与医疗领域使用的许多其他信息技术相比,这本身就是更大的障碍。当然,质量和运营效率的门槛也相当高。

手术环境也极富变化。那么,外科医生在手术过程中如何适应不断变化的临床情况?这不仅是可量化的活动和技术,还有沟通和团队合作。手术实际上是一种团队活动。手术效果的好坏,一部分取决于外科医生的操作水平,另一部分则取决于他们与护理人员和麻醉师的沟通情况。它非常复杂,以至于几乎无法预测会在可预见的未来被人工智能所取代。

由于充满活力,人工智能在为医生提供正确信息和选择方面确实大有可为。一天之内,手术团队可能要为不同类型的患者进行手术:一名健康的 25 岁女性和一名 85 岁的重病男士。团队必须能够调整大量输入并做出大量决策。

认知超载会导致不良决策或错误。七分之一的病例可能会出现某种严重的并发症——占比超过 15%。因此,我们在这里讨论通过态势感知——通过自动化——主动管理风险。这涉及到减少并消除认知超载和不断变化的临床状况导致的不必要的变异性。我们现在观察到的最佳人工智能用例可展示有关特定患者和手术的具体信息,以便指导该手术的整个路径,而且结果比没有获得这种支持时更好。

将人工智能与患者数据相结合有什么优势?

首先且最重要的是,真正的综合手术决策支持涉及围手术期的所有环节。由于手术前后的一切工作也都至关重要,因此最好的综合平台可实现手术室与术前和术后空间、时间和活动之间的连接。

在患者进入手术室之前需要作出一些决策——准备合适的工具、合适的药物、安排合适的人员参加手术。它还包括电子病历,因为电子病历包含大量有关患者及其倾向的数据。然后是手术室内部的情形,这里也可以连接医疗设备和视频摄像头。随后:了解患者离开手术室时的风险程度,这可能会改变他们的护理方式。也许他们可以回家;也许他们需要住进重症监护室;也许他们需要额外剂量的抗生素。

因此,要获得最佳、最明智的洞察力,就必须有完整的围手术期临床和操作记录,但最重要的是手术期间——因为这当然是最关键的部分,也是最容易出错的地方。因此,由于手术室是实时的,因此需要更高水平的复杂性。而且从技术角度来看,这也不是一个适合云的领域。这一切都在边缘,因为您无法在两秒内完成云端上传和下载。因此,边缘计算和物联网技术工具包在这里会非常重要。

与此同时,从部署和成本的角度来看,这种技术解决方案必须非常强大和具有吸引力。因为归根结底,任何过于昂贵或笨重的东西——在已经非常拥挤的手术室里再增加一台巨大的机器——这是行不通的。

在一些技术合作伙伴的帮助下,我们 Caresyntax 耗费数年时间才开发出这个平台,以某种方式实现了所有这些参数。但我知道这是有可能的。现在一切都还处于起步阶段,但我认为未来十年,每个手术室都将配备此类系统。10 年后,医生会想,如果没有这个系统,该如何才能开展工作。

医院如何才能使这种投资面向未来?

每个行业都会经历这样一个周期,起初,少数几家供应商建立一个封闭环境,然后用户会逐渐期待越来越多的灵活性来增加价值和添加新的应用。我认为外科手术和医疗保健也需要进行同样的变革。

出于一些很好的理由,医疗设备领域拥有大量专有知识产权。从过去来看,这也一直是医生的主流思维模式——他们从设备和供应商的视角思考手术室。因此,需要进行的第一项投资是重塑和调整这种思维方式。手术室不应被视为是领先设备平台的延伸,而应被视为实现最佳结果的横向过程的一部分。

您有什么使用案例或客户实例可以分享吗?

因此,我们已经能够证明,在手术室中使用这些先进的平台可以提高表现水平,不仅对外科医生,而且对其他医生和临床协作人员也是如此。例如,护士。疫情爆发后,很多人在没有像以往那样接受过足够培训的情况下加入了护理队伍。现在手术量很大,因为很多手术都被推迟了。因此,许多新护士需要尽快适应这种情况。我们正越来越多地在手术室中部署类似于交互式、分步导航指南的东西。在手术的恰当时机获得分步支持,对于在手术环境中仍缺乏信心或经验的人来说是非常有用的。

Caresyntax 如何与合作伙伴合作,将这些平台引入手术室?

作为外科专家,我们对最终应用和用例有很好的认识,但在基础设施建设方面却没有太多的经验。我们没有在严谨性和实际架构方面可能与我们类似的其他用例作为基准和对比物。而即插即用的综合智能手术平台在硬件内容方面非常智能但并不繁重,它既能生成信息,又拥有接收算法、生成人工智能并实时展示的能力和带宽——这是一组相当复杂的要求。

英特尔一直是与我们密切合作的合作伙伴之一,几乎都是在我们的团队中,来实现这一目标。设计架构、寻找合适的组件、利用他们的一些组件——例如,允许人工智能渗透和使用的 OpenVINO——所有这些东西都非常重要。如果没有英特尔这样的合作伙伴,我们至少会慢很多。我们需要寻找每一件物品,还可能会犯下更多的错误。

当然,除了英特尔,我们还与云解决方案提供商——AWS 和 Google Cloud 合作。因为必须实现从边缘到云的过渡。正如我之前所提到的,这是一个包括术前、术中和术后的领域,因此您必须不断地进入边缘,再回到云端,并使信息可以互换。实际上,它们彼此之间都有合作——英特尔与 Google、英特尔与 AWS——这种合作也获得了很好的回报。

当然,疫情阻碍了创新,但最近这种情况已有所缓解。我认为每个人在看待外科手术时都会说:“它不如飞行安全,甚至不如其他一些医疗程序安全。现在是时候对它进行改进了。”要实现这一目标,需要一个由玩家组成的生态系统。

关于人工智能在外科手术中的应用,您认为最关键的要点是什么?

我经常会发现,人们认为手术是已经想明白的事物,它已经成熟,并不需要创新。我可以扫兴地说,事实并非如此。但外科手术也有机会达到与航空业相同的水平。我认为你们和我一样都不会接受飞机有 15% 的几率出现问题。

这是一个很大的问题,不仅对临床有影响,对成本也有影响。外科疗法是仅次于药物疗法的第二大常用疾病治疗方法。它可能占美国医疗保健支出总额的 20%、30%。

因此,如果要做手术,我认为我们应该有一种一切都会好起来的感觉。而这应该有真实的统计数据作为支撑。我们确实可以让手术变得更安全、更智能。它将对数百万患者的健康产生广泛的影响,同时也会对成本产生广泛影响。只要有创新的思维,就会有很大的改进空间。

相关内容

要了解人工智能辅助外科手术技术的详情,请收听手术室配备人工智能:与 Caresyntax 同行并通过 @caresyntaxLinkedIn关注 Caresyntax。

 

本文由文案编辑 Erin Noble 编辑