跳转至

图片输入与结果追问

Web 对话支持通过左下角 +、剪贴板粘贴、拖拽文件添加图片。可以图片加文字, 也可以只发送图片。每条消息最多四张图片;支持 PNG、JPEG、WebP、非动画 GIF。 每张最多 20 MB、解码后 3200 万像素。图片去除元数据并转为 PNG 后,发送到 用户选定的 OpenAI 模型;转换后的文件也必须满足大小限制。其他附件仍留在本地, 上传表格不代表把完整表格传给模型。

从第一张附件起,输入框就显示图片计数。达到四张后,会提示先移除再替换;继续上传 或截图会显示上限提示,而不是没有反馈。

可用于识别图表类型、讨论异常点或缺失区域、比较两种绘图风格、解释相关性热图, 或把截图作为后续绘图的风格参考。截图无法替代原始数据,也不能确立精确计数、 显著性或临床有效性;真正复现科学图表需要数据和执行授权。图片内嵌的指令不会 成为修改系统行为的授权。

图片与对应用户消息一同显示,刷新后保留,并归属于该对话。新图片与历史图片上下文 区分处理。删除对话时,附件及输出沿用已有垃圾箱流程。当前图片消息要求使用 OpenAI; 选择其他提供商时会明确报错。

交互式 CLI 使用 /image "/path/to/figure.png" 这张图表示什么?, 与 Web 共用图片规范化、归属校验及模型输入链路。只提到本地图片路径不会自动上传它。

Plan 和 Results 按钮

  • Run next step:执行当前计划推荐的可运行步骤。点击意味着执行该步骤, 完成后更新结果与状态,不等于授权所有后续步骤。
  • Ask:围绕当前选中的结果及受限本地预览进行解释,说明含义和局限。
  • Use result for next step:以选中结果为依据,请智能体规划聚焦的下一步, 按钮本身不授权新的科学计算。先审阅,再要求执行。

结果追问会保留所选条目的身份。对不完整或不支持的结果,系统应说明限制, 不能编造缺失图形、统计结果或已经完成的流水线。

长任务与刷新

执行期间,对话区临时显示当前操作、工具提供的真实完成进度,或在暂无计数时定期报告 工作进程仍在运行。最终回答会替换这些状态;它们不是模型的私有思维链。原生上下文 压缩开始、完成时也会显示提示,已完成的本地结果和可见对话会保留。

Guide 可向当前回合追加指令,Stop 请求取消并保留已完成输出。同一浏览器对话 刷新后会接回已记录的运行任务,不会重新提交问题。如果本地服务本身重启,界面会明确 说明旧的运行任务已不可用;可要求基于保留的结果继续未完成工作。刷新恢复需要浏览器 允许本地存储。

图中选区与数据溯源

新生成的 assay 特征热图还会记录显示变换:在显示的样本之间按特征计算 z-score,并截断到 [-3, 3],棕色为负、青色为正。这与选区检查返回的原始矩阵数值不同;旧图没有记录变换时,不应根据原始数值汇总推断配色尺度。匿名来源标识可区分不同图表和源表,即使文件名相同。

在 Results 的图形工具栏点击 Select region to ask 后拖动选框,即可在旁边的小输入框中提问。输入文字并回车会发送正常的图片+文字对话;不输入文字、点击 + 会将截图加入底部输入框,可累积最多四张图片后统一提问。Escape 或 Cancel 取消选区。缩放或调整适应方式后可重新框选。

数据选择以落入框内的数据标记中心为准,标题、图例、空白和仅碰到边缘的误差线不代表数据。新生成的 assay-table PCA 图对应原始矩阵样本,特征热图对应原始测量单元格,差异图对应矩阵特征;cfDNA sample-by-bin 热图对应导出的归一化信号表。旧图和其他图仍可截图提问,但不会凭像素自动获得精确数据映射。浮层会明确显示映射数量或“仅图片”。

选区及其来源保存在当前对话的数据目录中;计算前会检查原图和源表是否改变。数值工具向模型返回汇总信息;截图本身(包括可见标签)会发送给所选的 OpenAI 模型。用户要求分析时,系统可另外生成选中数据表、描述性统计、来源记录和报告,不修改原结果,也不自动合并多张截图。差异建模等进一步任务仍需满足输入、队列设计和已有工具能力的要求,不能把描述性统计冒充所请求的高级方法。

真实实操:从两张图追问

以下完整界面截图来自 GSE174302 与真实 OpenAI API 的浏览器操作,不是预置回答。先按完整研究教程产生 QC 报告,再打开 Results 历史里的第一项 QC;查看历史不会重跑质控。

框选后立即提问

滚到 PCA,点击 Select region to ask,拖动选中右侧的点,松开鼠标并等待映射数量出现。本例为 6 mapped marks · exact data,对应六个样本。在旁边输入“检查这些 PCA 离群样本的源数据,是技术差异还是生物学差异?不要排除样本”,按 Enter 立即提交。

实际拖动时,选框随鼠标移动而扩大。

实际拖动时,选框随鼠标移动而扩大。

松开后显示小输入框及精确映射数量。

松开后显示小输入框及精确映射数量。

实际回答检查了六个样本在 19,813 个特征上的 118,878 个有限测量值,并说明无法据此判断技术/生物学原因。截图随用户消息进入对话,而不是临时悬浮便签。

发送的图片、问题和真实溯源回答保留在同一对话中。

发送的图片、问题和真实溯源回答保留在同一对话中。

先暂存,再去另一张图

再选一次 PCA 区域,小输入框留空,点击旁边 +。这一步只加附件,不请求模型;主输入框显示 1/4,提示可以继续添加。

第一张 PCA 截图暂存在主输入框中。

第一张 PCA 截图暂存在主输入框中。

接着移动到特征热图,不要在同一 PCA 里截取几乎相同的位置。点击 Fit to width;细长图片可在查看器内上下滚动。缩放改变的是显示大小,不是源测量值,调整完后再选区。

宽度适应后,可以更清楚地观察热图单元格。

宽度适应后,可以更清楚地观察热图单元格。

单独选择热图区域,本例为 11 行、15 列,共 165 个映射单元格。

单独选择热图区域,本例为 11 行、15 列,共 165 个映射单元格。

再次留空点 +,然后在主输入框统一提问:

比较 PCA 离群点区域和这块热图,检查映射、单位、是否对应同一批样本。分别汇总选中数据,生成简短报告;不要合并选区或重跑差异分析。

两张不同截图和一个综合问题准备发送。

两张不同截图和一个综合问题准备发送。

真实回复区分选区单位,并发布本地选中数据表。

真实回复区分选区单位,并发布本地选中数据表。

本次回复没有从受限的映射汇总推定样本重叠,而是保留两组选择,区分样本与单元格、截断后的相对 z-score 与源计数。产生了新的选区表和描述统计,之前六项 QC/矩阵/比较任务未重跑。精确数据关联不等于所有后续方法或元数据连接都已实现。

也可以上传已有 PNG

另开 New chat → Later,点击 + 上传两张完整 QC PNG,询问 PCA/热图区别及是否能证明癌症诊断。本次是在未附加数据集的新对话中进行的真实多模态调用。

通过上传控件加入实际 PCA 和热图,显示 2/4 提示。

通过上传控件加入实际 PCA 和热图,显示 2/4 提示。

模型解释上传图片及诊断证据缺口。

模型解释上传图片及诊断证据缺口。

刷新和恢复后,两张上传图仍与实际问题一起保留。

刷新和恢复后,两张上传图仍与实际问题一起保留。

上传 PNG 携带像素,不携带 Results 选区的数据关联。想检查精确测量值,应回到对应数据集的 Results 中框选;只解释图意时,应用外的截图也可以。粘贴和拖拽是其他入口;本组截图实际操作的是文件上传和 Results 框选。

Results 当前采用静态图配合应用自身的缩放、平移和选区工具。生成 Plotly HTML 不代表它会自动嵌入成 Results 中的 Plotly 交互面板。