页面树结构

版本比较

标识

  • 该行被添加。
  • 该行被删除。
  • 格式已经改变。

1、大模型

推荐使用云厂商的在线大模型,例如阿里云千问、Deepseek、火山引擎、华为云、腾讯云等。开通账号并创建API-Key,配置方法参见:连接大模型

如果需要在本地部署大模型(例如qwen 2.5 72b),推荐硬件配置要求:

CPU:支持X86/ARM架构,推荐X86架构,建议跟随GPU显卡去调配CPU等硬件最低配置。 

...

GPU(重点关注):

...

1、AIChat环境要求

AIChat支持X86/ARM架构,推荐X86架构。

...

 组件

版本要求

Mysql

>=5.7
Redis>=5.0.3
mongodb>=4.2.6

...

2、默认开通端口

单节点:

服务名端口
AIChat9060、9081
Smartbi18080

...

服务名端口

AIChat

9060、9081

Smartbi18080

Docker Swarm

2377、2376、5000、7946、4789、5001

GlusterFs

24007、24008、24009、49152、49153、49154、49155、49156、38465、38466、38467、111

3、大模型

推荐使用云厂商的在线大模型,例如阿里云千问、Deepseek、火山引擎、华为云、腾讯云等。开通账号并创建API-Key,配置方法参见:连接大模型

如果需要在本地部署大模型(例如qwen 2.5 72b),推荐硬件配置要求:

CPU:支持X86/ARM架构,推荐X86架构,建议跟随GPU显卡去调配CPU等硬件最低配置。 

组件配置CPU内存硬盘
大模型最低配置X86/ARM 32核128G1TB+

GPU(重点关注):

配置显卡
最低配置8*4090 24G
推荐配置8*A100 80G