首页 > 智能数码 > 工具软件 >阳江专业的AIBOX-1684X研发公司找哪家靠谱?

阳江专业的AIBOX-1684X研发公司找哪家靠谱?

作者:19617g 时间:2024-06-28 02:59:01

ROC-RK3576-PC

低功耗大模型主板

采用 Rockchip 八核 64 位 AIOT 处理器 RK3576,采用先进制程工艺,大小核构架(4×A72 + 4×A53),高性能低功耗,内置 ARM Mali G52 MC3 GPU,集成 6 TOPS算力 NPU,支持 Transformer 架构下超大规模参数模型的私有化部署,支持多种深度学习框架、自定义算子开发、Docker 容器化管理技术。配置外部看门狗,具备工业级稳定性,广泛适用于AI本地部署的应用场景。

ROC-RK3588-RT

八核8K人工智能多网口开源主板

采用Rockchip RK3588旗舰级八核64位处理器,主频高达2.4GHz,6 TOPS算力NPU,可配32GB大内存。支持8K视频编解码;支持2.5G和双千兆以太网、M.2接口WiFi、8K HDMI、8K DP输出。拥有丰富的扩展接口(M.2 SATA、PCIe、USB3.0/2.0),支持多种操作系统。

Firefly推出大语言模型本地部署的产品:AIBOX-1684X,目前已适配主流的大语言模型,包括 ChatGLM3-6B,以下是 ChatGLM3 在 AIBOX-1684X 上的实机演示:

ChatGLM3-6B 采用更多元的训练数据和策略,在不同角度的数据集,采用了全新设计的 Prompt 格式,支持工具调用 (Function Call) 、代码执行 (Code Interpreter) 和 Agent 任务等复杂场景。

性能实测结果

更强大的基础模型

ChatGLM3-6B (Base) 在选取的8个中英文典型数据集中进行性能测试:


  • 更强大的基础模型


除了对话模型ChatGLM3-6B外,还开源了基础模型ChatGLM3-6B-Base、长文本对话模型ChatGLM3-6B-32K。以下是ChatGLM3-6B-32K在LongBench评测集上对模型进行测试:



中山市天启智能科技有限公司专注于开源智能硬件,人工智能,物联网,数字音频产品的研发设计、生产和销售,同时提供了智能软硬件产品的整体解决方案。天启是福州瑞芯微电子(RockChip)正式授权的IDH(独立设计公司),同时也是瑞芯微Rockchip的战略合作伙伴,与瑞芯微电子有超过10年的紧密合作关系。

天启智能科技有限公司是一家专注软硬件技术服务的创新科技公司,致力于降低企业科技创新的技术门槛,加快智能科技与生活的融合。在2014年初成立了Firefly开源团队,为企业、团队和创客提供创新、开放、简易的高性能产品平台。现在我们已发布了10多款开源平台,客户覆盖全球38个国家,并吸引了超过20万全球开发者。

把大模型“装”进小盒子

——AIBOX-1684X 大模型人工智能盒子

算力高达32 TOPS!支持主流大模型私有化部署,

把AI的能力私有化,一个盒子就能满足个性化的AI部署!

算法丰富,全面的人工智能私有化部署。

搭载SOPHON算能AI处理器BM1684X,拥有八核ARM Cortex-A53,主频2.3GHz,采用12nm工艺制程;拥有高达32Tops(INT8)算力,

或16TFLOPS(FP16/BF16)算力、或2Tops(FP32)高精度算力,支持主流编程框架,可广泛应用于云端及边缘应用的人工智能推理。


采用SOPHON算能八核AI处理器BM1688,INT8算力高达16 TOPS,支持16路H.265/H.264 1080p@30fps视频解码,支持主流编程框架,提供一站式深度学习开发工具包 SOPHON SDK,工具链完备易用度高,算法轻松部署,算法迁移代价小。适用于智算服务器、边缘智算盒、工控机、智能网络摄像机、AIOT、智能安防等类型产品和领域,为各行业进行AI赋能,算法丰富,全面的人工智能私有化部署