登录社区云，与社区用户共同成长
邀请您加入社区
基本概念与问答 Q1.1 ：什么是 Byzer Byzer : 一门面向 Data 和 AI 的低代码、云原生的开源编程语言。 Byzer 是一门结合了声明式编程和命令式编程的混合编程语言，其低代码且类 SQL 的编程逻辑配合内置算法及插件的加持，能帮助数据工作者们高效打通数据链路，完成数据的清洗转换，并快速地进行机器学习相关的
如果 Byzer-Lang 和 Byzer Notebook 对您有帮助，或您有兴趣想要贡献自己的一份力量，白泽社区（Byzer Org）非常期待您的加入，大家一起来共创一个面向数据以及 AI 的社区。 社区组织架构 社区结构如下图所示，目前会分为三条线 - Byzer-Org - PMC - Dev Group
在本章节中，我们将引导您快速体验云上的 Byzer 的 IDE 应用平台 Byzer Notebook，您可预留 5 分钟完成一次全流程体验。 官网注册 在开始试用之前，请先前往Byzer 官网注册试用账号。 首先点击官网主页上的在线试用： 填写基本信息注册并点击创建账号： 通过邮箱中的链接验证后，您就可以进入到准
设计理念 在抽象业务能力的时候，数据的处理和流转承载着信息传递的核心任务，而数据的载体往往就是二维数据表或多维数据表，SQL 语言其实就是抽象在二维数据表上的各种数据操作。Byzer 语言的核心设计是万物皆表（Everything is a table），无论是结构化数据、半结构化数据、非结构化数据，
背景 多年以来，SQL 一直在各路 solo。 什么计算机语言适合入门数据行业、交互快、用途广、可扩展性好？答案总是 SQL。 只有 SQL 开发者才能看得懂的笑话 一个 SQL 查询走进了一个酒吧，看到两张 Table，它和两张 Table 说，“我能 Join 你们吗？”有人会问，也许近些年 Py
安装 参考文档：https://docs.byzer.org/#/byzer-lang/zh-cn/byzer-llm/deploy 注意，即使你已经有安装过大模型相关的环境，建议你依然使用裸机全自动化部署, Byzer LLM 会创新一个 byzerllm 用户，该用户的环境变量和配置文件都是独立的，不会影响到你的其他环境。
如何通过日志排查错误 Byzer-LLM 目前会使用 Ray 部署模型。 一个模型分成两个部分，一个是 UDFMaster，一个是 UDFWorker。 通常一个模型部署实例，对应一个UDFMaster ，一个或者多个UDFWorker。 当我使用如下代码进行部署时： !byzerllm setup single; !byzerllm setup "num_gpus=1"; !byzerllm s
Byzer-LLM Byzer-LLM 是基于 Byzer 数据库的一个引擎插件，让用户可以端到端的完成业务数据获取，处理，finetune大模型，多场景部署大模型等全流程。 该扩展的目标也是为了让企业更好的将业务数据注入到私有大模型（开源或者商业），并且可对外提供多场景部署形态，诸如 ETL, 流式计算，API 服务 等。 下面是使用 Byzer-LLM 完成大模型的一个工作流程图：
部署 裸机全自动化部署 只支持 CentOS 8 / Ubuntu 20.04 / Ubuntu 22.04 前置说明 如果你的机器是云上的虚拟机，在创建机器资源的时候，一般都会让你设置主机名，建议主机名就叫byzerllm(确保它有sudo权限，一般默认都会有)，会少很多事情，安装脚本也只需要运行一次；如果是国外的云厂商，有一些默认参数可以调整，现在默认参数都是为国内设置的，在国外的云厂商的主机
LLM 模块介绍 Byzer-LLM Finetune/Deploy 大模型主要通过 LLM 模块。 比如部署一个模型的典型示例如下： -- 全局环境参数 !python conf "rayAddress=127.0.0.1:10001"; !python conf "pythonExec=/home/winubuntu/miniconda3/envs/byzerllm-desktop/bin/p
使用 vllm 作为 inference backend Byzer-LLM 其实支持 Transformers, vLLM, Deepspeed Inference， Aviary/TGI 等多种backend。 这篇文章我们介绍 如何在 Byzer-LLM 中使用 vLLM 作为推理后端。 已经通过实机测试模型(会持续更新)： falcon 系列llama/llama2 以及衍生系列baich
电商 电商场景完整展示从数据加载，处理到模型fintune到部署的全流程。 Notebook下载地址：https://github.com/allwefantasy/byzer-llm/blob/master/examples/Byzer-LLM-%E7%94%B5%E5%95%86%E5%9C%BA%E6%99%AF.bznb 将该文件导入到 Byzer-Notebook中即可。 虚拟外教 在
