AI大模型应用开发实践:3.使用 tiktoken 计算 token 数量

tiktoken是OpenAI开发的一种BPE分词器。给定一段文本字符串(例如,)和一种编码方式(例如,),分词器可以将文本字符串切分成一系列的token(例如,将文本字符串切分成token非常有用,因为GPT模型看到的文本就是以token的形式呈现的。知道一段文本字符串中有多少个token可以告诉

VSCode配置AI自动补全插件Tabnine

Tabnine 仅将开源代码与宽松的许可证用于我们的公共代码训练的 AI 模型(MIT、MIT-0、Apache-2.0、BSD-2-Clause、BSD-3-Clause、Unlicense、CC0-1.0、CC-BY-3.0、CC-BY-4.0、RSA-MD、0BSD、WTFPL、ISC)。无论

AI 编程辅助工具介绍

2023 被称为“AI元年”,人工智能、AI大模型概念迅速点燃市场。对程序员来说,如果能让 AI 帮助我们编码,那工作效率不得起飞!本篇简单介绍一下当前主流的 AI 编码工具。目前的 AI 辅助编程工具还在飞速发展,本地部署训练的效果都不如 GitHub Copilot 等大厂的产品好用。短期内建议

使用Ollama和Open WebUI管理本地开源大模型的完整指南

Open WebUI 是一种基于 Web 的用户界面,用于管理和操作各种本地和云端的人工智能模型。它提供了一个直观的图形化界面,使用户可以方便地加载、配置、运行和监控各种 AI 模型,而无需编写代码或使用命令行界面。测试以下编程能力用shell脚本编写一个ping通网段所有主机 要求如果可以访问返回

手撸私有AI大模型——给Ollama做个WebUI就叫ChatBaby

轻轻松松搞定私有大模型的Web页面,手撸的ChatBaby让AI不再神话

七个国内可用的人工智能,PC端与手机端皆可免费使用,提高你的工作效率

七个国内可用的人工智能,PC端与手机端皆可免费使用,提高你的工作效率

【Sping Boot与机器学习融合:构建赋能AI的微服务应用实战】

通过将Spring Boot与机器学习结合,我们可以轻松构建赋能AI的微服务应用。Spring Boot简化了应用的开发和部署过程,而机器学习提供了强大的智能化能力。通过本实战案例的演示,我们展示了如何利用Spring Boot和TensorFlow构建一个简单的电商推荐系统微服务,并通过代码进行了

AI大模型探索之路-训练篇4:大语言模型训练数据集概览

在人工智能领域,构建强大的AI系统的关键步骤之一是大规模的语言模型预训练。为了实现这一目标,需要大量且多样化的训练数据。以下是对目前常用于训练大语言模型的数据集的整理与概述。

【ai学习】 字节扣子使用,创建自己的AI应用

扣子是新一代 AI 大模型智能体开发平台。整合了插件、长短期记忆、工作流、卡片等丰富能力,扣子能帮你低门槛、快速搭建个性化或具备商业价值的智能体,并发布到豆包、飞书等各个平台。说白了:扣子和GPTs一样可以帮助你创建自己的AI应用。

AI大模型探索之路-应用篇15:GLM大模型-ChatGLM3-6B私有化本地部署

ChatGLM3-6B 是 OpenAI 推出的一款强大的自然语言处理模型,它在前两代模型的基础上进行了优化和改进,具有更高的性能和更广泛的应用场景。本文将从技术角度对 ChatGLM3-6B 进行详细介绍,包括其特点、资源评估、购买云服务器、git拉取GLM、pip安装依赖、运行测试以及本地部署安

Baidu Comate——基于AI的智能代码生成让你的编码更快、更好、更简单!

Baidu Comate——基于AI的智能代码生成让你的编码更快、更好、更简单!

无处不在的AI:被科技巨头盯上的Agent智能体的崭新时代

在科技飞速发展的时代,Agent AI 智能体如同一颗冉冉升起的明星,吸引着无数人的目光。它是人类智慧与科技的结晶,正以惊人的速度改变着我们的世界。Agent AI 展现出了强大的能力和无限的潜力。它能够快速处理海量的数据,从中挖掘出有价值的信息,为决策提供有力的支持。它可以在各种复杂的环境中自主行

9个免费的AI辅助编程工具,智能自动编写和生成代码

在AIGC技术和工具井喷爆发的时代,对高效智能编程工具的需求和关注也达到前所未有的高度。通义灵码是阿里巴巴团队推出的一款基于通义大模型的智能编程辅助工具,提供行级/函数级实时续写、自然语言生成代码、单元测试生成、代码注释生成、代码解释、研发智能问答、异常报错排查等能力,并针对阿里云 SDK/API的

OpenUI在windows下部署&使用

OpenUI是一个基于Python的AI对话平台,支持接入多种AI模型。通过聊天的方式来进行UI设计,你可以通过文字来描述你想要的UI界面,OpenUI可以帮你实时进行渲染出效果。

【前端--Vue】组件之间的多种通信方式,一文彻底搞懂组件通信!

本篇将重点讲解vue中的多种组件通信方式,包括【父传子】【子传父】【兄弟组件通信】【依赖注入】等等,并提供具体案例来让小伙伴们加深理解、彻底掌握!

我希望未来10年,人工智能可以帮我解决这4件小事

生活在一线大城市的我,现在几乎整天被大数据、人工智能、机器学习、智慧生活的词汇环绕立体包围着,让我时刻感觉到,再过10年,我们五一假期真的可以摆脱现在擦肩接踵的旅游盛况了。但我其实要求倒是没这么高,我真心希望人工智能再未来10年,要是能帮我解决了这几件小事就好了。

Cognition发布全球首位AI程序员Devin,初级程序员将会被取代吗?

今天早上看到一条消息,Cognition发布了世界首位AI程序员Devin,直接把我惊呆了,难道程序员是了吗?一亮相,直接引爆整个互联网圈。只需要一句指令,Devin就可以通过使用自己的shell、代码编辑器和Web浏览器来解决工程任务。Devin是的最新技术,已成功通过领先AI公司的实际工程面试,

程序员35岁会失业吗?【来自主流AI的回答】

保持良好的心态保持核心竞争力。

全球首位AI程序员诞生,将会对程序员的影响有多大?

近期,全球首位AI程序员Devin的出场,不禁让我想到了一个有趣的问题:AI程序员会不会抢程序员的饭碗呢?虽然AI技术在编程领域越来越广泛,但它真的能完全替代我们程序员吗?

Github Copilot最全的安装与使用教程:一款非常好用的AI编程工具

在你安装完Github Copilot后,你会发现VSCODE左边多了Github Copilot的聊天窗口,你可以像Chatgpt一样和Github Copilot聊天,Github Copilot不仅根据你的要求生成代码,而且还会对代码进行说明,最重要的是Github Copilot会提示你联想

登录可以使用的更多功能哦! 登录
作者榜
...
资讯小助手

资讯同步

...
内容小助手

文章同步

...
Deephub

公众号:deephub-imba

...
奕凯

公众号:奕凯的技术栈