目录
china-ai-scientist
https://github.com/yangjiacheng1996/china-ai-scientist
本项目基于github上的一个开源项目AI-Scientist(AI科学家)做二次修改,更适合中国宝宝体质。
在中国,由于大陆墙,我们无法访问国外AI大模型官网,无法直接使用API Key。并且在使用原项目踩到的一些坑都会写入这篇文档,帮助读者快速使用。
AI科学家: 拥抱全自动化
将科学发现开源到底 🧑🔬
📚 [论文] | 📝 [官网] | 📂 [驱动文件夹]
人工智能的一大挑战是开发能够进行科学研究和发现新知识的智能体。虽然前沿模型已经被用来辅助人类科学家,
例如用于头脑风暴或编写代码,但它们仍然需要广泛的人工监督,或者受限于特定的任务。
我们很高兴地介绍AI科学家,这是第一个全面的系统,能够实现完全自动化的科学发现,使得基础模型如大型语言模型(LLMs)能够独立进行研究。
我们进一步提供了我们论文中的所有运行和数据,您可以在
这里
找到。我们对每个基础模型在每个模板上运行了大约50个创意。我们强烈建议阅读一些
Claude论文
(特别是扩散相关的),以了解其优缺点。以下是AI科学家生成的一些示例论文📝:
- DualScale Diffusion: Adaptive Feature Balancing for Low-Dimensional Generative Models
- Multi-scale Grid Noise Adaptation: Enhancing Diffusion Models For Low-dimensional Data
- GAN-Enhanced Diffusion: Boosting Sample Quality and Diversity
- DualDiff: Enhancing Mode Capture in Low-dimensional Diffusion Models via Dual-expert Denoising
- StyleFusion: Adaptive Multi-style Generation in Character-Level Language Models
- Adaptive Learning Rates for Transformers via Q-Learning
- Unlocking Grokking: A Comparative Study of Weight Initialization Strategies in Transformer Models
- Grokking Accelerated: Layer-wise Learning Rates for Transformer Generalization
- Grokking Through Compression: Unveiling Sudden Generalization via Minimal Description Length
- Accelerating Mathematical Insight: Boosting Grokking Through Strategic Data Augmentation
目录
材料准备
算力准备
为了减少您的资金消耗,本项目计划在两种环境(家中、云上)开展AI研究,请根据自己的条件选择合适的实验环境:
在家中开展试验
- 一台带有英伟达显卡的电脑,显卡要求:Geforce RTX30系列及以上版本,例如RTX3050、RTX4060、RTX5080。原因是项目需要进行bfloat16计算, 需要支持sm_80架构的显卡。Tesla显卡中,T系列和P系列不支持sm_80,请不要购买,推荐Tesla A系列和H系列,例如A10、A100、H800。
- 魔法网络:由于本项目会访问一些被墙的网址,为了避免试验中断,请给家里安装软路由。比如淘宝购买R2S、华硕梅林路由器等等,请参考 我的博客
云上环境
- 海外GPU服务器:想要不被墙、且有显卡,只能购买海外GPU服务器。文本测试过阿里云国外GPU服务器,显卡型号A10,region首尔, 系统Alibaba cloud linux,驱动driver550,cuda12.4,cudnn9.2,价格11.66元/小时,系统盘调成100GB。
API key 准备
以下的每个key都必须创建,否则AI无法运行。
- 申请一张美国银行卡:中国大陆可以登录 bewildcard.com ,花一点钱注册一个美国虚拟银行卡,就能愉快的使用所有美国的服务,包括AI和云计算等等。
- 官方chatGPT4 key:chatGPT不允许大陆和香港登录,而且需要美国银行卡才能充值。去https://platform.openai.com上创建一个key, 并绑定银行卡作为支付方式,设置自动充值,并预存20美刀会员。 详细操作视频
- Semantic Scholar: 简称S2 key,目前官方key已经拿不到了&#
版权归原作者 上海一亩地 所有, 如有侵权,请联系我们删除。