Open fly51fly opened 3 months ago
No 1. 那些第一次离今天有多远： 第一条 Sora 视频：2 天 第一次 ChatGPT 聊天：1 年 第一条 TikTok 视频：7 ...... No 2. François Chollet：人们往往陷入两种欠考虑的极端观点： 1、“语言模型(LLM)就是通用人工智能(AGI)，能像大脑一样工作，能进行推理等。” ...... No 3. 从零开始构建扩散模型理论 No 4. 改进LoRA:从头开始实现权重分解低秩自适应(DoRA) No 5. '微信机器人 - 微信机器人是一个创新的基于Python 3.11开发的项目，通过结合ChatGPT模型和微信原生API，为用户提供智能聊天、自动绘画、自动发朋友圈、自动发视频号等多样的API集成服务，旨在提升日常沟通效率和趣味性' ...... No 6. Qwen1.5-8x7b：基于Qwen1.5的专家混合模型，配套使用MoD数据集，采用多种数据源，如Bagel、OpenHermes等，共计约780,000个独特ShareGPT对话，以促进模型开发独特专家。利用微调和模型合并等技术，模型具有适应性和性能表现，虽然未能完全进行性能评估，但初步推理测试表明与Mixtral相当 No 7. Agents大列表 No 8. [LG] G-Retriever: Retrieval-Augmented Generation for Textual ...... No 9. [LG] BiLLM: Pushing the Limit of Post-Training Quantization ...... No 10. [CL] Debating with More Persuasive LLMs Leads to More Truthful ...... No 11. 基于YOLO-World+EfficientSAM的零样本目标检测与实例分割Demo No 12. KG-MM-Survey：收集了整合知识图谱(KG)和多模态学习的论文，主要研究两个方面：KG驱动的多模态(KG4MM)学习，KG支持多模态任务；以及多模态知识图谱(MM4KG)，将KG研究扩展到MMKG领域 No 13. 晚安～ [月亮] No 14. [CV]《Revisiting Feature Prediction for Learning Visual Representations from Video》 No 15. [LG] Shortened LLaMA: A Simple Depth Pruning for Large Language ...... No 16. LLM检索增强生成(RAG)相关资源大列表，包括论文、资源和工具等 No 17. 电子书：《概率论沉思录：科学逻辑》（前三章） No 18. [AS]《MusicMagus: Zero-Shot Text-to-Music Editing via Diffusion Models》 No 19. 用于计算机器学习评估中的置信区间，主要特色在于采用bootstrapping计算置信区间，适用于不同应用场景且无需对数据分布做出假设，能够正确处理非独立同分布的数据集 No 20. 几篇论文实现代码 No 21. 收集关于OpenAI GPT的精彩提示，旨在帮助用户发现和分享顶尖GPT的秘密技巧。主要特色包括顶级GPT提示的揭示，社区共享以及提示展示，为AI创作者提供共同成长和创新的平台 No 22. [LG] Decoding-time Realignment of Language Models 网页链接 提出一种名为'解码时重对齐'(DeRa)的方法，解决了在人工反馈驱动的语言模型(LM)对齐中调整正则化强度的问题。传统对齐技术需要多次训练以寻找最佳正则化水平，这在大型模型上代价巨大。DeRa通过在解码时调整参考模型与对 ...... No 23. AI创作工具爆发的时代，我们该何去何从 No 24. AthenaDB：简单、无服务器、分布式的向量数据库，可用作API。采用Cloudflare Workers AI、D1和Vectorize编写。主要特色包括：简洁的API端点用于插入、查询、检索和删除向量文本数据；无需将文本存储在数据库中即可生成嵌入；分布式数据库，数据在多个数据中心进行复制 No 25. Streamline Analyst: 由大型语言模型驱动的先进开源应用，旨在彻底改变数据分析方式，能自动完成诸如数据清洗、预处理以及识别目标对象、划分测试集、选择最适合数据的模型等任务，并提供无缝的结果可视化和评估 No 26. [LG]《Recovering the Pre-Fine-Tuning Weights of Generative Models》 No 27. [CL]《How to Train Data-Efficient LLMs》 No 28. rust_kanban：用 Rust 编写的终端看板应用，可以帮助用户通过优先处理任务和更快实现目标来提高生产力，特色包括支持拖放卡片、垂直移动文本字段、云保存加密、撤销和重做操作、自定义颜色和主题支持等功能 No 29. Latent Scope：新型的工作流程+工具，用... No 30. 洗衣机是偷着下4K电影了吗？ [允悲] No 31. 'tt-zhipin - 头头直聘，仿Boss直聘实现。SpringCloud Alibaba 构建后端，React ...... No 32. Open-Source AI Cookbook：HuggingFace开源AI方案手册，涵盖了使用开源工具和模型构建AI应用和解决各种任务的方法 No 33. 早！[太阳] No 34. 早！[太阳] No 35. 提出一种新的攻击向量“Spectral DeTuning”，用于恢复生成模型的Pre-Fine-Tuning权重，揭示了基于低秩自适应(LoRA)微调模型存在的安全漏洞，并通过这种迭代低秩矩阵分解技术，能在不需要训练数据和不经过模型推断的情况下，高效精确地恢复原始模型权重。//[LG]《Recovering the Pre-Fine-Tuning Weights of Generative Models》 No 36. VIOLA：多功能的 C++ 库，用于视觉/机器人系统，旨在成为视觉/机器人包的通用基础库 No 37. BlackMamba模型通过融合无注意力机制的Mamba块和MoE，创新性地结合了线性时间和内存复杂度的长序列处理能力与稀疏路由的推理效率，显著减少了训练FLOPs，且开源了实现代码和模型权重，对长序列语言模型的建模提出了新的解决方案。//[CL]《BlackMamba: Mixture of Experts for State-Space Models》 No 38. 用合成数据进行微调：蒸馏与自我改进 No 39. TheProfessor-155b：一个特殊的大型... No 40. nomic-embed-text-v1.5是Nomic Embed的改进版本，利用了Matryoshka表示学习，允许在嵌入大小与性能之间灵活权衡。通过引入Matryoshka表示学习，该项目在提高嵌入质量的同时，提供了更大的嵌入尺寸和序列长度 No 41. Flowershow template：Obsidian笔记发布模板，轻松将Markdown文件转换为优雅的网站，基于React、Next.js和Tailwind构建 No 42. 通过引入V-JEPA模型族，展示了利用特征预测作为无监督学习的单一目标，能在视频数据上学习到多功能且有效的视觉表示，并且在多个下游任务中取得了优异的性能，特别是在需要精细时序理解的任务上，显示出了现有方法中的最佳性能，同时在训练效率上超越了传统的像素预测方法。//[CV]《Revisiting Feature Prediction for Learning Visual Representations from Video》 No 43. InfiAgent: 开源Agent框架，旨在支持从零开始构建Agent演示，支持代码执行、API调用、批量推断和沙盒管理 No 44. [CV] BlockFusion: Expandable 3D Scene Generation using Latent ...... No 45. 月之暗面创始人杨植麟：个性化交互是AI-Native产品的核心价值 No 46. Stability AI发布图像生成模型Stable Cascade No 47. 提出MusicMagus，一种创新的基于文本的音乐内部音轨编辑方法，通过预训练的扩散模型实现零样本编辑，并在风格和音色转换等关键任务上超越现有方法，展现出在实际音乐编辑应用中的优势和潜力。//[AS]《MusicMagus: Zero-Shot Text-to-Music Editing via Diffusion Models》 No 48. ollama-ui：用于Ollama的简单HTML界面，支持定制API URL、提供Chrome扩展、支持多种语言，如JavaScript、HTML和CSS No 49. [CL]《BlackMamba: Mixture of Experts for State-Space Models》 No 50. 提供 Docker 化 Python 开发环境模板的库，可通过环境变量进行高度定制化，模板通过环境变量实现环境设置的无缝定制和修改，包括 Python 版本、虚拟环境名称、安装库、设置环境变量等
No 1. 那些第一次离今天有多远： 第一条 Sora 视频：2 天 第一次 ChatGPT 聊天：1 年 第一条 TikTok 视频：7 ...... No 2. François Chollet：人们往往陷入两种欠考虑的极端观点： 1、“语言模型(LLM)就是通用人工智能(AGI)，能像大脑一样工作，能进行推理等。” ...... No 3. 从零开始构建扩散模型理论 No 4. 改进LoRA:从头开始实现权重分解低秩自适应(DoRA) No 5. '微信机器人 - 微信机器人是一个创新的基于Python 3.11开发的项目，通过结合ChatGPT模型和微信原生API，为用户提供智能聊天、自动绘画、自动发朋友圈、自动发视频号等多样的API集成服务，旨在提升日常沟通效率和趣味性' ...... No 6. Qwen1.5-8x7b：基于Qwen1.5的专家混合模型，配套使用MoD数据集，采用多种数据源，如Bagel、OpenHermes等，共计约780,000个独特ShareGPT对话，以促进模型开发独特专家。利用微调和模型合并等技术，模型具有适应性和性能表现，虽然未能完全进行性能评估，但初步推理测试表明与Mixtral相当 No 7. Agents大列表 No 8. [LG] G-Retriever: Retrieval-Augmented Generation for Textual ...... No 9. [LG] BiLLM: Pushing the Limit of Post-Training Quantization ...... No 10. [CL] Debating with More Persuasive LLMs Leads to More Truthful ...... No 11. 基于YOLO-World+EfficientSAM的零样本目标检测与实例分割Demo No 12. KG-MM-Survey：收集了整合知识图谱(KG)和多模态学习的论文，主要研究两个方面：KG驱动的多模态(KG4MM)学习，KG支持多模态任务；以及多模态知识图谱(MM4KG)，将KG研究扩展到MMKG领域 No 13. 晚安～ [月亮] No 14. [CV]《Revisiting Feature Prediction for Learning Visual Representations from Video》 No 15. [LG] Shortened LLaMA: A Simple Depth Pruning for Large Language ...... No 16. LLM检索增强生成(RAG)相关资源大列表，包括论文、资源和工具等 No 17. 电子书：《概率论沉思录：科学逻辑》（前三章） No 18. [AS]《MusicMagus: Zero-Shot Text-to-Music Editing via Diffusion Models》 No 19. 用于计算机器学习评估中的置信区间，主要特色在于采用bootstrapping计算置信区间，适用于不同应用场景且无需对数据分布做出假设，能够正确处理非独立同分布的数据集 No 20. 几篇论文实现代码 No 21. 收集关于OpenAI GPT的精彩提示，旨在帮助用户发现和分享顶尖GPT的秘密技巧。主要特色包括顶级GPT提示的揭示，社区共享以及提示展示，为AI创作者提供共同成长和创新的平台 No 22. [LG] Decoding-time Realignment of Language Models 网页链接 提出一种名为'解码时重对齐'(DeRa)的方法，解决了在人工反馈驱动的语言模型(LM)对齐中调整正则化强度的问题。传统对齐技术需要多次训练以寻找最佳正则化水平，这在大型模型上代价巨大。DeRa通过在解码时调整参考模型与对 ...... No 23. AI创作工具爆发的时代，我们该何去何从 No 24. AthenaDB：简单、无服务器、分布式的向量数据库，可用作API。采用Cloudflare Workers AI、D1和Vectorize编写。主要特色包括：简洁的API端点用于插入、查询、检索和删除向量文本数据；无需将文本存储在数据库中即可生成嵌入；分布式数据库，数据在多个数据中心进行复制 No 25. Streamline Analyst: 由大型语言模型驱动的先进开源应用，旨在彻底改变数据分析方式，能自动完成诸如数据清洗、预处理以及识别目标对象、划分测试集、选择最适合数据的模型等任务，并提供无缝的结果可视化和评估 No 26. [LG]《Recovering the Pre-Fine-Tuning Weights of Generative Models》 No 27. [CL]《How to Train Data-Efficient LLMs》 No 28. rust_kanban：用 Rust 编写的终端看板应用，可以帮助用户通过优先处理任务和更快实现目标来提高生产力，特色包括支持拖放卡片、垂直移动文本字段、云保存加密、撤销和重做操作、自定义颜色和主题支持等功能 No 29. Latent Scope：新型的工作流程+工具，用... No 30. 洗衣机是偷着下4K电影了吗？ [允悲] No 31. 'tt-zhipin - 头头直聘，仿Boss直聘实现。SpringCloud Alibaba 构建后端，React ...... No 32. Open-Source AI Cookbook：HuggingFace开源AI方案手册，涵盖了使用开源工具和模型构建AI应用和解决各种任务的方法 No 33. 早！[太阳] No 34. 早！[太阳] No 35. 提出一种新的攻击向量“Spectral DeTuning”，用于恢复生成模型的Pre-Fine-Tuning权重，揭示了基于低秩自适应(LoRA)微调模型存在的安全漏洞，并通过这种迭代低秩矩阵分解技术，能在不需要训练数据和不经过模型推断的情况下，高效精确地恢复原始模型权重。//[LG]《Recovering the Pre-Fine-Tuning Weights of Generative Models》 No 36. VIOLA：多功能的 C++ 库，用于视觉/机器人系统，旨在成为视觉/机器人包的通用基础库 No 37. BlackMamba模型通过融合无注意力机制的Mamba块和MoE，创新性地结合了线性时间和内存复杂度的长序列处理能力与稀疏路由的推理效率，显著减少了训练FLOPs，且开源了实现代码和模型权重，对长序列语言模型的建模提出了新的解决方案。//[CL]《BlackMamba: Mixture of Experts for State-Space Models》 No 38. 用合成数据进行微调：蒸馏与自我改进 No 39. TheProfessor-155b：一个特殊的大型... No 40. nomic-embed-text-v1.5是Nomic Embed的改进版本，利用了Matryoshka表示学习，允许在嵌入大小与性能之间灵活权衡。通过引入Matryoshka表示学习，该项目在提高嵌入质量的同时，提供了更大的嵌入尺寸和序列长度 No 41. Flowershow template：Obsidian笔记发布模板，轻松将Markdown文件转换为优雅的网站，基于React、Next.js和Tailwind构建 No 42. 通过引入V-JEPA模型族，展示了利用特征预测作为无监督学习的单一目标，能在视频数据上学习到多功能且有效的视觉表示，并且在多个下游任务中取得了优异的性能，特别是在需要精细时序理解的任务上，显示出了现有方法中的最佳性能，同时在训练效率上超越了传统的像素预测方法。//[CV]《Revisiting Feature Prediction for Learning Visual Representations from Video》 No 43. InfiAgent: 开源Agent框架，旨在支持从零开始构建Agent演示，支持代码执行、API调用、批量推断和沙盒管理 No 44. [CV] BlockFusion: Expandable 3D Scene Generation using Latent ...... No 45. 月之暗面创始人杨植麟：个性化交互是AI-Native产品的核心价值 No 46. Stability AI发布图像生成模型Stable Cascade No 47. 提出MusicMagus，一种创新的基于文本的音乐内部音轨编辑方法，通过预训练的扩散模型实现零样本编辑，并在风格和音色转换等关键任务上超越现有方法，展现出在实际音乐编辑应用中的优势和潜力。//[AS]《MusicMagus: Zero-Shot Text-to-Music Editing via Diffusion Models》 No 48. ollama-ui：用于Ollama的简单HTML界面，支持定制API URL、提供Chrome扩展、支持多种语言，如JavaScript、HTML和CSS No 49. [CL]《BlackMamba: Mixture of Experts for State-Space Models》 No 50. 提供 Docker 化 Python 开发环境模板的库，可通过环境变量进行高度定制化，模板通过环境变量实现环境设置的无缝定制和修改，包括 Python 版本、虚拟环境名称、安装库、设置环境变量等