Workflow
Thinker
icon
搜索文档
Murati翁荔陈丹琦公司发布首个产品,让大模型微调门槛暴降,要重新发明一个OpenAI
量子位· 2025-10-02 03:26
产品发布与公司定位 - Thinking Machines Lab发布其首个产品Tinker,这是一个用于微调语言模型的灵活API,旨在使模型微调过程像修改Python代码一样简单[1][12] - 公司联合创始人翁荔指出,当前GPU价格昂贵且基础设施设置复杂,Tinker作为高质量研究工具旨在提高研究生产力,是解决该挑战的第一步[5] - 公司使命是让更多人能够研究前沿模型并根据自身需求进行定制,Tinker通过让研究人员控制算法和数据而无需管理基础设施来实现这一目标[13][14] 产品Tinker的技术特点与优势 - Tinker让研究者在微调过程中保留90%的控制权,主要涉及数据、损失函数和算法本身,同时自动处理基础设施、LLM的前向/后向传播及分布式训练等复杂问题[8] - 产品首批主要支持Qwen3和Llama3系列模型,从小模型切换到大模型仅需在Python代码中修改一个字符串[15] - Tinker的API提供`forward_backward`和`sample`等底层训练步骤,并自动处理调度、扩展和错误恢复,还使用LoRA技术让多个训练任务共享GPU以降低成本并支持更多实验并行运行[17][22] - 除了云托管服务,公司还开源了Tinker Cookbook库,提供各种现成的后训练方法实现[24] - 微软研究员发现Tinker未采用GRPO方法,而是使用经典的REINFORCE算法配合优势函数,且没有梯度裁剪,其梯度更新策略简化为:新参数 = 原参数 + 学习率 × 优势值 × 对数概率的梯度[27][28] 市场反馈与行业影响 - AI大神卡帕西评价该产品“很酷”,AI基础设施公司Anyscale的CEO等beta测试者认为Tinker在抽象化和可调性之间取得了卓越的平衡[8][30] - 普林斯顿、斯坦福、伯克利和Redwood Research等研究团队已使用Tinker取得成果[30] - 卡帕西指出,社区正在探索微调相比直接提示大模型的优势,早期迹象表明微调能有效缩小任务范围,特别是在训练样本数量大时,微调小模型处理特定任务可能优于构建复杂的少样本提示[31] - 随着AI应用向更大规模流水线发展,其中多个大模型协作,微调可能在更多环节比提示更优,Tinker的简易性有助于实验出最佳方案[32][33] 公司战略与行业动态 - 有消息称Thinking Machines Lab正尝试“重新发明一个OpenAI”,旨在重建OpenAI在规模变大、变得官僚主义之前的版本[10] - 创始人Murati表示,公司将是一家公开分享研究成果并给予研究人员更多自由的公司[11] - 与此同时,OpenAI正转向更类似Meta的社交方向,其ChatGPT应用代码中发现了“社交模式”相关功能,包括来自“其他用户”的推送通知、群聊模式以及设置头像和昵称的功能[36][37][38][39][41]
赤子城科技20250710
2025-07-11 01:05
纪要涉及的行业和公司 行业:泛娱乐社交、休闲手游、社交电商 公司:赤子城科技、蓝城兄弟 纪要提到的核心观点和论据 核心业务与财务表现 - 核心业务为社交业务和创新业务,社交业务占总收入 91%,含泛人群社交和多元人群社交 [2][3] - 过去五年复合增长率 67%,调整后 EBITDA 为 50%;2024 年中东北非收入同比增约 66%,搜狗营收增约 200%、利润超 400%,TopTop 营收增约 100% [2][3] - 2024 年营收同比增约 54%,金条 EBITDA 为 43%,净利润 4%,归母净利润降 6.3% [9] - 今年 6 月 3 日将全年收入指导从 65 亿提至 68 - 71 亿,同比增幅从 30%提至 35% - 40%;明年收入指导预期提至 85 亿 [4][12][13] 中东北非市场发展 - 该地区未来五年复合增速预计达 20.7%,人口年轻,35 岁以下占 70%,海湾六国人均 GDP 高、付费能力强,穆斯林群体线上社交需求大 [5] - 公司泛区域社交产品在此首次宣发,再复制到其他地区,在埃及开罗有最大本地化运营中心,600 多名员工占海外员工 90% [5] 创新业务亮点 - 2021 年底进入休闲手游赛道,2022 年 6 月宣发自研手游 Alice Dream,2023 年 9 月月流水超 800 万美元,2024 年 5 月近 1000 万美元,24 年中东北非收入同比增约 66% [2][6] - 去年自研游戏扭亏为盈,今年计划复制经验到新产品实现盈亏平衡 [6] 多元人群社交市场潜力 - 预计到 2026 年 LGBTQ 人群达 6.6 亿,高学历、高收入、注重品质、可支配收入多 [7] - 蓝城兄弟整体 MAU 达 750 万,DAU/MAU 为 50%,次月留存率长期 75% [2][7] 未来发展战略 - 大力发展海外市场,提高渗透率和盈利能力,探索进入新兴市场,寻求并购机会 [4][8] - 复制 Alice Dream 经验赋能新产品,打造长生命周期爆款,投入资源打造旗舰产品 [4][8] 产品表现与驱动因素 - 截止今年 5 月,较 4 月环比增超 10%,TopTop 和 Sogou 高速发展,Sogou 同比超三位数,TikTok 高双位数增长 [11] - 指导预期提升因 TopTop 和 SOGO 表现好、新孵化产品进展达预期 [13] 竞争格局与市场动态 - 泛人群社交产品中,Miko 直播赛道前三,语聊房优厚中东前二,淘票本前二,Sogou 全球第一 [15] - TikTok 活跃于秀场直播赛道,与公司社交业务重叠少 [16] 各业务增长策略与展望 - 多元人群社交业务国内维稳、海外发展,今年新品牌 He Said 预计同比增长,蓝城整体收入预计增 0 - 5% [18] - 泛人群社交扩展完善产品矩阵,创新业务下半年推两款休闲手游 [28] 其他重要但可能被忽略的内容 - 目前孵化 5 - 6 款产品,1 - 2 款潜力大,孵化池收入占泛人群社交收入超 10% [21] - 6 月初介绍 AI CODING 产品 IP,7 月上线,针对小企业家等群体,公司在 AI 社交和游戏领域布局 [23] - 泛人群社交旗舰产品涉及主播分成,比例依行业标准,各产品不同 [24] - 目前无接入 AI 主播计划,平台主播均为真人 [25] - 中东战争对业务几乎无影响,用户集中在海湾六国,历史上战争曾有正面影响 [26][27] - 公司优先投资主业,积极找收购标的,年初至今回购近 2 亿港币,今明两年累计回购 4 亿港币 [29]