或许每一次历史潮流的开场,总是这么熙熙攘攘,年初被ChatGPT引爆的AI大型语言模型(LLM),又迎来一位重磅入局者——StabilityAI。
4月19日,推出火爆AI绘画赛道StableDiffusion的开源模型的公司StabilityAI,宣布“加入战局,叫板ChatGPT”,推出开源大语言模型StableLM。
在StabilityAI公告大语言模型的网页上,一只体现了StableDiffusionXL作画特点的绿鹦鹉先于语言大模型的介绍出现了,大语言模型的"StableDiffusion”时刻或许就这样不期而至。
对于大语言模型StableLM,网站介绍道:
目前StableLM的Alpha版本中拥有30亿和70亿参数。
已经可以从GitHub等开源平台上下载:https://github.com/stability-AI/stableLM/
津巴布韦央行发行价值140亿津元的黄金支持数字货币:金色财经报道,市场消息:津巴布韦央行发行了价值140亿津元的黄金支持数字货币。[2023/5/12 14:59:47]
StabilityAI后续还将推出150亿至650亿参数的版本。
与StableDiffusion类似,开发者可以在遵守协议的情况下,将这个模型用于商业或研究活动。
抨击OpenAI不够“open”的StabilityAI,能稳定发挥,推出超越ChatGPT的大语言模型吗?
大语言模型的“安卓时刻”
StabilityAI成立于2019年,是生成式AI领域最知名的公司之一。
在ChatGPT“占领”的大语言模型市场上,不少人期待着类似StableDiffusion的开源模型能尽快出现。
大语言模型的"StableDiffusion”时刻可能在十几个小时前到来了。
加拿大金融公司Evolve已任命Coinbase为数字资产子托管人:2月23日消息,加拿大金融公司Evolve已任命Coinbase为所有数字资产的子托管人,涉及在多伦多证交所上市交易的1.48亿美元的数字资产ETF。
金色财经此前报道,2021年2月17日,Evolve比特币ETF有条件地获加拿大安大略省证券委员会批准在多伦多证券交易平台交易。[2023/2/23 12:24:23]
AI军备竞赛的开启可以追溯到去年7月,在OpenAI的绘画模型DALL-E2之后,StabilityAI发布的模型图像生成模型StableDiffusion,因其源代码开源,且对公众开放使用,在当时吸引了更多的注意力。
StabilityAI把StableLM的发布比作了StableDiffusion,这让AI可以继续服务所有人:
2022年,StabilityAI推动了StableDiffusion的公开发布,这是一款革命性的图像模型,代表了透明、开放、可扩展的AI。
这次我们发布开源StableLM模型,想继续让所有人都能使用AI。
我们的StableLM模型可以生成文本和代码,并将支持一系列下游应用。
正如StabilityAI的CEOEmadMostaque所说,他们最新发布的LLM代表着StabilityAI的初心“开源”:
FTX破产促使美国立法者将审查重心放于SEC主席Gary Gensler之上:12月15日消息,由于FTX破产及其创始人SBF被捕,美国立法者开始将审查重心放在美国证券交易委员会主席Gary Gensler身上。
上周Gary Gensler出席众议院金融服务委员会听证会的作证没有令国会满意,监督美国证券交易委员会的参议院银行委员会也称没有看到Gary Gensler给出明确的问题解决计划和更多行动,立法者还要求Gary Gensler必须在国会作证并回答有关其监管失败成本的问题。
根据Cornerstone Research数据显示,美国证券交易委员会在2013年至2021年间对未注册Token提起了44次诉讼,但比例远低于未注册Token数量的1%。(《华盛顿邮报》)[2022/12/15 21:45:58]
现在每个人都可以在HuggingFace上测试驱动这个7B版本的聊天机器人。
EmadMostaque认为,LLM不应在大公司内部进行训练,社区系统的开放性也至关重要,需要更多监督,巨头控制流量算法的游戏规则——是对人们的操纵。
CZ否认“与SBF开战”,称其公布清仓FTT的决策仅为回应市场猜测:11月8日消息,Binance创始人 CZ 在社交媒体上发文表示,公布清仓 FTT 的事仅为回应市场上出现的猜测和疑问,该行为秉承公开透明的原则,并不是什么阴谋论。其个人将心思专心投入到了加密建设中,并非大家猜测的“与SBF开战”。
注:CZ 原推文曾表示“发布清仓决策是压垮骆驼的最后一根稻草”,且此后再次发文公布 Binance 平台 ETH 余额数量。故市场猜测其“无意开战”澄清言论并非完全属实。[2022/11/8 12:30:14]
EmadMostaque来源:StabilityAI
因此,StabilityAI在今年年初与HuggingFace等几个初创公司一起资助了研究中心EleutherAI,而StableLM便建立在EleutherAI的开源模型上:
StableLM建立在我们与非营利性研究中心EleutherAI一起开源的早期语言模型基础上,这些语言模型包括GPT-J、GPT-NeoX和Pythia等等。
此次大模型也是在ThePile开源的数据集上进行的训练,该数据集结合了PubMed、StackExchange和维基百科等网站的的文本样本,其规模是ThePile的三倍,包含1.5万亿个内容标记。
BCapitalGroup已关闭其2.5亿美元早期基金,将关注Web3等新兴主题:金色财经报道,根据该公司的一份声明,总部位于新加坡和美国的风险投资公司B Capital Group已关闭其25亿美元的早期Ascent Fund II。Ascent Fund II是B Capital的第一只专注于早期阶段的基金,投资于全球A轮融资的前种子,重点关注美国和亚洲的初创企业。
根据向美国证券交易委员会(SEC)提交的文件,今年3月,据报道,B Capital从101名投资者那里为其第三只全球增长基金筹集了至少11亿美元。该基金的目标是20亿美元,B Capital管理着65亿美元的资产。近几个月来,该公司还任命了大量高层人员,以帮助管理其扩大的投资组合。仅在2月份,它就任命了三名合伙人,Matt Levinson负责金融科技、区块链和房地产投资、Karan Mohla在印度和东南亚的早期投注、Adam Seabrook对数字健康和相关领域的后期投资。[2022/7/20 2:24:28]
StabilityAI表示,正式因为这个丰富的数据集,尽管参数规模和GPT-3没有可比性,但StableLM在交流和编程方面都展现了“惊人的高性能”:
尽管StableLM参数规模只有30亿至70亿,但性能非常好,下面是例子:
在这个例子里,StableLM回到了有关“对于从高中毕业的朋友你回说些什么?”以及“写一封邮件”的请求。
在这个例子里要求该模型写一个“计算生命意义的C语言程序”,但该模型表示无法完成此项任务,但写了一个计算生命长度的程序。
Mostaque在Twitter上表示,他相信StableLM及其训练数据会随着时间而变得更好,没有人知道这个模型可以被优化到什么程度:
我知道现在还有很长的路要走,这只是一个开始。我认为我们可以在接下来的3-6个月内让该模型变得和StableDiffusion一样有用,而在接下来的几年里,发展将是惊人的。
OpenAI不够Open,StabilityAI够稳吗
前不久,马斯克批评OpenAI背离了开源、非盈利的初衷,这是OpenAI一直以来面临的争议,也是StabilityAI“暗戳戳”的讽刺OpenAI的要点。
尽管OpenAI不够开放,但GPT-4无疑是当下最好用的大语言模型。而够开放的StabilityAI,其语言模型StableLM够稳吗。
要知道,目前StableLM的Alpha版本拥有30亿和70亿参数,而GPT-3.5模型的参数量为2000亿。
有网友称,StabilityAI并没有在公告上说明StableLM当前的局限性。
该模型是否存在与其他模型一样倾向于编造事实?是否会经常答非所问?
媒体分析认为,该模型基于ThePile训练,而ThePile数据集内存在大量不雅用语,因此对话过程可能会让用户不适。
还有网友表示,他尝试在HuggingFace上测试这些模型,但每次都遇到“满负荷”的问题,无法成功在前端上运行,这很可能与模型的大小及受欢迎的程度有关。
“大语言模型是否应该开源”也成了近期争论的焦点。有研究人员认为,类似StableLM等开源模型的发布,很可能被用于,发送钓鱼信息或协助恶意软件攻击等不良目的。
但StabilityAI认为,开源模型的出现可以协助研究人员识别潜在风险,并制定一些列保护措施。
StabilityAI的营收困境
更严重的问题是,StabilityAI或许正面临营收困境。
最近有媒体报道称,StabilityAI正在以惊人的速度烧钱,但却没有明确的盈利途径。而且在竞争激烈的AI赛道,还面临着一众初创企业和科技巨头的“围剿”。
Meta此前发布开源大语言模型LLaMA,使得越来越多的公司有望在开源模型基础上定制自己的大模型,人工智能也正在迎来“安卓时刻”。
StabilityAI现在正在寻找新的高管人才,希望他能在恶劣的条件下给公司带来收入,以解决当前“疯狂烧钱、营收可怜”的窘况。
去年底,StabilityAI宣布融资1.01亿美元,并称StableDiffusion已成为当前可用性最高的开源模型。
据《福布斯》的数据,每天约有有1000万人使用?StableDiffusion——比使用OpenAI的DALL-E2的人数还要多。同时,StabilityAI还提供面向消费者的产品——DreamStudio,目前拥有来100万名注册用户。
但训练模型所需的计算资源和成本让StabilityAI不得不探索新商业模式。Mostaque曾在Twitter上回复一位用户时说:
“实际上,我们模型使用了256个A100显卡,总共15万小时,所以按市场价格计算为60万美元。”
StabilityAI去年融到的1亿美元至今已经“烧”掉大半。
还有一个不可忽略的事实是,其竞争对手Midjourney已经成为互联网上事实上的图像生成模型的领跑者,甚至一定程度上击败了OpenAI的DALL-E。
当前,有消息称,StabilityAI正在谋求新一轮融资,希望能将公司的估值涨至40亿美元。StabilityAI能否扭转局面,筹集到足够的资金来维持局面,还有待观察。
?来源:元宇宙之心
标签:STATABLITTABINode All-StarETNA MetabolismSHIBLITE币Portability
原文作者:MaryLiu,比推BitpushNews当地时间4月18日,美国证券交易委员会主席GaryGensler出席众议院金融服务委员会听证会,为该机构的激进监管做法辩护.
1900/1/1 0:00:00头条▌SEC主席:加密货币交易所应依法登记,合规运作金色财经报道,美国证交会主席根斯勒表示,加密货币交易所应当在美国证交会注册登记,并遵守其各项规定,同时妥善处置好其所存在的利益冲突问题.
1900/1/1 0:00:00在过去的30天里,加密研究员@ThorHartvigsen密切关注着风险投资基金(VC)和聪明的投资者?许多这些投资者的资产价值超过1亿美元?.
1900/1/1 0:00:00出处:香港Web3嘉年华演讲嘉宾:蔡钟辉,香港证券及期货事务检查委员会中介机构部临时主管(金融科技咨询小组主席)编译:Ehan吴说区块链早上好。很荣幸受邀在这个精彩的节日上发言.
1900/1/1 0:00:00作者:西柚来源:ChainCatcher原标题:以太坊上海升级,老牌DeFi应用如何切入LSD赛道分一杯羹??以太坊质押或将催生千亿规模的LST,正在重构和改变传统DeFi应用的收入结构.
1900/1/1 0:00:00文/?Flowslikeosmo,加密分析师;译/金色财经xiaozouSui?Network是融资最多的生态系统之一,融资超3亿美元,估值为20亿美元.
1900/1/1 0:00:00