Cointime

扫码下载App
iOS & Android

深度思考:为什么说ChatGPT是网上所有文本的模糊图像?

个人专家

众所周知我是一个GPT爱好者,已经将其融入工作和生活的方方面面。 但GPT也不是万能的,我们需要认清其本质,才能更好使用其能力。强烈推荐特德·姜这篇极具洞察的文章《ChatGPT是网上所有文本的模糊图像》,独特见解发人深省。我总结了3个点,欢迎阅读。

特德·姜,华裔科幻作家,毕业于布朗大学计算机系,其短篇小说《你一生的故事》在2016年被改编成电影《降临》 技术和科幻的双重背景,让其对ChatGPT具有了独特见解。

TL;DR

  • ChatGPT是网上所有文本的有损压缩
  • 警惕「美丽的模糊」
  • 「原创想法的拙劣表达」好于「清晰表达的非原创想法」

1、ChatGPT是网上所有文本的有损压缩

如果将互联网上的所有文本看做是原件,考虑到处理速度和准确度,ChatGPT 实际上是这些文本的有损压缩后一个自然语言交互接口。既然是有损压缩,就会抛弃一些细节,甚至关键信息。

关于有损压缩可能会导致的问题,作者举了一个形象的例子:2013 年德国一家建筑公司复印了一张房子平面图,三个房间都有一个标签来说明其面积:14.13,21.11和17.42平方米。然后在复印件中,所有三个房间都被标记为14.13平方米。

经过调查发现,这台施乐复印机的工作原理是,先把文档扫描为数字图像,然后再进行打印。为了节省空间,扫描为数字图像时使用了一种被称为 jbig2 的有损压缩格式。复印机判断 3 个房间的面积标签非常相似,所以它只存储了其中一个,然后在打印时对所有 3 个房间都重复使用了这一个标签。

施乐复印机使用有损压缩格式而不是无损格式,这本身并不是一个问题 问题是如果只是打印出模糊的照片,每个人都会知道这不是原件的准确复制品,但复印机打印出了清晰但不准确的图片,可能会对使用者产生误导

作者认为,在我们使用 OpenAI 的 ChatGPT 和其他类似大语言模型时,需要对这个例子铭记于心。ChatGPT 保留了万维网上的大部分信息,就像 JPEG 保留了高分辨率图像的大部分信息一样。但是,如果你要寻找精确的比特序列,你无法找到它,你得到的只是一个近似值。

可以看到,在 OpenAI 论文的最新真实性评估中,虽然 GPT-4 比过往模型高很多,但仍然有不低的概率生成错误答案(特别是在科技、代码和商业领域),我们需要小心。

2、警惕「美丽的模糊」

我们对世界的认知,本质上也是对信息的接收和压缩。我们识别和抛弃不重要的信息,留下重要的信息,同时在这个过程中锻炼和使用了决策能力。都是对信息的有损压缩,我们和ChatGPT有何不同? - 我们对信息的压缩,是建立在对事实的理解上,最后留下的是「模糊的正确」 - ChatGPT 并没有真正的「理解」信息,建立在统计规律上输出「美丽的模糊」。 再看 2 个形象的例子:

  • 如果让 ChatGPT 计算 3457 * 43216,会给出错误答案 149299312(正确答案149397712) 最后一位正确是因为有很多以 6 和 7 结尾数字的乘法让 ChatGPT 学习,但因为其并没有真正理解算术原理,所以最后给出是错误答案。
  • 对文本的任何分析都会揭示,“供应不足”这样的短语经常出现在“价格上涨”这样的短语附近 当被问及有关供应不足的问题时, AI可能会给出包含价格上涨的回答。如果AI已经编译了大量经济术语之间的相关性,多到可以对各种各样的问题提供合理的回答,我们是否应该说它实理解了经济理论?显然没有。

ChatGPT 擅长产生美丽的答案,但美丽≠正确。我们必须时刻铭记这一点,ChatGPT 输出的结果可能会漂亮清晰但不准确,要识别它们就需要将它们与原件进行比较,否则就有可能基于瞎编的内容进行错误的决策。下面 bing 产生的这个答案,就是典型的「美丽的模糊」。

3、「原创想法的拙劣表达」好于「清晰表达的非原创想法」

有一种观点,让 ChatGPT 生成的文本作为作家在创作原创作品时的起点,让作者把注意力集中在真正有创意的部分,这样可行吗? 作者认为,以一份模糊的非原创作品作为起点,并不是创作原创作品的好办法。

如果你是一个作家,在你写原创作品之前,你会写很多非原创的作品。花在非原创工作上的时间和精力不会被浪费。相反,正是它让你最终能够创作出原创的作品 花在选择正确的词汇和重新排列句子上的时间,教会了你如何通过文章传达想要表达的意思。

让学生写论文不仅仅是一种测试他们对材料掌握程度的方法,这给了他们表达自己想法的经验。如果学生从来不用写我们都读过的文章,他们就永远不会获得写我们从未读过的东西所需的技能。

那是不是脱离学生身份后,就可以安全地使用 ChatGPT 等大语言模型提供的模板了呢? 然而并不是。想要表达自己想法的挣扎并不会在你毕业后消失。每当你开始起草一篇新文章时,这种挣扎就会出现。有时候,只有在写作的过程中,你才能发现自己最初的想法,这点非常关键。

有些人可能会说,大语言模型的输出看起来与人类作家的初稿没有太大不同,但这只是表面上的相似 你的初稿不是「清晰表达的非原创想法」;它是「原创想法的拙劣表达」,它伴随着你无定形的不满,你意识到它所说的和你想说的之间的距离。

这是在重写时能够指导你的东西,这是当你开始使用人工智能生成的文本时所缺乏的东西。基于「清晰表达的非原创想法」,会很容易让人失去想法;而从「原创想法的拙劣表达」开始,逐步打磨,最终会收获「原创想法的精确表达」,原创可能会成为玉石,非原创只会流于泛滥。

总结 2 点Take Away:

  1. ChatGPT是网上所有文本的有损压缩,我们必须时刻铭记这一点,警惕把「美丽的模糊」当做准确信息,影响判断和决策
  2. 2. 在挣扎和拙劣表达中发现「原创想法」,同时提升自己的表达能力,将其打磨成玉石 训练想象力、决策和沟通能力,打造机器无法拥有的竞争力
评论

所有评论

推荐阅读

  • 李在明:AI重塑全球产业格局 韩国需大胆投资

    8月4日,韩国总统李在明周三表示,人工智能(AI)驱动的产业变革正在重塑全球产业格局,并强调韩国需要采取“大胆”和“迅速”的投资行动,以应对这一变化。李在明是在出席韩国产业通商资源部等政府部门政策汇报会议开幕式时发表上述言论的。李在明表示:“随着人工智能的出现,世界正经历着一场重大变革,产业结构正在重塑。在这样的时刻,我们需要的是大胆的决策、投资和迅速的行动。”他强调了提升韩国竞争力的重要性,并指出政府的职责是识别趋势、规划未来并为创新奠定基础。他还补充说,确保稳固的产业增长潜力和强大的能源安全体系,是建设一个能够抵御外部环境变化的国家的关键。李在明还表示,政府应不懈努力实现出口市场和供应链多元化。(金十)

  • 日股收涨0.32%,铠侠涨超4%

    8月4日,日经225指数收盘上涨202.63点,涨幅0.32%,报63957.53点,铠侠涨超4%。

  • 韩国综合指数收涨1.62%,韩国创业板指涨近6%,连续3个交易日走强

    8月4日,韩股收涨,韩国综合指数涨1.62%,报6358.95点,盘中一度承压跌跌超2%;韩国创业板指(KOSDAQ)收涨5.88%,连涨3个交易日走强并在盘中触发买方程序化交易暂停机制。个股中,SK海力士微涨0.64%,三星电子涨0.21%。

  • 惠普华硕宏碁等PC制造商开始采用长鑫存储芯片

    8月4日,据日经亚洲,AI基础设施需求飙升引发存储芯片等零件大规模短缺,惠普、华硕及宏碁等龙头个人电脑(PC)制造商开始采用长鑫存储的DRAM芯片,目前仅属小规模应用。 消息人士指,多家主要PC制造商已于今年中完成长鑫存储DRAM芯片的验证流程,并已开始在笔记本电脑中小规模应用,但目前使用量及所采用型号非常有限,因长鑫将大部分产能优先供应华为等中国内地客户。另外,PC制造商对使用长鑫芯片态度较为克制,可能忧虑采用中国芯片会触怒全球主要存储芯片制造商美光、三星电子及SK海力士。

  • 韩股最大的危机不是暴跌,而是市场信任正在崩塌

    8月4日消息,韩国股市因剧烈波动和政策失误面临信心危机:KOSPI在27个交易日内暴跌40%,涨跌幅超5%交易日达33次,波动远超日经恒生。杠杆ETF产品推动机械调仓,SK海力士股价变动时成交占比40%,放大市场风险。散户受损严重,36万账户强制平仓且62%年龄低于35岁;养老金反周期操作失败加剧问题。AI产业优势虽存,但制度风险如不稳定环境削弱吸引力,政府需重建信任修复机制。 关键要点: 1.韩国杠杆ETF设计放大波动,在股价变动时机械调仓贡献高交易占比如40%,降低风险调整回报驱离外资。 2.政策鼓励散户参与却风险管控不足,导致36万账户平仓其中62%年轻群体,深度损害信任基础。 3.AI产业需求无法掩盖韩国市场制度缺陷,投资者关注稳定公平环境要求政府信用修复重塑信心。

  • 苹果在商业秘密案中申请针对OpenAI的初步禁令

    8月4日消息,苹果(AAPL.O)向美国一名法官申请了初步禁令,要求禁止两名前员工和OpenAI访问、获取、使用或披露所谓的机密信息,同时该公司正就其商业秘密案继续推进诉讼。苹果上月起诉了OpenAI及两名目前在OpenAI工作的前员工,指控其盗用苹果的商业秘密,以助OpenAI进军消费类硬件领域,这使得两家公司之间本已暗流涌动的紧张关系急剧升级。(金十)

  • 美伊官员称伊朗与阿曼接近达成霍尔木兹海峡航行协议

    8月4日,美国方面3日援引伊朗和美国官员的话称,就霍尔木兹海峡航行,伊朗和阿曼正接近达成协议。美国方面消息显示,根据双方商讨的协议,进入波斯湾的船只将从靠近伊朗海岸且由伊方控制的一条航道行驶,而驶出的船只将取道一条靠近阿曼的航道。多名伊朗官员说,往来船只需要缴纳“服务费”,这笔收入将由伊朗和阿曼平分。不过,一名了解谈判情况的美方官员称,伊方官员表述“不准确”,而且霍尔木兹海峡任何“临时”航道的设立都无须伊方批准,不会对过往船只收费。(央视新闻)

  • 美伊官员称伊朗与阿曼接近达成霍尔木兹海峡航行协议

    8月4日,据央视,美国方面3日援引伊朗和美国官员的话称,就霍尔木兹海峡航行,伊朗和阿曼正接近达成协议。美国方面消息显示,根据双方商讨的协议,进入波斯湾的船只将从靠近伊朗海岸且由伊方控制的一条航道行驶,而驶出的船只将取道一条靠近阿曼的航道。多名伊朗官员说,往来船只需要缴纳“服务费”,这笔收入将由伊朗和阿曼平分。不过,一名了解谈判情况的美方官员称,伊方官员表述“不准确”,而且霍尔木兹海峡任何“临时”航道的设立都无须伊方批准,不会对过往船只收费。(金十)

  • 科创50指数涨超4%

    8月4日,科创50指数涨超4%,成分股中,源杰科技涨超13%,芯原股份涨超10%。

  • 7月美股半导体股票承受着“危机级别”波动

    8月4日,美股市场半导体指数SOX在7月的所有22个交易日中,日内波动幅度均至少达到2%,这一数据追平了2020年的纪录。在此之前,如此漫长的大幅波动周期唯有在2008年金融危机期间才发生过。与此同时,SOX指数在7月份暴跌21%,创下自2008年10月以来最惨烈的单月表现,导致该指数的市值蒸发2.2万亿美元。受此影响,该指数的60天历史波动率飙升至约66%,创下自2020年疫情以来的最高水平,当时的最高峰值约为85%。相比之下,在2008年金融危机期间,该波动率曾触及约75%。