要文快报！AI安全需未雨绸缪 月之暗面CEO杨植麟谈长期布局

AI安全需未雨绸缪 月之暗面CEO杨植麟谈长期布局

北京讯（记者 张楠楠）6月14日，在2024北京智源大会上，月之暗面CEO杨植麟与百川智能CEO王小川、智谱AI CEO张鹏、面壁智能联合创始人兼CEO李大海共同出席“尖峰对话：通往AGI之路”环节，探讨了人工智能安全等话题。

杨植麟表示，AI安全非常重要，虽然它可能不是当前最紧迫的问题，但却是需要我们提前去准备的。“随着模型的不断优化和Scaling Law（尺度定律）的发展，每N个月算力乘以十倍，智能水平也会得到提升，这是一个逐渐适应的过程。”他指出，AI安全不一定是当前最大的矛盾或者最紧急的事情，但肯定是长期储备。

杨植麟认为，在AI安全方面，最重要的是要关注以下两个方面：

• **模型的鲁棒性。**模型可能会因为用户本身存在恶意意图，通过prompt（提示词）让模型去做一些本来不应该做的事情。因此，需要提高模型的鲁棒性，使其能够抵御恶意攻击。
• **模型的动机。**模型本身是否有自己的motivation（动机），这与训练方式相关。需要在模型的底层去注入例如AI的“宪法”、功能去框定其行为，无论用户给什么指示，都不会违背这个“宪法”。

杨植麟强调，AI安全是一项复杂的系统工程，需要产学研各界共同努力，从技术、制度、伦理等多个层面构建起全方位的安全体系。

关于月之暗面

月之暗面成立于2021年，是一家专注于大模型研发和应用的公司。公司拥有业界领先的大模型技术，并已在多个领域落地应用，包括智能客服、内容生成、辅助决策等。

媒体联系

张楠楠

月之暗面

[移除了电子邮件地址]

算法操纵舆论？ 央视曝光AI写稿公司 日产7000篇虚假信息

北京 - 近日，央视《3·15晚会》曝光了长沙营智信息技术有限公司（以下简称“易撰网”）利用AI技术批量生产虚假信息的案件。据报道，易撰网开发了一套AI写稿系统，可以根据输入的关键词自动生成各种类型的文章，包括新闻、自媒体文章、营销文案等。该系统每天可生成高达7000篇内容，其中不乏虚假信息和谣言。

央视记者调查发现，易撰网的AI写稿系统可以生成各种耸人听闻的标题和内容，例如“某明星吸毒被抓”、“某网红产品致癌”等等。这些虚假信息被大量发布到网络平台，对社会造成了严重的影响。

针对央视的曝光，易撰网方面回应称，其平台提供的AI写稿功能仅供辅助创作，用户可以根据需要自行修改内容。然而，有专家指出，AI生成的内容的可信度难以判断，用户如果不仔细辨别，很容易被虚假信息误导。

事件引发担忧

易撰网事件引发了社会各界对AI技术被滥用的担忧。有专家表示，AI技术本身是中立的，但如果被用于制造和传播虚假信息，则可能对社会造成严重危害。

相关部门应加强监管

专家建议，相关部门应加强对AI技术的监管，制定相应的法规和标准，防止AI技术被用于非法目的。同时，也要提高公众的辨别能力，帮助他们识别虚假信息。

以下是一些对新闻的扩充：

• 据报道，易撰网的AI写稿系统使用了GPT-3等先进的自然语言处理技术。
• 易撰网的客户主要是一些自媒体平台和营销公司。
• 除了易撰网之外，还有其他一些公司也在开发类似的AI写稿系统。
• 有专家呼吁，应建立AI技术的“黑名单”，对被用于制造和传播虚假信息的AI技术进行封杀。

以下是一些新的标题：

• 警惕AI写稿泛滥：虚假信息何时休？
• AI操纵舆论？ 3·15晚会曝光AI写稿公司乱象
• 还网络一片清朗：治理AI写稿 势在必行