质量重于数量:平衡大型语言模型的算法透明度、问责制和知识产权
(CWW)在我们对推动算法革命的数据展开研究的过程中,算法透明度和问责制是核心原则。一些人可能误认为这种说法是在隐晦地呼吁公开知识产权。然而,经过细致入微的研究,我们发现了一个更加复杂的叙事,即大型语言模型和专有模型之间的区别。
大型语言模型是在综合文本数据集上训练而成的AI系统,其设计意图是根据输入内容生成类似人类的文本。“大型”一词体现了模型在参数数量和训练数据量上的规模。比如 OpenAI 的GPT-3在训练时运用了一个包含1750亿个海量文本参数的巨大模型。这些模型必须能够理解它们生成的文本,通过辨别训练数据中的模式来生成并输出预测结果。一个不变的原则是:只有综合全面的高质量训练数据才能使模型生成准确的预测结果。
与之相反的是,“专有模型”通常由特定实体或公司创建。其设计、结构和算法保护创建者的知识产权。这个词往往指的是蓝图可供公众使用、修改和传播的开源模型。值得注意的是,专有模型与大型语言模型没有本质区别,使用“专有模型”这个术语是为了强调模型的其他特征。
(资料图片)
以OpenAI的GPT-3为例,它既可以是大型语言模型,也可以是专有模型。网络安全行业给出了一个恰当的比喻:“垃圾进,垃圾出”。与网络卫生实践一样,为模型提供经过整理的高质量数据可以影响输出结果,在实现精准异常检测的同时推动创新。
那么如何防止数据中毒呢?关键在于用细致入微的数据采集和整理取代杂乱无章的数据积累。无论是专有模型还是开源模型,确保采集高质量的数据可以帮助提升模型输出结果的准确性。决定模型有效性的最终因素是数据的质量和相关性,而非数据的数量。
算法透明度要求明确算法的一般操作。例如贷款决策算法应说明其考虑的因素(收入、信用评分)及各项因素的权重。与之相对应的算法问责制则要求实体对其算法决策负责,尤其是当出现迹象表明结果带有偏差或差别时。
由于应用了机器学习,入侵检测系统(IDS)可监视网络是否存在潜在威胁或违反政策的情况。机器学习可以根据以往数据识别威胁,大大提升了IDS 的能力。但即便如此,透明度和问责制方面仍然存在挑战。
因此,算法透明度的“潜台词”是IDS 用户需要对决策依据具备一定的了解。例如,威胁信号的特征是什么?IDS如何区分正常活动和恶意活动?虽然为了避免给攻击者提供“参考”而不能公布具体的系统机制,但用户只有在掌握足够信息的情况下才能信任并有效利用该系统。
算法问责制提出了误报和漏报的责任问题。IDS 提供商应对此类错误承担责任,尤其是当这些错误是由算法缺陷引起时。
目前挑战在于如何在透明度、问责制、专有利益保护和潜在攻击防范之间保持平衡。这是一项涉及多方面的任务,需要细致入微的考量和各方面兼顾的方法。另外,需要认识到理解某些算法(如神经网络)的决策过程及保护专有信息的技术复杂性。然而尽管存在这些障碍,但对于优化算法透明度和问责制,专家们已经达成共识。
鉴于日益智能和先进的黑客技术所带来的威胁迫在眉睫,网络安全行业必须拥有同等资源才能对抗这些AI驱动的攻击。从长远来看,安全行业的目标不仅是让一群人类威胁猎手通过猜测来零散地解决问题。
当务之急是采取智能化措施来化解这些不断发展的威胁。作为全球网络安全领导企业,Palo Alto Networks(派拓网络)一直在加速AI在网络安全堆栈中的应用,是当今安全行业最成熟的AI应用之一。派拓网络不仅在人工智能和机器学习方面的投资处于领先地位,而且还致力于将这些投资转化为客户可以获得的实实在在的利益。
关键词:
相关阅读
-
质量重于数量:平衡大型语言模型的算法...
在我们对推动算法革命的数据展开研究的过程中,算法透明度和问责制是核 -
洪流中,这些瞬间令人动容!
近日,京津冀等地区持续强降雨引发洪涝和地质灾害多支救援力量奔赴一线 -
城管上街普法宣传
由市城市管理综合行政执法总队、和平区劝业场街、和平区城市管理综合行 -
战洪峰 防洪灾 保安全 保稳定
连日来,西青区水务局组织700余人抢险队在子牙河左堤紧张实施堤坝加高 -
记者:中国女足可能9月10日前后重新集结...
直播吧8月4日讯据记者汤幸消息,中国女足可能9月10日前后重新集结。中 -
《巨齿鲨2》曝特辑 吴京:让世界观众看...
8月4日,由杰森斯坦森、吴京主演的深海怪兽电影《巨齿鲨2:深渊》全球 -
科陆电子最新公告:拟不超9.5亿元在珠三...
科陆电子公告公司拟在珠三角地区投资建设生产基地项目投资总额预计不超 -
库里谈三分纪录:我希望继续将这项纪录...
近日,勇士球星库里参加了节目《WiredAutocompleteInterview》。谈到自 -
(高质量发展调研行)福建三明缘何成为...
中新网三明8月3日电(记者雷朝良)“三明制种历史悠久,具备优越的制... -
夏日夜经济
山东省沂南县汽车“后备箱集市”上,小朋友在拉小提琴。今年以来,... -
【简牍中国】走进甘肃简牍博物馆 探寻...
中新网兰州8月2日电(记者王诗尧)甘肃是简牍大省,共出土简牍8万余枚, -
粤港澳三地多领域合作 开放型经济新体...
央视网消息:粤港澳大湾区建设启动以来,积极拓展与港澳在就业、创业、 -
湖北黄石大冶湖高新区:31条措施“真金...
科技日报记者吴纯新通讯员刘元金8月3日,记者从湖北黄石大冶湖高新区获 -
促进农村消费 乡村旅游升温助推产业发展
本报记者苏诗钰见习记者张千羽近日,文化和旅游部推出2023年第二期... -
金科环境(688466)8月4日主力资金净卖...
截至2023年8月4日收盘金科环境688466报收于1673元下跌165换手率058成交 -
第四届中国人工智能大赛收官
科技日报记者刘艳8月3日,第四届中国人工智能大赛成果发布会在厦门举办 -
鸡腿怎么炸好吃 ?鸡腿这么做,比快餐...
这是薯骨鸡翅的升级版!把鸡翅换成大鸡腿,惯用手法,用剪刀把鸡腿骨慢 -
拼多多向中华慈善总会捐赠3000万元 支...
8月2日晚,电商平台拼多多向中华慈善总会捐赠3000万元,用于采购救援物 -
昂刺鱼清炖做法分享给你,喜欢的别错过哦!
昂刺鱼,也叫“黄颡鱼”,有的地方也叫“嘎鱼”,它含有丰富的蛋白... -
张艺谋新片定档9月28日国庆档,演员阵容豪华
8月3日,张艺谋导演的新片《坚如磐石》发布了最新海报,并宣布将于9月2