17c11：Sam Altman a16z最新采访：建立垂直整合的AGI帝国 ，Sora和能源

17c11

如何在不针对模型本身权重做任何修改的情况下延长上下文窗口呢？旋转位置编码（RoPE，Rotary Position Embedding）给了一定的可能性。旋转位置编码是一种能将相对位置信息依赖集成到自注意力机制中、并且能够提升模型架构性能的位置编码方式。而目前很火的 LLaMA、GLM 模型就是采用该位置编码方式。和相对位置编码相比，RoPE 具有更好的外推性，是当前大模型相对位置编码中应用最广的方式之一。，Sam Altman a16z最新采访：建立垂直整合的AGI帝国 ，Sora和能源

杨希望致辞

此后，徐长锁也曾辗转执教多家俱乐部。2017年，他率领山东青年队获得全运会亚军后，出任全国男子篮球联赛（NBL联赛）安徽文一男篮总教练。2021年，徐长锁CBA出任山东男篮主帅。

杨雷杰主持会议

汤献忠报告

为深入开展安全生产治本攻坚三年行动，区住建委持续开展建筑工程安全生产全覆盖检查，现将近期典型问题隐患通报如下：

薛艳华作报告

王女士母亲解释：女儿男友说年底交房，我想看一下他的购房合同，但是到现在为止都没有看到合同，对方只发了一张物业的聊天记录。“她叫我跪到那和她男友赔礼道歉，我下辈子都不会！”

韩天孟报告

众所周知，当下以自注意力机制与自回归生式为核心的大模型在多个领域比如学术、生产、工业等领域变得愈发不可替代。在近期一项研究中，美国迈阿密大学本科校友、美国加州大学尔湾分校博士生乔烨和所在团队从一个大模型非常日常的痛点出发：即模型需要越来越会“读长文”，但是，模型对于上下文长度的支持通常是在预训练时就定下的，在不做训练/微调的情况下无法轻易改变。

李艳海作报告

一名正在救援现场的一线消防人员向《中国新闻周刊》表示，此次消防队伍的主要任务为接应并转移受困游客，尤其因身体状况无法自行下撤的人员。他提到，在7日凌晨，救援人员曾将一名因肺水肿而无法行动的游客背运至安全地带，并移交现场医护人员。目前救援仍在上山接应过程中，现场主要困难包括海拔较高及降雪导致的道路湿滑。

郭军胜作报告

这恰逢哈维-阿隆索上任，但真正的原因更多在于球员及其经纪团队暂时按兵不动——他们想弄清楚，在姆巴佩成为绝对核心的情况下，他在球队中的位置，以及考虑到阿隆索承诺让罗德里戈踢左路——一个目前仍被维尼修斯抢下的战场。

刘卫科作报告

有新能源车主反映，有的充电桩充到90%或者80%时自动跳闸。记者了解到，这主要是为了避免车主充电时间过长。“一般都是补一点电，充到80%—90%，除非新车或者对电池不太了解的才会充到100%，能跑就行了，跑一段再充。因为电池一般是前面充的快，后面10%充的就慢了。”上述国家电网工作人员告诉记者。

刘斌报告

佩塔提克瓦（Petah Tikva）位于特维拉市以东，曾是1878年由来自欧洲的犹太人移民建立的第一个村落，也被称为“定居地之母”（Mother of Moshavot）。在希伯来语中，佩塔提克瓦意为“希望之门”，反映了早期犹太拓荒者寻求在以色列土地上建立新生活的愿望。

王勤凡报告

当地时间3日晚，以色列总理办公室发表声明，确认以色列已同意“特朗普计划”第一阶段的“初步撤军线”，以实现被扣押人员的立即释放。以色列国防军也表示，其在加沙的行动已转向防御性操作。

该记者表示：“我们即将前往美国。阿根廷队将于下周五（北京时间10月11日周六早上8点）在迈阿密迎战委内瑞拉队。训练将于明天下午在国际迈阿密队训练基地开始。赛前共有4次训练，赛后还有2次训练。马竞球员蒂亚戈-阿尔马达此次未获征召。”

然而，打脸自我的背后，是与《许我耀眼》在没有任何预热与宣发的情况下空降的理由一样：香港英皇娱乐，因投资房地产失败，负债166亿，走在了破产的边缘。 更多推荐：17c11

来源：李林