123456英文名称: Reflexion: Language Agents with Verbal Reinforcement Learning中文名称: 反思：具有言语强化学习的语言智能体文章: http://arxiv.org/abs/2303.11366代码: https://github.com/noahshinn/reflexion作者: Noah Shinn (Northeastern University)日期: 2023-05-20 v1 1 读后感 论文提出了一种强化学习方法。传统的调优主要是通过训练调整网络参数，而文中提出的方法则是“分析”错误，形成反思的“文字”并保存，在之后的决策中，将其作为上下文以帮助决策。 它利用大模型及其周边方法构造了角色的行为、对结果的评价、当不能达成目标时，利用大模型来反思执行过程中具体哪一步出了问题，并将其作为反思存储。这样就构造了基于当前环境的短期存储，和基于反思的长期存储，结合二者使模型在未来做出更好的决策。 可将其视为把之前在棋类游戏中的强化学习扩展到了角色扮演游戏之中。之前的虚拟世界是棋盘，而现在的智能体置身于一个游戏世界 ...

1 用后感 这个工具，我也是用了好长时间，就是感觉如果不点亮一颗星，自己就不是人了的那种。 一开始在国内用 ChatGPT 非常麻烦，就买了一个套壳的服务，他使用的界面就是 ChatGPT-Next-Web，我和朋友们都觉得这个界面是真心好看真心好用。 项目地址：https://github.com/Yidadaa/ChatGPT-Next-Web/ 2 使用方法 1234567docker pull yidadaa/chatgpt-next-webdocker run -d -p 3000:3000 \ -e OPENAI_API_KEY=sk-xxxx \ -e CODE=页面访问密码 \ --net=host \ -e PROXY_URL=http://127.0.0.1:7890 \ yidadaa/chatgpt-next-web image 大小只有 198M，非常完美的一键部署。 3 功能 3.1 整体功能，核心是想解决什么问题 通过它能很好地解决国内使用 ChatGPT 的问题；比如我买一个或者搭一个服务，我这边解决了科学上网和费用的问题；朋友、同 ...

1 方法 下载软件的 release 版本 exe https://github.com/LC044/WeChatMsg 把 Windows 端微信更新到最新版本 将手机聊天记录迁移到电脑 手机微信 ->我的 ->设置 ->聊天 ->聊天记录迁移与备份 ->迁移 如果电脑端使用虚拟机，注意千万用桥接网络，不要用 NAT，否则报错：不在同一网络无法迁移；另外，如果一次选择太多内容，也可能出现该报错，分几次迁移就好了。 使用 WeChatMsg 导出 运行 exe，第一次运行时，先解密 2 使用感受 尽管界面目前还不是很完美，但是可用。因为开源，我们可以选择其中的一部分来运行，可以拆开用，可以调。 其核心技术是从微信数据存储目录中提取信息，另外使用 Python Qt 实现了用户界面。 3 参考 解决微信手机与电脑在同一网络却无法互联传输的问题

1 用后感 简单地说，chatgpt-on-wechat 是把 ChatGPT 做成一个微信的机器人好友。项目主要是 Python 编写的，所以上手很快；一键部署也很简单，半个小时以内就能搞定。 项目地址：https://github.com/zhayujie/chatgpt-on-wechat 2 功能 2.1 整体功能，核心是想解决什么问题 核心功能是把大模型做成了微信中的聊天机器人。从底层看，它支持多个大模型：GPT-3.5, GPT-4, claude, 文心一言, 讯飞星火等；从上层看，它支持多种终端，如个人微信、微信公众号、企业微信、飞书等。 2.2 当前解决了什么问题，哪些问题解决不了 我觉得它解决了 LLM 接入微信 90% 以上的问题，作为独立软件的完整性很好；同时可作为二创的完美 baseline。 2.3 提供哪些功能点，其中哪些是刚需 整体代码和功能分为两部分：接入模型和接入终端。得用终端的接入，我们可以通过微信提供很多服务，不仅限于大模型。接模型这块做得也比较全，包含了图像和语音的支持，而且支持不同公司模型和对工具的调用。 尽管可选模型很多，终端支持也不少；但 ...

1234import tiktokenenc = tiktoken.encoding_for_model("gpt-4")print(len(enc.encode("你好呀")))print(len(enc.encode("hello world")))

1 介绍 Redis（Remote Dictionary Server）是一个开源的内存数据存储系统，可以用作数据库、缓存和消息中间件。它支持多种数据结构，包括字符串（strings）、哈希表（hashes）、列表（lists）、集合（sets）、有序集合（sorted sets）等。 2 使用场景 相对于使用数据库，它读取更方便，时间更短 相对于存储在硬盘上，它可供不同机器上的不同客户端读取。 3 使用方法 3.1 安装运行 12$ docker pull redis$ docker run --rm -d --net host redis 默认端口是 6379 3.2 Python 客户端 12345678910111213import redisredis_client = redis.StrictRedis(host='localhost', port=6379, decode_responses=True)# 尝试从缓存中获取结果cached_result = redis_client.get(f'test:01')if cache ...

1 引言 GitBook 是一个开源的文档编辑和托管平台，用于创建和维护文档、手册和电子书。它基于 Markdown 和 Git 技术，帮助用户方便地编写、编辑和发布文档。 GitBook 支持将文档输出为多种格式，包括网页、PDF、ePub 等，适用于不同的阅读和分享场景。 GitBook 还提供了团队协作的功能，可以方便多人共同编辑和维护文档。 可以将其部署在 gitbook 平台（https://legacy.gitbook.com/），由于需要科学上网，本文不做详细介绍，如果需要，请见最后的参考部分；也可以部署在本地或者自己的网站上。 从功能角度，可以把 gitbook 看作网页版的 obsidian 或者 hexo。gitbook 工具实现前端，用户只需要关心文档的内容，遵循 gitbook 定义的规范，然后使用 gitbook 提供的命令行工具即可。 从逻辑角度看，它以主题为中心，可以把一个系列的文章梳理集中在同一主题之下，更有章法，适合用来写书或者手册。 利用 gitbook，很容易将一堆文档（比如团队 markdown 文档，培训文档）生成类似 wiki 的网页展示，风 ...

12345678英文名称: Generative Agents: Interactive Simulacra of Human Behavior中文名称: 生成代理：人类行为的交互式模拟文章: http://arxiv.org/abs/2304.03442代码: https://github.com/joonspk-research/generative_agents作者: Joon Sung Park机构: 斯坦福大学日期: 2023-08-05 (预发表时间：2023.4)引用次数: 231 读后感 这篇文章非常具有启发性，很多点都可以引发进一步思考和研究，比如在产品设计方面：定制反映自己特点和经验的计划助手；在结构设计方面，提出三个组件：记忆、反思、计划 的架构，用于存储、合成和应用相关记忆，根据这些原则，应对各种复杂的场景。在具体实现方面还在附录中给出了一些可用的提示信息。 其中有两个实验结果很有意思，一个是：如果没有观察、计划和反思，仅有一般性的知识，模型性能将大打折扣；另一个是：”你会选择谁共度一小时“，如果不加反思，结果是最频繁交往的人，反思之后是深层价值观相似的人。 ...

ChatGPT-CodeReview 是一个开源项目，目前 (231115) 3.2k Star，它可以作为 github 的应用（类似插件），通过调用 ChatGPT，在提交代码时，帮助审查代码中的错误。 1 github 地址&说明文档 https://github.com/anc95/ChatGPT-CodeReview/blob/main/README.zh-CN.md 2 安装 https://github.com/apps/cr-gpt 自己项目的 Settings->Security->Secrets and variables->Actions 切换到 Variables 选项，创建一个新变量 OPENAI_API_KEY 3 使用 使用 pull request 方式，在自己的项目中 Pull request 选项卡中 create pull request，选择要合并的分支。 程序会自动触发代码审查，审查信息将显示在 file changes 中。 4 注意 这是一个基于 github 的应用，无需本地部署，在 github 上安 ...

1 安装工具 1$ sudo apt-get install adb 2 开启 USB 调试 2.1 一般方法 打开 " 开发者选项 "：设置界面 ->系统管理 ->关于手机 ->版本信息，多次点击“软件版本号“，直到系统提示已经启用了开发者选项。 设置界面 ->系统管理 ->开发者选项 勾选”开发者选项“，勾选 "USB 调试 2.2 我的手机 我的手机 VIVO X50 Pro，具体操作如下： 关于手机 ->版本信息 ->多次点击软件版本号 设置界面 ->系统管理 ->开发者选项（无法通过搜索功能找到） 打开”开发者选项“和”USB 调试“ 3 连接手机 在命令行输入： 1$ sudo adb shell 在手机的弹出框中选”允许连接“ 此时至少可以访问 /sdcard 存储卡上的内容 4 注意 如果使用 Linux 环境，尽量在连接时关闭 Windows 虚拟机，否则 USB 连接可能直接被映射到 Windows 系统中。 打开开发模型后手机可能变慢，不使用时请酌情关闭。