[置顶] RAG中late chunking的实验效果测试（续2）
摘要： 针对前面RAG测试的长文本问题，我又增加了长文本测试（代码同前）： context_test_documents = [ # 文档1: AI发展史 (约2500 tokens) """ 人工智能的发展历程可以追溯到20世纪50年代。1950年，图灵提出著名的"图灵测试"，这被认为是人工智能研究的开端 阅读全文
posted @ 2024-11-20 15:52 bonelee 阅读(1) 评论(0) 推荐(0) 编辑
[置顶] RAG中late chunking的实验效果测试（续）
摘要： 前文使用了jina ai v2的模型，接下来我们看看v3版本late chunking的实际效果，为了快速，我直接使用官方的api！ # import requests # url = 'https://api.jina.ai/v1/embeddings' headers = { 'Content- 阅读全文
posted @ 2024-11-20 15:50 bonelee 阅读(19) 评论(0) 推荐(0) 编辑
[置顶] RAG中late chunking的实验效果测试
摘要： 代码： import os import json import torch import numpy as np import spacy from spacy.tokens import Doc from spacy.language import Language import transfo 阅读全文
posted @ 2024-11-20 11:58 bonelee 阅读(29) 评论(1) 推荐(0) 编辑
[置顶] python BGE 模型转换为onnx给java调用
摘要： 最近在做RAG，因为涉及embedding计算，用到了BAAI BGE小模型，但是模型是给python调用的，需要转换为onnx格式给java使用。所以有了下面的探索： python代码： import torch from transformers import AutoTokenizer, Au 阅读全文
posted @ 2024-06-29 11:39 bonelee 阅读(368) 评论(1) 推荐(0) 编辑
[置顶] ES RAG向量搜索示例，使用BAAI BGE创建embedding
摘要： 准备： docker pull docker.elastic.co/elasticsearch/elasticsearch:7.6.2 7.6.2: Pulling from elasticsearch/elasticsearch c808caf183b6: Pull complete d6caf8 阅读全文
posted @ 2024-06-20 16:58 bonelee 阅读(67) 评论(0) 推荐(0) 编辑
[置顶] superAGI核心源码分析
摘要： main.py import requests from fastapi import FastAPI, HTTPException, Depends, Request, status, Query from fastapi.middleware.cors import CORSMiddleware 阅读全文
posted @ 2024-06-04 16:50 bonelee 阅读(39) 评论(1) 推荐(0) 编辑
[置顶] 阿里开源superAGI代码分析【prompt部分】-核心还是react
摘要： superAGI.txt You are SuperAGI an AI assistant to solve complex problems. Your decisions must always be made independently without seeking user assista 阅读全文
posted @ 2024-06-03 20:27 bonelee 阅读(40) 评论(0) 推荐(0) 编辑
[置顶] 大模型强化学习——PPO项目实战
摘要： 【PPO算法介绍】 PPO（Proximal Policy Optimization）是一种强化学习算法，它的目标是找到一个策略，使得根据这个策略采取行动可以获得最大的累积奖励。PPO的主要思想是在更新策略时，尽量让新策略不要偏离旧策略太远。这是通过在目标函数中添加一个额外的项来实现的，这个额外的项 阅读全文
posted @ 2023-09-30 09:46 bonelee 阅读(4308) 评论(1) 推荐(0) 编辑
[置顶] 大模型增量训练--基于transformer制作一个大模型聊天机器人
摘要： 针对夸夸闲聊数据集，利用UniLM模型进行模型训练及测试，更深入地了解预训练语言模型的使用方法，完成一个生成式闲聊机器人任务。 项目主要结构如下： data 存放数据的文件夹 dirty_word.txt 敏感词数据 douban_kuakua_qa.txt 原始语料 【数据量：大概20M的样子】= 阅读全文
posted @ 2023-09-27 11:32 bonelee 阅读(951) 评论(0) 推荐(0) 编辑
[置顶] windows下进程注入的各种技术汇总、代码示例和检测思考
摘要： 注入类型 C++代码实现链接和检测思考 检测优先级 备注Portable Executable Injection - PE注入 https://www.cnblogs.com/bonelee/p/17719649.html 高 核心还是创建远程线程，不过有PE重定位表的修复Thread Execu 阅读全文
posted @ 2023-09-21 12:18 bonelee 阅读(385) 评论(0) 推荐(0) 编辑
[置顶] windows进程注入技术——线程劫持C++示例和检测思考
摘要： 线程劫持：运行方法 C:\Users\l00379637\source\repos\thread_hijack\x64\Release\thread_hijack.exe 18132 C:\Users\l00379637\source\repos\injected_dll\x64\Release\i 阅读全文
posted @ 2023-09-19 12:11 bonelee 阅读(891) 评论(1) 推荐(0) 编辑
[置顶] GPT大模型下，如何实现网络自主防御
摘要： GPT大模型下，如何实现网络自主防御 本期解读专家 李智华 华为安全AI算法专家 近年来，随着GPT大模型的出现，安全领域的攻防对抗变得更加激烈。RSAC2023人工智能安全议题重点探讨了人工智能安全的最新发展，包括人工智能合成器安全、安全机器学习以及如何利用渗透测试和强化学习技术来确保人工智能模型 阅读全文
posted @ 2023-06-04 17:14 bonelee 阅读(825) 评论(0) 推荐(1) 编辑
[置顶] 从攻击视角探讨ChatGPT对网络安全的影响
摘要： 从攻击视角探讨ChatGPT对网络安全的影响 专家介绍：李智华，华为安全AI算法专家，中科院博士 ChatGPT是OpenAI 发布的基于人工智能的对话机器人，上线短短2个月活跃用户就突破了1亿，成为全球关注的焦点。ChatGPT可以自动化地处理对话，可以通过基于自然语言处理技术的模型、情景模型和语 阅读全文
posted @ 2023-02-25 09:25 bonelee 阅读(1140) 评论(2) 推荐(1) 编辑
[置顶] 从防御视角探讨ChatGPT对网络安全的影响
摘要： 从防御视角探讨ChatGPT对网络安全的影响 专家介绍：李智华，华为安全AI算法专家，中科院博士 ChatGPT的核心优势是通过基于自然语言处理技术模型、情景模型和语言模型来自动生成文章和代码。在前面的文章中，我们从攻击视角探讨了ChatGPT对网络安全的影响， 本文将从防御视角来探讨ChatGPT 阅读全文
posted @ 2023-02-25 09:24 bonelee 阅读(650) 评论(0) 推荐(0) 编辑
[置顶] RSA 2022人工智能安全洞察——在对抗中前进
摘要： RSA 2022人工智能安全洞察——在对抗中前进 李智华 中科院博士，华为安全AI算法专家 人工智能和机器学习在安全中的应用是一个屡见不鲜的话题，同样在2022 RSA大会中出现了围绕AI/ML为重点的焦点议题。此次会议中重点探讨了AI对抗和隐私合规问题，还有时下热门的零信任、API安全和威胁狩猎等 阅读全文
posted @ 2022-07-12 09:57 bonelee 阅读(437) 评论(7) 推荐(0) 编辑
2024年11月19日
late chunking 源码分析-https://github.com/jina-ai/late-chunking
摘要： import bisect import logging from typing import Dict, List, Optional, Tuple, Union from llama_index.core.node_parser import SemanticSplitterNodeParser 阅读全文
posted @ 2024-11-19 10:58 bonelee 阅读(4) 评论(0) 推荐(0) 编辑
2024年11月18日
李嘉誠 教五年內買車買房
摘要： 李嘉誠 教五年內買車買房. 假設你的月收入只有2000元，你也可以過得很好。我幫你把錢分成五份。第一份600元，第二份400元，第三份300元，第四份200元，第五份500元。 第一份，用來做生活費。這麼少的生活費，每天只能夠分到十幾元。早餐一份煮米絲，一個雞蛋，一杯豆漿。中餐一份快餐，一個水果。晚 阅读全文
posted @ 2024-11-18 10:07 bonelee 阅读(2) 评论(0) 推荐(0) 编辑
2024年10月11日
一维到N维智慧
摘要： 其实刘丰老师专门讨论过一维到N维智慧，一维如同一条线，二维如画面，三维为立体，到了四维则超越了时间和空间的局限。每提升一个维度，感受到的美会提升无穷多倍。而N维智慧表示超越的可能，当N趋于无穷大时，表达人类达到无上智慧和圆满的境界。这种智慧强调对宇宙的无限圆满的理解，即宇宙本性是自足的，永恒的。低维 阅读全文
posted @ 2024-10-11 11:57 bonelee 阅读(10) 评论(0) 推荐(0) 编辑
2024年10月8日
制作冥想音乐的程序
摘要： 单独的文字音频 + 背景音乐音频合成程序： from pydub import AudioSegment for_file = r"D:\个人\疗愈内在小孩.mp3" for_file = r"D:\个人\发大愿-for.mp3" for_file = r"D:\个人\拥抱内在回归真我.mp3" f 阅读全文
posted @ 2024-10-08 19:35 bonelee 阅读(12) 评论(0) 推荐(0) 编辑
2024年9月19日
一个隐喻故事
摘要： 有一个老年人考试驾照，很紧张，我希望用隐喻的方式讲解一个故事，帮他消除紧张。 有一个年长的骑士，他在年轻的时候是个非常勇猛的战士，他已经很多年没有上战场了。他的国王告诉他，为了保护王国的安全，他需要重新骑上战马，通过一场新的竞技比赛。这位骑士对比赛非常紧张。 一天，他散步到一片宁静的森林，碰到了一位 阅读全文
posted @ 2024-09-19 10:56 bonelee 阅读(23) 评论(0) 推荐(0) 编辑
2024年9月5日
绝大多数的抑郁其实就是人灵性觉醒的准备阶段。就像树木要往上长，它反而需要先向下扎根一样
摘要： 爱是宇宙唯一的真相和答案: “绝大多数的抑郁其实就是人灵性觉醒的准备阶段。就像树木要往上长，它反而需要先向下扎根一样” 阅读全文
posted @ 2024-09-05 10:01 bonelee 阅读(21) 评论(0) 推荐(0) 编辑
2024年9月4日
开出症状的催眠工具是什么？
摘要： 在催眠疗法中，“开出症状的催眠工具”通常指的是通过催眠技术帮助个体识别和处理潜在的心理症状或情感问题的工具和方法。这些工具和方法可以包括： 放松诱导：使用引导性语言和放松技巧，帮助个体进入放松和专注的催眠状态。这是催眠疗法的基础步骤。 症状探索：在催眠状态下，引导个体探索和识别他们的症状来源。这可能 阅读全文
posted @ 2024-09-04 15:09 bonelee 阅读(10) 评论(0) 推荐(0) 编辑
下一页