事务数据在大数据环境中的角色
摘要：
在此背景下，您可以将大数据战略分为两大部分： • 大数据分析处理 • 大数据运营事务和非事务性事件处理 https://www-01.ibm.com/common/ssi/cgi-bin/ssialias?htmlfid=IML14442CNZH https://www.miosoft.com/ 阅读全文
[development][PCRE] PCRE
摘要：
概念： PCRE (Perl Compatible Regular Expressions): 与Perl兼容的正则表达式，由C实现。但也不是完全相同，与Perl的正则表达式还是略有不同。 https://en.wikipedia.org/wiki/Perl_Compatible_Regular_E 阅读全文
[daily] 在CentOS中安装高版本GCC
摘要：
接前文： [daily] 内存越界的分析与定位 如前文提及， 使用sanitizer-address 可以有效的检查程序的内存问题。 当时在CentOS7中，虽然也可以使用，但是却遇到如下两个问题： 1. 程序崩溃时的打印信息中，缺少代码信息，虽然知道出了问题，但是却并不知道具体问题处在哪一个地方， 阅读全文
[knowledge][perl][pcre][sed] sed / PCRE 语法/正则表达式
摘要：
一直用sed一直没有正经的学过语法，一直一知半解的用着。 因为，它用来perl的语法，要想搞懂，首先要搞懂perl，系统的入个门。。。 之前，man sed，man了好多次，总是没找到关键内容，今天在perl手册里找到了。 内容相关的，前一篇： [knowledge][模式匹配] 字符匹配/模式匹配 阅读全文
[knowledge][模式匹配] 字符匹配/模式匹配 正则表达式 自动机
摘要：
字符串 T = abcabaabcabac，字符串 P = abaa，判断P是否是T的子串，就是字符串匹配问题了，T 叫做文本（Text） ，P 叫做模式（Pattern），所以正确描述是，找出所有在文本 T = abcabaabcabac 中模式 P = abaa 的所有出现。 方法分为： 朴素算 阅读全文
[daily] 内存越界的分析与定位
摘要：
valgrind 自不必说 1. Address Sanitize 很好有，只需要在gcc编译的时候，加上选项 -fsanitize=address 它的工程：https://github.com/google/sanitizers/wiki/AddressSanitizer 我的测试例子： htt 阅读全文
[DPI] Cisco Application Visibility and Control
摘要：
DPI，可分为三部分： https://blogs.cisco.com/enterprise/cisco-traffic-analysis-encrypted-threat-analytics 知名端口流量，非知名端口流量，加密流量。 加密浏览可参考 ETA [knowledge][ETA] Enc 阅读全文
[bigdata] palantir
摘要：
Palantir的无缝数据融合技术关键在于本体数据模型的灵活性，动态性，而且要能反映人、事、物和环境的关联关系及因果联系，这是大数据技术面临的核心挑战。 阅读全文
[daily][nfs] nfs客户端设置
摘要：
[daily] 主机间目录共享 1. 安装nfs工具，其实是mount需要mount.fs 否则会出现类似如下错误： 安装： 2. 挂载： 3. 开机自动挂载： 在 /etc/fstab 中，添加如下行 [daily][qemu][kvm] 使用virtfs在host与guest之间共享目录 阅读全文
[knowledge][ETA] Encrypted Traffic Analytics
摘要：
思科ETA主页 https://www.cisco.com/c/en/us/solutions/enterprise-networks/enterprise-network-security/eta.html ETA有关开源项目： https://github.com/cisco/joy/tree/ 阅读全文
[tcpreplay] tcpreplay高级用法--使用tcpreplay-edit进行循环动态发包
摘要：
tcpreplay-edit提供了可对包进行修改的高级用法： 原包如下： 收包如下： 使用，--uique-ip 参数可以在保证flow关系的前提下修改IP，修改策略是，源IP地址加一，目的IP地址减一 发包如下： 收包如下： 再增加 --unique-ip-loops=3 参数，可以增加策略复杂性 阅读全文
[redhat][centos] 让不同小版本的CentOS7使用相同的内核版本
摘要：
背景： CentOS7有定期的小版本发布，即官网释出的ISO，是带着小版本号的。CentOS7可以使用平滑升级，从这些小版本号中升上去。 但是并不是每一次的更新，都在释出的ISO中，这样的话，一台既有的CentOS7很可能升级到了某个固定的kernel版本中，而这个版本有不在ISO中。 这样的话，我 阅读全文
[grub2] grub2修改启动顺序
摘要：
https://wiki.centos.org/HowTos/Grub2#head-535f476a61e62f24bc150c73f7e0816f85345f46 1, 查看所有的entry 2. 查看当前default的entry 3. 修改为指定的entry 阅读全文
[yum] yum使用光盘安装或更新软件
摘要：
https://access.redhat.com/documentation/en-us/red_hat_enterprise_linux/7/html/system_administrators_guide/ch-yum#s1-yum-upgrade-system 阅读全文
[knowledge][http] http
摘要：
关于，底层承载协议的规定。 https://zh.wikipedia.org/wiki/%E8%B6%85%E6%96%87%E6%9C%AC%E4%BC%A0%E8%BE%93%E5%8D%8F%E8%AE%AE https://tools.ietf.org/html/rfc2616 HTTP: 阅读全文
[knowledge][lisp] lisp与AI
摘要：
https://blog.youxu.info/2009/08/31/lisp-and-ai-1/ https://blog.youxu.info/2010/02/10/lisp-and-ai-2/ 阅读全文
[knowledge][bigdata] nosql
摘要：
几款主流nosq数据库对比：http://www.cnblogs.com/vajoy/p/5471308.html Redis VS MongoDB：http://www.jianshu.com/p/249defad8592 RacksDB/LevelDB: http://www.cnblogs.c 阅读全文
[skill][gdb][coredump][abrt] 使用abrt管理程序coredump
摘要：
abrt：Automatic bug detection and reporting tool https://github.com/abrt/abrt 常用的命令： abrt-auto-reporting abrt-cli 配置文件： /etc/abrt/abrt.conf /etc/abrt/a 阅读全文
[development][libhtp] libhtp 启用debug模式
摘要：
可以使用 ./configure --help 查看帮助. 可以通过参数, 修改配置. 即对应的Makefile内容. 也可以修改 configure.ac 里的内容, help中的部分内容, 也依赖此文件. 举个栗子: 阅读全文
[development][endian] 字节序
摘要：
首先字节序很不好理解, 其次,理解了又不好记住. 除了字节序, 还有位序. 那么到底怎么记住呢? 大端序,小端序还有另一个名字, 大尾序,小尾序. 这样就记住了, 我们以16进制打印一个数之后, 尾部是高字节就叫大尾序,就叫大端序,就叫大字节序, 反之. 另一个概念是 主机序, 网络序. 主机序要分 阅读全文
[daily] 使用diff和patch打补丁
摘要：
diff org new > xxx.patch patch /path/org xxx.patch /path/org是相对路径时, 会报错. 这是一个bug. 阅读全文
[daily][archlinux][pacman] 删除所有孤立包(orphan)
摘要：
yaourt的输出如下: 阅读全文
[development][semaphore] 信号量/信号灯/信号标/旗语
摘要：
前言: 接续前节 [development][C] 条件变量(condition variables)的应用场景是什么 之前讨论了条件变量的问题, 已经知道在逻辑上, 条件变量(管程)(moniter) 与信号量 逻辑等价. 可以相互实现. 又知: 二元信号量可以用来实现互斥量. 那么是不是说进程间 阅读全文
[development][C] 条件变量(condition variables)的应用场景是什么
摘要：
产生这个问题的起因是这样的: 很显然, 这个问题, 只需要用一个信号量便可解决. 但是有没有更好的方式呢?, 于是我想到了条件变量, 细研究了条件变量的用法之后发现, 条件变量需要一个条件变量同时还需要一个互斥锁来混合使用. 虽然可以实现我的需求, 但是很显然这很麻烦. 所以, 问题在于, 这么麻烦 阅读全文
[daily][mathematica][fcitx] mathematica 无法输入中文的问题
摘要：
mathematica无法输入中文, 我的输入法使用 fcitx 于是我给fcitx的作者提了issue https://github.com/fcitx/fcitx/issues/372 数日之后, 始终没有回音. 恰好有一天遇到作者, 于是css老师给了如下答复: --!!! 测试好用, 感谢c 阅读全文
[daily][tcpdump] tcpdump查找reset包
摘要：
tcpdump -r xxxx.pcap 'tcp[tcpflags] & tcp-rst != 0' 阅读全文
[development][C] linux 设置线程名称
摘要：
两个API, 都是linux的. 不是POSIX, 是GNU? 傻傻搞不清楚. 1. pthread_setname_np / pthread_setname_np 2. ptctl 带 PR_GET_NAME / PR_SET_NAME 参数 名字长度带'\0' 16个字符. 推荐第一个, 因为我 阅读全文
[development][c++] C++构造函数调用构造函数
摘要：
构造函数调用构造函数是会问题的. 外层函数返回的内存, 与被调用的构造函数返回的内存并不是一个内存. 错误示例代码如下: 太多年没写C++了, debug了好久, 才发现问题出在哪里. 参考: http://www.cnblogs.com/chio/archive/2007/10/20/931043 阅读全文
[development][dpdk][hugepage] 大页内存的挂载
摘要：
参考: [development][dpdk][hugepage] 为不同的结点分配不同大小的大页内存 完成了以上内容之后, 下一步需要做的是挂载, 大页内存只有被挂载了之后,才能被应用程序使用. 挂载方法如下: 参考dpdk文档: http://dpdk.org/doc/guides/linux_ 阅读全文
[daily][qemu][kvm] qemu增加减少CPUID
摘要：
做 DPDK 大页内存测试, 发现KVM模拟出来的CPU不支持 1GB 的大页 可以使用如下命令是否支持: 这个时候, 可以修改qemu的配置来增加或减少CPU flags, 也叫CPUID 首先应该是有如下命令, 查看是否可以被增加的CPUID, 已经被支持了, 也就是能不能配置 然后, 怎么写参 阅读全文
[development][dpdk][hugepage] 为不同的结点分配不同大小的大页内存
摘要：
这个事来自dpdk, 所以, 先参考. http://dpdk.org/doc/guides/linux_gsg/sys_reqs.html 当前, 假设你已经读过上边内容, 知道大页内存时候, dpdk是什么,以及怎样使用. 我们已经知道, 为系统分配大页内存有两种大小: 2M 和 1G 1G的只 阅读全文
[development][dpdk] dpdk-pmdinfo 工具的使用
摘要：
发现了一个工具 dpdk-pmdinfo 但是文档介绍的很不清楚, http://dpdk.org/doc/guides/tools/pmdinfo.html 经过摸索, 这可能就是一个查询 dpdk程序都支持那些硬件设备的工具, 用法如下: 其中, 参数就是你编译了dpdk进去的二进制可执行文件, 阅读全文
[daily][editer] 二进制编辑工具 hyx
摘要：
用了众多之后,终于发现了一个好用的二进制编辑工具: hyx https://yx7.cc/code/ https://en.wikipedia.org/wiki/Comparison_of_hex_editors 阅读全文
[daily][archlinux][shell][fish] 使用最炫酷的shell工具fish
摘要：
用了好久的zsh, 才知道用那么多年的bash是多么的原始. 然而比zsh更好用的其实是fish, 但是不与bash兼容, 所以最终还是选择了zsh. 关于zsh的使用,配置方法, 可以翻前文查阅. zsh配置起来之繁琐, 插件之多, 插件太多之后运行之慢, 兼容让人崩溃. 然后仅仅为了个兼容性. 阅读全文
[daily][btrfs][mlocate][updatedb] mlocate不认识btrfs里面的文件
摘要：
这是mlocate的一个bug, 截至到目前还没有修复, 至少在redhat上没有修复. https://bugzilla.redhat.com/show_bug.cgi?id=906591 解决方法是, 在 /etc/updatedb.conf 里添加添加一个参数 这是因为mlocate目前分不清 阅读全文
[daily][archlinux] TODO LIST
摘要：
reminder: https://wikemacs.org/wiki/Buffer_management CLOUD: k8s istio:https://istio.io/docs/concepts/what-is-istio/ DevOps TO READ: https://www.kerne 阅读全文
[math][mathematica] mathematica入门
摘要：
快速入门手册: 只找到了个中文的快速入门: https://www.wolfram.com/language/fast-introduction-for-programmers/zh/?source=footer 在线完整手册: http://reference.wolfram.com/langua 阅读全文
[math][mathematica] archlinux 下 mathematica 的安装 (科学计算软件 mathematica/matlab/sagemath)
摘要：
ONLINE: http://www.wolframalpha.com/ GPL: segamath: http://www.sagemath.org/ famous and not free: mathematica: http://www.wolfram.com/mathematica/?sou 阅读全文
[daily][centos][sudo] sudo 报错
摘要：
有时候, 比如在CentOS 6上. sudo 会报如下错误: 这是因为, sudo 命令, 没有SUID, 使用如下命令, 增加SUID: 参考:https://www.sudo.ws/troubleshooting.html 阅读全文
[development][C][thread_local] 线程全局变量
摘要：
线程全局变量, 线程本地存储, thread_local storage 只需要在变量定义的最前边添加 __thread 关键字. 用法: https://gcc.gnu.org/onlinedocs/gcc-3.4.1/gcc/Thread-Local.html 原理: http://docs.o 阅读全文