随笔分类 - php
php使用pthreads v3多线程的抓取新浪新闻信息
摘要:我们使用pthreads,来写一个多线程的抓取页面小程序,把结果存到数据库里。 数据表结构如下: 代码如下: 由于使用到了QueryList,大家可以通过composer进行安装。 不过安装的版本是3.2,在我的php7.2下会有问题,由于each()已经被废弃,所以修改下源码,each()全换成f
阅读全文
pthreads v3下一些坑和需要注意的地方
摘要:一、子线程无法访问父线程的全局变量,但父线程可以访问子线程的变量 结果如下: 二、子线程无法修改父线程的变量 结果如下: 三、pthreads v3版本可以设置成员为匿名函数 结果如下: 四、对于数据库连接资源,我们需要声明为静态成员 结果如下: 代码修改如下: 结果如下: 最后说明,不排除pthr
阅读全文
pthreads v3下的Volatile介绍与使用
摘要:由于pthreads v3中引入了Threaded对象自动不变性的概念,所以当我们在构造函数中给成员设置为数组时,在其他地方就无法对成员再次改写了。 例子如下: 如果我们对成员再次进行改写,那么就会报错了。 如果确实需要对成员数据进行改写,除了上面的显式强制转换外,另一个方法就是继承Volatile
阅读全文
pthreads v3下的同步处理synchronized
摘要:之所以会用到同步,是因为如果多个线程中对同一个资源进行操作时,会发生混乱。 比如2个线程对变量进行加1操作,第1个线程还没来的及改写数据时,第2个线程就对变量进行操作了,那变量最终的结果就是未知的,这个时候就需要同步来进行控制了。 例子如下: 多次运行后,$cnt的值是不确定的。如下图所示: 在pt
阅读全文
pthreads v3下的worker和pool的使用
摘要:有些人会想,明明用thread已经可以很好的工作了,为什么还要搞个worker和pool? 之所以要用到worker和pool还是因为效率,因为系统创建一个新线程代价是比较昂贵,每个创建的线程会复制当前执行的整个上下文。 尽可能的重用线程可以让我们的程序更高效。 一个简单的worker例子: 上面代
阅读全文
pthreads v3在centos7下的安装与配置
摘要:我的centos版本是7.4.1708,php的版本是7.2.4(注意要是线程安全版),如下图所示: 首先我们在如下网址下载好pthreads的源码: 如:pthreads-3.1.6.tgz 1、解压、并进入目录 2、运行phpize,生成configure,如果没有配置PATH的,可以打上绝对路
阅读全文
Beanstalkd消息队列的安装与使用
摘要:一、Beanstalkd是什么? Beanstalkd是一个高性能,轻量级的分布式内存队列 二、Beanstalkd特性 1、支持优先级(支持任务插队)2、延迟(实现定时任务)3、持久化(定时把内存中的数据刷到binlog日志)4、预留(把任务设置成预留,消费者无法取出任务,等某个合适时机再拿出来处
阅读全文
php 图形用户界面GUI 开发
摘要:一、下载指定系统扩展 由于我的系统是64位win10,php版本是7.1,所以选择7.1 Thread Safe (TS) x64,linux用户可以自行下载源码包,编译安装。 解压php_ui-2.0.0-7.1-ts-vc14-x64.zip,把php_ui.dll复制到你php.ini中ext
阅读全文
php 多进程 父进程的阻塞与非阻塞
摘要:php中进程的阻塞,主要是父进程等待子进程退出。 1.php代码如下: 上面代码结果如下: 如果我们把pcntl_wait拿到for循环外,会是个什么结果? 2.php代码如下: 上面代码结果如下: pcntl_wait的第二个参数可以用来设置主进程不等待子进程退出,继续执行后续代码。 3.php代
阅读全文
php ActiveMQ的发送消息,与处理消息
摘要:我们以一个简单的用户注册为例,当用户点击注册按钮后,我们发送一个消息,后台php接收到该消息然后处理。 1.php代码如下: 2.php代码如下: 分别运行上面两个脚本文件 我们还可以把上面的2.php代码分成多步执行。 2.php代码如下: 3.php代码如下: 再次分别运行上面的三个脚本
阅读全文
php 通过stomp协议连接ActiveMQ
摘要:一、安装php的stomp扩展 如:stomp-2.0.0.tgz 修改php.ini文件 注意这里php环境的扩展路径(请自行修改) 查看扩展是否安装成功 二、使用stomp扩展连接ActiveMQ 我们通过http://192.168.1.222:8161/admin/后台创建一个队列test测
阅读全文
php ActiveMQ的安装与使用
摘要:一、ActiveMQ是什么?ActiveMQ是Apache出品,最流行的,能力强劲的开源消息总线。支持多种语言客户端(Java,C,C++,C#,Python,Ruby,Perl,PHP), 支持多种协议(OpenWire,Stomp REST,WS Notification,XMPP,AMQP)。
阅读全文
使用PHP来简单的创建一个RPC服务
摘要:RPC全称为Remote Procedure Call,翻译过来为"远程过程调用"。主要应用于不同的系统之间的远程通信和相互调用。 比如有两个系统,一个是PHP写的,一个是JAVA写的,而PHP想要调用JAVA中的某个类的某个方法,这时候就需要用到RPC了。 怎么调?直接调是不可能,只能是PHP通过
阅读全文
gearman中任务的优先级和返回状态
摘要:gearman中任务的优先级和返回状态 一、任务的优先级 同步阻塞调用,等待返回结果 异步派发任务,不等待返回结果,返回任务句柄,通过该句柄可获取任务运行状态信息 注意Task和doXXX区别,Task是一组job,派发后会分配到多个worker上并行执行并返回结果给调用方。而doXXX的每个任务只
阅读全文
gearman中worker常驻后台,导致MySQL server has gone away
摘要:产生这个原因主要有如下几点: 为了演示的方便,设置wait_timeout时间为10秒 worker.php代码如下: client.php代码如下: 执行的结果如下图所示,出现了MySQL server has gone away的情况。 一般的解决方法: 1、调大wait_timeout的值(不
阅读全文
使用gearman进行异步的邮件或短信发送
摘要:一、准备工作 1、为了防止,处理业务途中出现的宕机,请配置好gearman的持久化方式。2、使用gearmanManager来管理我们的worker脚本,方便测试。 上述两条请看我之前写的两篇文章 二、编写测试脚本 sendEmail.php代码如下: client.php代码如下: 三、修改gea
阅读全文
gearman的持久化,以mysql的方式
摘要:1、为什么要持久化? gearman的job server中的工作队列存储在内存中,一旦服务器有未处理的任务时重启或者宕机,那么这些任务就会丢失。持久化存储队列可以允许添加后台任务,并将其存储在外部的持久型队列里(比如MySQL数据库)。 2、关于gearman的持久化的文章,建议可以看官方文档 3
阅读全文
gearman管理工具GearmanManager的安装与使用
摘要:一、gearman自带了一个gearadmin工具 查看帮助信息 查看状态 查看worker信息 二、为什么要用GearmanManager 为什么要用GearmanManager来管理我们的worker,因为我们用php编写的worker是要常驻后台运行的。而且一旦worker过多时,代码更新,难
阅读全文
php使用gearman进行任务分发
摘要:一、安装gearman 下载gearman源码包 如: gearmand-1.1.12.tar.gz 下载php的gearman扩展包 如: gearman-1.1.2.tgz 安装gearman 安装gearman的php扩展(建议php版本不要过高,因为php7的gearman扩展目前还没有出来
阅读全文
php使用fputcsv进行大数据的导出
摘要:为了实验大数据的导出,我们这里先自已创建一张大表,表结构如下: 然后写个php脚本往这个表插入数据,代码如下: 里面用到的TP3.2的String类大家自行上TP官网下载。整个用时2个多小时,最后数据大小662M。 现在我们用php提供的fputcsv来导出这一百万的数据,原理就是打开一个标准输出流
阅读全文