采集练习(七) php 获得电视节目预告(一周节目)
2011年时公司有这个采集电视节目预告这个需求,那时是其他同事写的,今天在网上找了一下,采集那些电视网站都需要用到正则匹配,一番查找之后终于在手机CCTV(m.cctv.com)里的找到了简单的获取节目预告的方式。
点开 手机央视网 在最下面 点开 电视节目 里面就有我们需要的节目预告了
如 http://m.46644.com/tool/tv/data/433/20130311.js 点开是获得 cctv1 这周的节目单
433是 电视台id;
20130311.js 是 周一 的日期命名的 js
采集分析:
1、首先获得电视台名和其id (都在页面上可以正则获得);
2、根据获得的电视台id 重组url 模拟访问 获得节目json(json文件里有一周的节目单) 解析即可 。
遇到的问题:
1、获取节目json时 只能用周一的日期文件名获取其json;
2、页面编码是gb2312 而json文件必须是utf-8 编码要转化。
代码如下:
/** * Created by JetBrains PhpStorm. * User: keygle * Date: 13-3-12 * From: www.cnblogs.com/keygle * Time: 上午11:27 * To change this template use File | Settings | File Templates. */ // 获得电视预告 // 数据来自 m.cctv.com 里的电视节目(http://m.46644.com/tool/tv/cctv.php?classid=1&width=240&tpltype=cctv) header("Content-Type:text/html;charset=utf-8"); date_default_timezone_set('PRC'); function getTvList($listUrl) { $tvHtml = @file_get_contents($listUrl); $tvList = array(); preg_match_all('/data-id="([^"]+)">([^<]+) $val) { $tvList[$val]['name'] = iconv('gbk', 'utf-8', $tvData[2][$key]); //http://m.46644.com/tool/tv/data/434/20130311.js //一次获得一周的节目预告 js名必须是周一那天日期 $n = date('N');//获得今天是这周的第几天 $dates = $n > 1 ? date('Ymd', time() - ($n - 1) * 24 * 3600) : date('Ymd'); $tvListUrl = 'http://m.46644.com/tool/tv/data/' . $val . '/' . $dates . '.js'; $tvJson = @file_get_contents($tvListUrl); //获得一周的电视预告 $tvList[$val]['tvlist'] = json_decode($tvJson, true); } return $tvList; } $cctvlistUrl = "http://m.46644.com/tool/tv/cctv.php?classid=1&width=240&tpltype=cctv"; //央视页面 $proListUrl = "http://m.46644.com/tool/tv/list2.php?type=pro&width=240&tpltype=cctv"; //卫视页面 $disListUrl = "http://m.46644.com/tool/tv/cctv.php?classid=11";// 地方电视台页面 classid = 11 表示北京的所有电视台 classid 的范围是 11 到 44 具体详情请查看相应页面 //print_r(getTvList($disListUrl));