php抓取新浪新闻,新浪新闻采集程序

缺乏、安全感 2023-01-16 06:45 258阅读 0赞

利用正则表达式提取内容信息<?php

//error\_reporting(0);

$date=date("Ymd");

//echo $date;

$url="http://top.finance.sina.com.cn/ws/GetTopDataList.php?top\_type=day&top\_cat=all&top\_time=".$date."&top\_show\_num=20&top\_order=ASC";

$doc=file\_get\_contents($url);

header("Content-Type:text/html;charset=gb2312");//UNICODE转GB2312

//echo $doc;

preg\_match\_all('/"url":".\*l/U',$doc,$article);//获取文章列表

$article=current($article);//二维数组转一维数组

//print\_r($article);

$rule="/\\"url\\":(.\*)\\"\\"/";

function OnlyUrl($string)\{

$string=stripslashes($string);

$string=str\_replace('"url":"',"",$string);

return $string;

\}

function GetTitle($url)\{ //获取文章标题

$doc=file\_get\_contents($url);

$rule="/

# /"; #

preg\_match($rule,$doc,$result);

echo $result;

\}

foreach($article as &$value)\{

$value=OnlyUrl($value);

\}//提取了URL

?><?php

function GetTitle($url)\{ //获取文章标题

$rule="/

# /"; #

preg\_match\_all($rule,$doc,$result);

$rule="/>(.\*)";//截掉

#  #

preg\_match($rule,$result\[0\]\[1\],$title);

return $title\[1\];

\}

function GetContent($url)\{

$doc=file\_get\_contents($url);//打开网页

// echo $doc;

$rule="/publish\_helper(.\*)publish\_helper\_end/xs";

preg\_match($rule,$doc,$result);//取出正文部分

//echo $result\[0\];

$rule="/publish\_helper(.\*)/xs";

preg\_match($rule,$result\[0\],$out);//取出链接部分

//print\_r($out);

$content=str\_replace($out\[0\],"",$result\[0\]);//提取纯文字段的内容

echo $content;

\}

?>

本文原创发布php中文网，转载请注明出处，感谢您的尊重！

发表评论取消回复

表情：

评论列表（有 0 条评论，258人围观）

还没有评论，来说两句吧...

相关阅读

相关新浪微博

\import <Social/Social.h> \import <ACCOUNTS/ACAccount.h> - (IBAction)Tou

ゝ一纸荒年。/ 2023年10月08日 11:59/ 0 赞/ 84 阅读

相关 php抓取新浪新闻,新浪新闻采集程序

利用正则表达式提取内容信息<?php //error\_reporting(0); $date=date("Ymd"); //echo $date; $url="htt

缺乏、安全感/ 2023年01月16日 06:45/ 0 赞/ 259 阅读

相关 php抓取新浪微博数据抓取,php利用curl抓取新浪微博内容实例

很多人都喜欢在网站上DIY自己的微博，所以我也写了一个。这里直接抓取了新浪微博工具中的微博秀地址。复制代码代码如下: set\_time\_limit(0); $

深碍√TFBOYSˉ_/ 2022年11月17日 03:54/ 0 赞/ 255 阅读

相关新闻平台聚合之新浪新闻爬虫发布

idea of startproject 1. 对于 web 开发者而言，目前各大新闻门户网站，新浪新闻，百度新闻，腾讯新闻，澎湃新闻，头条新闻并没有提供稳定可用的 f

逃离我推掉我的手/ 2022年11月07日 14:51/ 0 赞/ 245 阅读

相关 python3爬取新浪新闻内容

代码如下： commentsUrl用于获取新闻评论数等json信息 commentsUrl = 'http://comment5.news.sina.com.

- 日理万妓/ 2022年07月12日 09:38/ 0 赞/ 335 阅读

相关 python3爬虫-爬取新浪新闻首页所有新闻标题

准备工作：安装requests和BeautifulSoup4。打开cmd，输入如下命令 pip install requests pip install Be

超、凢脫俗/ 2022年07月12日 09:21/ 0 赞/ 428 阅读

相关今天写了一个简单的新浪新闻RSS操作类库

今天，有位群友问我如何获新浪新闻列表相关问题，我想，用正则表达式网页中取显然既复杂又不一定准确，现在许多大型网站都有RSS集合，所以我就跟他说用RSS应该好办一些。一

超、凢脫俗/ 2022年06月16日 07:42/ 0 赞/ 233 阅读

相关多线程新浪新闻搜索网络爬虫-基于关键字

本文为原创博客，仅供技术学习使用。未经允许，禁止将其复制下来上传到百度文库等平台。如有转载请注明本文博客的地址(链接) 源码获取请联系：1563178220@qq.com

朴灿烈づ我的快乐病毒、/ 2022年06月05日 06:57/ 0 赞/ 203 阅读

相关 SSM整点定时抓取新浪网IT新闻数据

之前做过一些网站的数据抓取功能,不过是手动操作抓取,现在做的是定时任务下的数据爬取.每天7点到23点,后台自动先清空原数据表中的数据,再将新爬取的数据写入数据库 1.数据库

青旅半醒/ 2022年05月26日 10:43/ 0 赞/ 153 阅读

相关爬虫技术——抓取新浪云邀请排名

本文介绍如何抓取新浪云邀请排名。一、新浪云邀请新浪云邀请新用户并实名认证，可以获得云豆。使用云豆就可以免费使用新浪云的服务器。目前，方倍工作室的多个项目都部署

客官°小女子只卖身不卖艺/ 2021年11月19日 15:58/ 0 赞/ 280 阅读