潮童街拍

正则爬取京东商品信息并打包成.exe可执行程序

 更新时间:2019-09-09 03:00:55   作者:佚名   我要评论(0)

本文爬取内容,输入要搜索的关键字可自动爬取京东网站上相关商品的店铺名称,商品名称,价格,爬取100页(共100页)
代码如下;




import requests
import

潮童街拍本文爬取内容,输入要搜索的关键字可自动爬取京东网站上相关商品的店铺名称,商品名称,价格,爬取100页(共100页)

代码如下;

import requests
import re
# 请求头
headers = {
  'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/65.0.3325.181 Safari/537.36'
}

def get_all(url,key):
  for page in range(1,200,2):
    params = {
      'keyword':key,
      'enc':'utf-8',
      'page':page
    }
    num = int((int(page)+1)/2)
    try:
      response = requests.get(url=url,params=params,headers=headers)
      # 转码
      content = response.text.encode(response.encoding).decode(response.apparent_encoding)
      data_all = re.findall('<div class="p-price">.*?<i>(.*?)</i>.*?<div class="p-name p-name-type-2">.*?title="(.*?)"'
                 '.*?<div class="p-shop".*?title="(.*?)"',content,re.S)
      for i in data_all:
        with open(key + '.txt', 'a+', encoding='utf-8') as f:
          f.write('店铺名称:' + i[2]+'\n'+'商品名称:'+i[1]+'\n'+'价格:'+i[0]+'\n\n')
        print('第'+str(num)+'页'+'数据下载中....')
    except Exception as e:
      print(e)

if __name__ == '__main__':
  print('输入要搜索的内容,获取京东商城里面的商品名称,店铺名称,商品价格')
  key = input('输入搜索内容:')
  url = 'http://search.jd.com/Search?'
  get_all(url,key)

打包成.exe可执行文件。

潮童街拍需要用到pyinstaller包pip下载;

pip install pyinstaller

在线制作一个.ico图标,用来当程序图片,把图标和程序放在同一个文件夹下,

 

潮童街拍在.py文件目录下打开命令行窗口,执行打包命令;

E:\练习\最后阶段\0808\jd1>pyinstaller -F -i dog.ico jd.py

出现successfully表示打包成功;

27525 INFO: Building EXE from EXE-00.toc completed successfully.

潮童街拍可执行程序在当前文件夹下的dist文件夹下;

运行效果;

可同时执行多个程序;

输出结果;

done。

总结

以上所述是小编给大家介绍的正则爬取京东商品信息并打包成.exe可执行程序,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对脚本之家网站的支持!
如果你觉得本文对你有帮助,欢迎转载,烦请注明出处,谢谢!

您可能感兴趣的文章:

  • python正则表达式爬取猫眼电影top100
  • python爬虫 正则表达式使用技巧及爬取个人博客的实例讲解
  • C语言正则表达式详解 regcomp() regexec() regfree()用法详解
  • 正则表达式中test、exec、match的区别介绍及括号的用法
  • 全面解析JS字符串和正则表达式中的match、replace、exec等函数
  • js正则表达式test()和exec()用法实例
  • js正则表达式中test,exec,match方法的区别说明
  • js正则函数match、exec、test、search、replace、split使用介绍集合
  • js的正则test,match,exec详细解析

潮童街拍相关的文章

  • Linux查找文件夹下包含某字符的所有文件

    Linux查找文件夹下包含某字符的所有文件

    Linux grep 命令用于查找文件里符合条件的字符串。grep 指令用于查找内容包含指定的范本样式的文件,如果发现某文件的内容符合所指定的范本样式,预设 grep 指
    2019-09-09
  • 详解Python3中的正则表达式的基本用法

    详解Python3中的正则表达式的基本用法

    正则表达式 本节我们看一下正则表达式的相关用法,正则表达式是处理字符串的强大的工具,它有自己特定的语法结构,有了它,实现字符串的检索、替换、匹配验证
    2019-09-09
  • 正则爬取京东商品信息并打包成.exe可执行程序

    正则爬取京东商品信息并打包成.exe可执行程序

    本文爬取内容,输入要搜索的关键字可自动爬取京东网站上相关商品的店铺名称,商品名称,价格,爬取100页(共100页) 代码如下; import requests import
    2019-09-09
  • shell脚本字符串和数组的使用操作方法

    shell脚本字符串和数组的使用操作方法

    字符串 可以使用单引号和双引号定义字符串变量但是单引号中不支持变量解析 #! /bin/bash username="mayuan" str_1="hello ${username}" str_2='hello ${us
    2019-09-09
  • Linux Vim 实用命令详解

    Linux Vim 实用命令详解

    Linux常用命令 - 已学 cd (路径的切换) rm(后接-rf 可删除文件或文件夹) ls(查看当前路径下的文件和文件夹) mkdir(创建文件夹) touch(创建
    2019-09-09
  • python正则表达式从字符串中提取数字的思路详解

    python正则表达式从字符串中提取数字的思路详解

    python从字符串中提取数字 使用正则表达式,用法如下: ## 总结 ## ^ 匹配字符串的开始。 ## $ 匹配字符串的结尾。 ## \b 匹配一个单词的边界。 ## \d 匹配
    2019-09-09
  • 使用AWK在shell中生成日历小程序

    使用AWK在shell中生成日历小程序

    最近在学习sed和awk时,发现了一本入门级别的好书:《Software Design 中文版 03》。 我们这里的日历程序也是从那里得来,这里强烈推荐希望了解sed和awk的
    2019-09-09
  • linux下文件描述符限制问题

    linux下文件描述符限制问题

    一.问题描述 在调试一个问题的时候,socket始终连接不上,返回的句柄大约是1030左右。开始的时候是好的,运行一段时间后出现的问题。 二.问题分析 问题过去有
    2019-09-09
  • 每天一个Linux命令之shell单引号和双引号的经典解释

    每天一个Linux命令之shell单引号和双引号的经典解释

    01 经典解释 单引号:所见即所得 双引号:所见非所得,它会先把变量解析之后,再输出 反引号(``) :命令替换,通常用于把命令输出结果传给入变量中 反斜杠(
    2019-09-09
  • java正则表达式获取大括号小括号内容并判断数字和小数亲测可用

    java正则表达式获取大括号小括号内容并判断数字和小数亲测可用

    获取大括号小括号内容 项目开发用到了,暂做个简单记录 private static String regex = "\\{([^}]*)\\}";//匹配大括号 private static String regexx = "
    2019-09-09

最新评论

神马电影网www.hmlhsw.com