This topic created in 2377 days ago, the information mentioned may be changed or developed.
import re
import urllib.request
import urllib.error
headers = ("User-Agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36")
opener=urllib.request.build_opener()
opener.addheaders=[headers]
urllib.request.install_opener(opener)
for i in range(2,10):
aurl="http://m.qiushi.92game.net/?page="+str(i)
pagedata=urllib.request.urlopen(aurl).read().decode('utf-8','ignore')
data2 = pagedata
pat='<div class="qiushi" id=".*?">(.*?)</div>'
datalist = re.compile(pat)
datalist2 = datalist.findall(pagedata)
for j in range(0,len(datalist2)):
print("第"+str(i)+"页第"+str(j)+"条内容是")
print(datalist2[j])
这是爬一个网站的代码，我想请教这么几个问题
假如说做一个扩展的话，想单独爬标题我会，单独爬内容也会
把爬出来的字段，放到数据库里面，或者放到一个表格里面，应该怎么样写？
暂时在看 pyhton 方面的教程
框架这块我还没开始学。想先多了解一下。
import urllib.request
import urllib.error
headers = ("User-Agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/75.0.3770.100 Safari/537.36")
opener=urllib.request.build_opener()
opener.addheaders=[headers]
urllib.request.install_opener(opener)
for i in range(2,10):
aurl="http://m.qiushi.92game.net/?page="+str(i)
pagedata=urllib.request.urlopen(aurl).read().decode('utf-8','ignore')
data2 = pagedata
pat='<div class="qiushi" id=".*?">(.*?)</div>'
datalist = re.compile(pat)
datalist2 = datalist.findall(pagedata)
for j in range(0,len(datalist2)):
print("第"+str(i)+"页第"+str(j)+"条内容是")
print(datalist2[j])
这是爬一个网站的代码，我想请教这么几个问题
假如说做一个扩展的话，想单独爬标题我会，单独爬内容也会
把爬出来的字段，放到数据库里面，或者放到一个表格里面，应该怎么样写？
暂时在看 pyhton 方面的教程
框架这块我还没开始学。想先多了解一下。
 | 1 RicardoY Oct 26, 2019 via Android 贴代码可以用 markdown..插入数据库就直接插入啊..python 还拼错了.. |
 | 2 crab Oct 26, 2019 选择个数据库，创建表字段等等，把 datalist2[j]执行插入。 |
 | 3 imn1 Oct 26, 2019/span> 那就看你用什么数据库 sqlite 有内置 module，其他的一般需要第三方库，看它们带的文档 一般是把数据组织为 sql 语句，然后执行写入 |
 | 4 CallMeReznov Oct 26, 2019 手建个库，然后循环 SQL 插入即可。 |
 | 5 ClericPy Oct 26, 2019 三个内置库的用法, 一搜教程一大把 sqlite3 json csv pickle 从上往下 |
Select Language