名称

Loader_Generate_Script — 为指定平台和指定州生成一个 shell 脚本,用于下载 Tiger 数据,并将数据暂存并加载到 tiger_data 模式中。每个州的脚本都作为单独的记录返回。最新版本支持 Tiger 2010 结构变化,还加载人口普查区、区组和街区表。

概要

setof text loader_generate_script(text[] param_states, text os);

描述

为指定平台和指定州生成一个 shell 脚本,用于下载 Tiger 数据,并将数据暂存并加载到 tiger_data 模式中。每个州的脚本都作为单独的记录返回。

它使用 Linux 上的 unzip(默认情况下,Windows 上使用 7-zip)和 wget 进行下载。它使用 第 4.7.2 节,“使用 Shapefile 加载器” 加载数据。请注意,它处理的最小单位是整个州,但您可以通过自己下载文件来覆盖此设置。它只会处理暂存和临时文件夹中的文件。

它使用以下控制表来控制流程和不同的操作系统 shell 语法变体。

  1. loader_variables 跟踪各种变量,例如人口普查站点、年份、数据和暂存模式

  2. loader_platform 各种平台的配置文件,以及各种可执行文件的位置。包含 Windows 和 Linux。可以添加更多。

  3. loader_lookuptables 每条记录定义一种表类型(州、县)、是否在其中处理记录以及如何加载它们。定义了导入数据、暂存数据、添加、删除列、索引和约束的步骤。每个表都以州为前缀,并继承自 tiger 模式中的一个表。例如,创建 tiger_data.ma_faces,它继承自 tiger.faces

可用性:2.0.0,支持 Tiger 2010 结构化数据,并加载人口普查区(tract)、区组(bg)和街区(tabblocks)表。

[Note]

如果您使用的是 pgAdmin 3,请注意默认情况下 pgAdmin 3 会截断长文本。要解决此问题,请将 文件 -> 选项 -> 查询工具 -> 查询编辑器 -> 每列最大字符数 更改为大于 50000 个字符。

示例

使用 psql,其中 gistest 是您的数据库,/gisdata/data_load.sh 是要创建的包含要运行的 shell 命令的文件。

psql -U postgres -h localhost -d gistest -A -t \
 -c "SELECT Loader_Generate_Script(ARRAY['MA'], 'gistest')" > /gisdata/data_load.sh;

生成脚本以在 Windows shell 脚本格式中加载两个州的数据。

SELECT loader_generate_script(ARRAY['MA','RI'], 'windows') AS result;
-- result --
set TMPDIR=\gisdata\temp\
set UNZIPTOOL="C:\Program Files\7-Zip\7z.exe"
set WGETTOOL="C:\wget\wget.exe"
set PGBIN=C:\Program Files\PostgreSQL\9.4\bin\
set PGPORT=5432
set PGHOST=localhost
set PGUSER=postgres
set PGPASSWORD=yourpasswordhere
set PGDATABASE=geocoder
set PSQL="%PGBIN%psql"
set SHP2PGSQL="%PGBIN%shp2pgsql"
cd \gisdata

cd \gisdata
%WGETTOOL% ftp://ftp2.census.gov/geo/tiger/TIGER2015/PLACE/tl_*_25_* --no-parent --relative --recursive --level=2 --accept=zip --mirror --reject=html
cd \gisdata/ftp2.census.gov/geo/tiger/TIGER2015/PLACE
:
:

生成 sh 脚本

SELECT loader_generate_script(ARRAY['MA','RI'], 'sh') AS result;
-- result --
TMPDIR="/gisdata/temp/"
UNZIPTOOL=unzip
WGETTOOL="/usr/bin/wget"
export PGBIN=/usr/lib/postgresql/9.4/bin
-- variables used by psql: https://postgresql.ac.cn/docs/current/static/libpq-envars.html
export PGPORT=5432
export PGHOST=localhost
export PGUSER=postgres
export PGPASSWORD=yourpasswordhere
export PGDATABASE=geocoder
PSQL=${PGBIN}/psql
SHP2PGSQL=${PGBIN}/shp2pgsql
cd /gisdata

cd /gisdata
wget ftp://ftp2.census.gov/geo/tiger/TIGER2015/PLACE/tl_*_25_* --no-parent --relative --recursive --level=2 --accept=zip --mirror --reject=html
cd /gisdata/ftp2.census.gov/geo/tiger/TIGER2015/PLACE
rm -f ${TMPDIR}/*.*
:
:

另请参阅

第 2.4.1 节,“Tiger Geocoder 启用您的 PostGIS 数据库”Loader_Generate_Nation_ScriptDrop_State_Tables_Generate_Script