Boston Safety Data

Artikel
12/06/2023

311-oproepen die aan de stad Boston worden gemeld.

Volg deze koppeling voor meer informatie over BOS:311.

Notitie

Microsoft biedt Azure Open Datasets op basis van 'zoals is'. Microsoft geeft geen garanties, uitdrukkelijk of impliciet, garanties of voorwaarden met betrekking tot uw gebruik van de gegevenssets. Voor zover toegestaan volgens uw lokale wetgeving, wijst Microsoft alle aansprakelijkheid af voor eventuele schade of verliezen, waaronder directe, gevolgschade, speciale, indirecte, incidentele of strafbare gegevenssets, die het gevolg zijn van uw gebruik van de gegevenssets.

Deze gegevensset wordt geleverd onder de oorspronkelijke voorwaarden dat Microsoft de brongegevens heeft ontvangen. De gegevensset kan gegevens bevatten die afkomstig zijn van Microsoft.

Volume en retentie

Deze gegevensset wordt opgeslagen in de Parquet-indeling. Het wordt dagelijks bijgewerkt en bevat in totaal ongeveer 100 K rijen (10 MB) vanaf 2019.

Deze gegevensset bevat historische records die vanaf 2011 tot heden zijn verzameld. U kunt in onze SDK gebruikmaken van parameterinstellingen om gegevens op te halen binnen een specifiek tijdsbereik.

Opslaglocatie

Deze gegevensset wordt opgeslagen in de Azure-regio US - oost. Het wordt aanbevolen om rekenresources in US - oost toe te wijzen voor affiniteit.

Aanvullende informatie

Deze gegevensset is afkomstig van het stadsbestuur van Boston. Zie de gegevenssetsite van Boston voor meer informatie. Zie Open Data Commons Public Domain Commitment and License (ODC PDDL) voor gegevenssetlicenties.

Kolommen

Naam	Gegevenstype	Uniek	Waarden (voorbeeld)	Beschrijving
Adres	tekenreeks	140,612	" " 1 Stadhuis alstublieft Boston MA 02108	Locatie.
category	tekenreeks	54	Afvalverwerking op straat	Reden van de serviceaanvraag.
dataSubtype	tekenreeks	1	311_All	"311_All"
Datatype	tekenreeks	1	Veiligheid	"Veiligheid"
dateTime	timestamp	1,529,075	2015-07-23 10:51:00 2015-07-23 10:47:00	Datum en tijdstip waarop de serviceaanvraag is geopend.
breedtegraad	dubbel	1,622	42.3594 42.3603	Dit is de waarde voor de breedtegraad. Breedtegraden lopen parallel aan de evenaar.
lengtegraad	dubbel	1,806	-71.0587 -71.0583	Dit is de waarde voor de lengtegraad. Lengtegraden staan haaks op breedtegraden en doorkruisen beide polen.
source	tekenreeks	7	Samenstellende oproep burgers Verbinding maken-app	Oorspronkelijke bron van de case.
status	tekenreeks	2	Gesloten open	Status van de case.
Subcategorie	tekenreeks	209	Afdwingingsverzoeken voor straat opruimen	Het type van de serviceaanvraag.

Preview

ataType	dataSubtype	dateTime	category	Subcategorie	status	Adres	breedtegraad	lengtegraad	source
Veiligheid	311_All	27-4-2021 11:45:49 pm	Afdwinging en verlaten voertuigen	Parkeerhandhaving	Startkoers	51 Gardner St Allston MA 02134	42.3535	-71.1285	Burgers Verbinding maken App
Veiligheid	311_All	27-4-2021 11:43:43 uur	Sanitaire voorzieningen	Gemiste prullenbak/recycling/werfafval/bulkitem	Startkoers	4 Putnam Pl Roxbury MA 02119	42.3298	-71.0883	Selfservice
Veiligheid	311_All	27-4-2021 11:37:19	Afdwinging en verlaten voertuigen	Parkeerhandhaving	Startkoers	36 Raven St Dorchester MA 02125	42.3177	-71.0546	Burgers Verbinding maken App
Veiligheid	311_All	27-4-2021 11:30:00 uur	Sanitaire voorzieningen	Gemiste prullenbak/recycling/werfafval/bulkitem	Startkoers	58 Bicknell St Dorchester MA 02121	42.2984	-71.0834	Samenstellende oproep
Veiligheid	311_All	27-4-2021 11:10:20	Afdwinging en verlaten voertuigen	Parkeerhandhaving	Startkoers	2000 Gemenebest Ave Ave MA 02135	42.3394	-71.1585	Burgers Verbinding maken App
Veiligheid	311_All	27-4-2021 11:06:00 uur	Geluidsoverlast	Luide feesten/Muziek/Mensen	Startkoers	SNIJPUNT van Lewis St & North St Boston MA	42.3594	-71.0587	Samenstellende oproep
Veiligheid	311_All	27-4-2021 11:05:00 uur	Afdwinging en verlaten voertuigen	Parkeerhandhaving	Startkoers	1 Nassau St Boston MA 02111	42.3486	-71.0629	Samenstellende oproep
Veiligheid	311_All	27-4-2021 11:00:55 uur	Code afdwingen	Slechte omstandigheden van eigendom	Startkoers	17 Mercer St South Boston MA 02127	42.3332	-71.0492	Burgers Verbinding maken App

Toegang tot gegevens

Azure Notebooks

# This is a package in preview.
from azureml.opendatasets import BostonSafety

from datetime import datetime
from dateutil import parser

end_date = parser.parse('2016-01-01')
start_date = parser.parse('2015-05-01')
safety = BostonSafety(start_date=start_date, end_date=end_date)
safety = safety.to_pandas_dataframe()

safety.info()

# Pip install packages
import os, sys

!{sys.executable} -m pip install azure-storage-blob
!{sys.executable} -m pip install pyarrow
!{sys.executable} -m pip install pandas

# Azure storage access info
azure_storage_account_name = "azureopendatastorage"
azure_storage_sas_token = r""
container_name = "citydatacontainer"
folder_name = "Safety/Release/city=Boston"

from azure.storage.blob import BlockBlobServicefrom azure.storage.blob import BlobServiceClient, BlobClient, ContainerClient

if azure_storage_account_name is None or azure_storage_sas_token is None:
    raise Exception(
        "Provide your specific name and key for your Azure Storage account--see the Prerequisites section earlier.")

print('Looking for the first parquet under the folder ' +
      folder_name + ' in container "' + container_name + '"...')
container_url = f"https://{azure_storage_account_name}.blob.core.windows.net/"
blob_service_client = BlobServiceClient(
    container_url, azure_storage_sas_token if azure_storage_sas_token else None)

container_client = blob_service_client.get_container_client(container_name)
blobs = container_client.list_blobs(folder_name)
sorted_blobs = sorted(list(blobs), key=lambda e: e.name, reverse=True)
targetBlobName = ''
for blob in sorted_blobs:
    if blob.name.startswith(folder_name) and blob.name.endswith('.parquet'):
        targetBlobName = blob.name
        break

print('Target blob to download: ' + targetBlobName)
_, filename = os.path.split(targetBlobName)
blob_client = container_client.get_blob_client(targetBlobName)
with open(filename, 'wb') as local_file:
    blob_client.download_blob().download_to_stream(local_file)

# Read the parquet file into Pandas data frame
import pandas as pd

print('Reading the parquet file into Pandas data frame')
df = pd.read_parquet(filename)

# you can add your filter at below
print('Loaded as a Pandas data frame: ')
df

Azure Databricks

# This is a package in preview.
# You need to pip install azureml-opendatasets in Databricks cluster. https://learn.microsoft.com/azure/data-explorer/connect-from-databricks#install-the-python-library-on-your-azure-databricks-cluster
from azureml.opendatasets import BostonSafety

from datetime import datetime
from dateutil import parser


end_date = parser.parse('2016-01-01')
start_date = parser.parse('2015-05-01')
safety = BostonSafety(start_date=start_date, end_date=end_date)
safety = safety.to_spark_dataframe()

display(safety)

# Azure storage access info
blob_account_name = "azureopendatastorage"
blob_container_name = "citydatacontainer"
blob_relative_path = "Safety/Release/city=Boston"
blob_sas_token = r""

# Allow SPARK to read from Blob remotely
wasbs_path = 'wasbs://%s@%s.blob.core.windows.net/%s' % (blob_container_name, blob_account_name, blob_relative_path)
spark.conf.set(
  'fs.azure.sas.%s.%s.blob.core.windows.net' % (blob_container_name, blob_account_name),
  blob_sas_token)
print('Remote blob path: ' + wasbs_path)

# SPARK read parquet, note that it won't load any data yet by now
df = spark.read.parquet(wasbs_path)
print('Register the DataFrame as a SQL temporary view: source')
df.createOrReplaceTempView('source')

# Display top 10 rows
print('Displaying top 10 rows: ')
display(spark.sql('SELECT * FROM source LIMIT 10'))

Azure Synapse

from azureml.opendatasets import BostonSafety

from datetime import datetime
from dateutil import parser


end_date = parser.parse('2016-01-01')
start_date = parser.parse('2015-05-01')
safety = BostonSafety(start_date=start_date, end_date=end_date)
safety = safety.to_spark_dataframe()

display(safety)

# Azure storage access info
blob_account_name = "azureopendatastorage"
blob_container_name = "citydatacontainer"
blob_relative_path = "Safety/Release/city=Boston"
blob_sas_token = r""

# Allow SPARK to read from Blob remotely
wasbs_path = 'wasbs://%s@%s.blob.core.windows.net/%s' % (blob_container_name, blob_account_name, blob_relative_path)
spark.conf.set(
  'fs.azure.sas.%s.%s.blob.core.windows.net' % (blob_container_name, blob_account_name),
  blob_sas_token)
print('Remote blob path: ' + wasbs_path)

# SPARK read parquet, note that it won't load any data yet by now
df = spark.read.parquet(wasbs_path)
print('Register the DataFrame as a SQL temporary view: source')
df.createOrReplaceTempView('source')

# Display top 10 rows
print('Displaying top 10 rows: ')
display(spark.sql('SELECT * FROM source LIMIT 10'))

Voorbeelden

Zie het voorbeeld van City Safety Analytics op GitHub.

Volgende stappen

Bekijk de rest van de gegevenssets in de catalogus Open Datasets.