Poggiorsini sorge su una collina dell'Alta Murgia, a 461 metri sul livello del mare e a 54 km dalla costa adriatica. Il paesaggio è quello tipico della Murgia pugliese: un altopiano calcareo modellato dal carsismo, con doline, lame e affioramenti rocciosi. Dal punto panoramico Belvedere si abbraccia un orizzonte che spazia fino alle Murge baresi e al Parco Nazionale dell'Alta Murgia. Il centro conta appena 1 240 abitanti, con una densità di 28 ab/km², a testimonianza di un territorio ancora poco antropizzato e fortemente rurale.
L'economia locale si basa sull'agricoltura e sull'allevamento, che danno vita a prodotti come il Caciocavallo Silano DOP, il Canestrato Pugliese DOP e il Capocollo di Martina Franca DOP; il territorio rientra anche nell'area del Cece della Murgia Carsica DOP e del Dauno DOP. Il reddito medio annuo è di 17.291 euro, mentre il prezzo delle case si attesta sui 505 €/m². La copertura FTTH arriva al 47%, segno di una connettività ancora in via di sviluppo.
L'indice di vecchiaia è alto (239) e il saldo naturale negativo (-4), segnali di una popolazione in calo. Nonostante il rischio idrogeologico elevato e il suolo consumato al 3,9%, il borgo offre un ambiente tranquillo e autentico, con un monumento storico e la vicinanza ai siti UNESCO di Andria e Matera.