ルックアップの絞り込み条件を、AND／ORで組み合わせて指定できますか？

はい、可能です。

「ルックアップ画面での検索条件」および「フィールドで絞り込み」で、同一フィールドに複数の条件を追加し、AND／ORで組み合わせられます。

たとえば、ある項目が「A または B」に当てはまるレコードだけを候補に表示する、といった絞り込みが可能です。