File Coverage

blib/lib/PPI/Token.pm
Criterion Covered Total %
statement 150 157 95.5
branch 14 26 53.8
condition n/a
subroutine 53 53 100.0
pod 6 8 75.0
total 223 244 91.3


line stmt bran cond sub pod time code
1             package PPI::Token;
2              
3             =pod
4              
5             =head1 NAME
6              
7             PPI::Token - A single token of Perl source code
8              
9             =head1 INHERITANCE
10              
11             PPI::Token
12             isa PPI::Element
13              
14             =head1 DESCRIPTION
15              
16             C is the abstract base class for all Tokens. In PPI terms, a "Token" is
17             a L that directly represents bytes of source code.
18              
19             =head1 METHODS
20              
21             =cut
22              
23 69     69   367 use strict;
  69         104  
  69         2449  
24 69     69   621 use Params::Util qw{_INSTANCE};
  69         5304  
  69         2883  
25 69     69   689 use PPI::Element ();
  69         95  
  69         916  
26 69     69   537 use PPI::Exception ();
  69         79  
  69         2712  
27              
28             our $VERSION = '1.291';
29              
30             our @ISA = 'PPI::Element';
31              
32             # We don't load the abstracts, they are loaded
33             # as part of the inheritance process.
34              
35             # Load the token classes
36 69     69   25179 use PPI::Token::BOM ();
  69         164  
  69         1648  
37 69     69   27807 use PPI::Token::Whitespace ();
  69         172  
  69         2098  
38 69     69   25377 use PPI::Token::Comment ();
  69         165  
  69         1538  
39 69     69   24837 use PPI::Token::Pod ();
  69         166  
  69         1824  
40 69     69   23325 use PPI::Token::Number ();
  69         161  
  69         1783  
41 69     69   26225 use PPI::Token::Number::Binary ();
  69         170  
  69         1797  
42 69     69   23407 use PPI::Token::Number::Octal ();
  69         173  
  69         1750  
43 69     69   24142 use PPI::Token::Number::Hex ();
  69         159  
  69         1730  
44 69     69   25380 use PPI::Token::Number::Float ();
  69         168  
  69         2049  
45 69     69   26083 use PPI::Token::Number::Exp ();
  69         143  
  69         2092  
46 69     69   27000 use PPI::Token::Number::Version ();
  69         166  
  69         2140  
47 69     69   27346 use PPI::Token::Word ();
  69         196  
  69         2485  
48 69     69   23790 use PPI::Token::DashedWord ();
  69         184  
  69         2165  
49 69     69   25027 use PPI::Token::Symbol ();
  69         207  
  69         2627  
50 69     69   23007 use PPI::Token::ArrayIndex ();
  69         474  
  69         2524  
51 69     69   24352 use PPI::Token::Magic ();
  69         172  
  69         2604  
52 69     69   25814 use PPI::Token::Quote::Single ();
  69         161  
  69         2532  
53 69     69   25990 use PPI::Token::Quote::Double ();
  69         201  
  69         3591  
54 69     69   25474 use PPI::Token::Quote::Literal ();
  69         222  
  69         2809  
55 69     69   25662 use PPI::Token::Quote::Interpolate ();
  69         158  
  69         2622  
56 69     69   25209 use PPI::Token::QuoteLike::Backtick ();
  69         134  
  69         2574  
57 69     69   23381 use PPI::Token::QuoteLike::Command ();
  69         152  
  69         2643  
58 69     69   24974 use PPI::Token::QuoteLike::Regexp ();
  69         194  
  69         2698  
59 69     69   24893 use PPI::Token::QuoteLike::Words ();
  69         153  
  69         5211  
60 69     69   24323 use PPI::Token::QuoteLike::Readline ();
  69         183  
  69         3208  
61 69     69   24649 use PPI::Token::Regexp::Match ();
  69         149  
  69         2889  
62 69     69   24201 use PPI::Token::Regexp::Substitute ();
  69         156  
  69         2913  
63 69     69   24495 use PPI::Token::Regexp::Transliterate ();
  69         176  
  69         3173  
64 69     69   24379 use PPI::Token::Operator ();
  69         171  
  69         3752  
65 69     69   22868 use PPI::Token::Cast ();
  69         162  
  69         3271  
66 69     69   23340 use PPI::Token::Structure ();
  69         165  
  69         3796  
67 69     69   24677 use PPI::Token::Label ();
  69         156  
  69         3534  
68 69     69   26486 use PPI::Token::HereDoc ();
  69         237  
  69         4069  
69 69     69   23556 use PPI::Token::Separator ();
  69         153  
  69         3428  
70 69     69   22184 use PPI::Token::Data ();
  69         150  
  69         4243  
71 69     69   27500 use PPI::Token::End ();
  69         170  
  69         4108  
72 69     69   23213 use PPI::Token::Prototype ();
  69         163  
  69         3976  
73 69     69   23143 use PPI::Token::Attribute ();
  69         169  
  69         4145  
74 69     69   394 use PPI::Token::Unknown ();
  69         107  
  69         49763  
75              
76              
77              
78              
79              
80             #####################################################################
81             # Constructor and Related
82              
83             sub new {
84 580245 50   580245 0 3564837 bless { content => (defined $_[1] ? "$_[1]" : '') }, $_[0];
85             }
86              
87             sub set_class {
88 43221     43221 0 46824 my $self = shift;
89             # @_ or throw Exception("No arguments to set_class");
90 43221 50       78190 my $class = substr( $_[0], 0, 12 ) eq 'PPI::Token::' ? shift : 'PPI::Token::' . shift;
91              
92             # Find out if the current and new classes are complex
93 43221 50       127724 my $old_quote = (ref($self) =~ /\b(?:Quote|Regex)\b/o) ? 1 : 0;
94 43221 50       83974 my $new_quote = ($class =~ /\b(?:Quote|Regex)\b/o) ? 1 : 0;
95              
96             # No matter what happens, we will have to rebless
97 43221         65039 bless $self, $class;
98              
99             # If we are changing to or from a Quote style token, we
100             # can't just rebless and need to do some extra thing
101             # Otherwise, we have done enough
102 43221 50       110616 return $class if ($old_quote - $new_quote) == 0;
103              
104             # Make a new token from the old content, and overwrite the current
105             # token's attributes with the new token's attributes.
106 0         0 my $token = $class->new( $self->{content} );
107 0         0 %$self = %$token;
108              
109             # Return the class as a convenience
110 0         0 return $class;
111             }
112              
113              
114              
115              
116              
117             #####################################################################
118             # PPI::Token Methods
119              
120             =pod
121              
122             =head2 set_content $string
123              
124             The C method allows you to set/change the string that the
125             C object represents.
126              
127             Returns the string you set the Token to
128              
129             =cut
130              
131             sub set_content {
132 1     1 1 6 $_[0]->{content} = $_[1];
133             }
134              
135             =pod
136              
137             =head2 add_content $string
138              
139             The C method allows you to add additional bytes of code
140             to the end of the Token.
141              
142             Returns the new full string after the bytes have been added.
143              
144             =cut
145              
146 1     1 1 6 sub add_content { $_[0]->{content} .= $_[1] }
147              
148             =pod
149              
150             =head2 length
151              
152             The C method returns the length of the string in a Token.
153              
154             =cut
155              
156 7     7 1 153 sub length { CORE::length($_[0]->{content}) }
157              
158              
159              
160              
161              
162             #####################################################################
163             # Overloaded PPI::Element methods
164              
165             sub content {
166 1406816     1406816 1 3089979 $_[0]->{content};
167             }
168              
169             # You can insert either a statement, or a non-significant token.
170             sub insert_before {
171 1     1 1 2 my $self = shift;
172 1 50       10 my $Element = _INSTANCE(shift, 'PPI::Element') or return undef;
173 1 50       7 if ( $Element->isa('PPI::Structure') ) {
    50          
174 0         0 return $self->__insert_before($Element);
175             } elsif ( $Element->isa('PPI::Token') ) {
176 1         4 return $self->__insert_before($Element);
177             }
178 0         0 '';
179             }
180              
181             # As above, you can insert a statement, or a non-significant token
182             sub insert_after {
183 1     1 1 2 my $self = shift;
184 1 50       9 my $Element = _INSTANCE(shift, 'PPI::Element') or return undef;
185 1 50       7 if ( $Element->isa('PPI::Structure') ) {
    50          
186 0         0 return $self->__insert_after($Element);
187             } elsif ( $Element->isa('PPI::Token') ) {
188 1         4 return $self->__insert_after($Element);
189             }
190 0         0 '';
191             }
192              
193              
194              
195              
196              
197             #####################################################################
198             # Tokenizer Methods
199              
200             sub __TOKENIZER__on_line_start() { 1 }
201             sub __TOKENIZER__on_line_end() { 1 }
202             sub __TOKENIZER__on_char() { 'Unknown' }
203              
204              
205              
206              
207              
208             #####################################################################
209             # Lexer Methods
210              
211             sub __LEXER__opens {
212             ref($_[0]) eq 'PPI::Token::Structure'
213             and
214 62136 50   62136   290507 $_[0]->{content} =~ /(?:\(|\[|\{)/
215             }
216              
217             sub __LEXER__closes {
218             ref($_[0]) eq 'PPI::Token::Structure'
219             and
220 331283 100   331283   1427046 $_[0]->{content} =~ /(?:\)|\]|\})/
221             }
222              
223             1;
224              
225             =pod
226              
227             =head1 SUPPORT
228              
229             See the L in the main module.
230              
231             =head1 AUTHOR
232              
233             Adam Kennedy Eadamk@cpan.orgE
234              
235             =head1 COPYRIGHT
236              
237             Copyright 2001 - 2011 Adam Kennedy.
238              
239             This program is free software; you can redistribute
240             it and/or modify it under the same terms as Perl itself.
241              
242             The full text of the license can be found in the
243             LICENSE file included with this module.
244              
245             =cut